OT:Fragmentace

[Jindroush]

Pokud je to tak, ze ackoli je 100 vlaken, ale je tam jedna casova osa, 
tak bych to resil kombinaci technik
a) sdilena cache v pameti, ktera cachuje objem/cas dat a naraz je vysype 
na disk
b) pred-alokovaval bych vystupni soubor, tj. mel bych 1MB predalokovany 
a az bych ho zaplnil, prodlouzil bych soubor o dalsi 1MB.
Tim se vyhnu fragmentaci.

Jinak je otazka, zda se nedaji pouzit jine, hotove, overene technologie 
- nejaky message queing a la RabbitMQ apod., nebo mozna primo existuji 
hotove projekty pro graphing iot senzoru.

J.

On 02.08.2020 21:42, Martin Záruba wrote:
> Jasně. To mě taky napadlo. Data přibývají spojitě, vždy cca po 10 s 
> asi 100 byte.
>
> Jenže jak se to zachová, když více vláken spustí zápis (je to 4 jádro) 
> současně? Provede se to sekvenčně? Myslím to tak, že pokud vznikne 
> současně ze dvou vláken zápis, vytvoří jedno vlákno souvislý blok 
> (třeba nul) a pak druhé, nebo se prostřídají a stejně to bude 
> fragmentované?
>
> Já doufal, že něco podobného existuje na úrovni systému, tedy že lze 
> nastavit minimální velikost bloku. Samozřejmě pro většinu aplikací by 
> to bylo kontraproduktivní, ale mě by se to velmi hodilo. Eventuelně 
> stejně pokukuji po tom to celé předělat na linux a pokud by to na 
> linuxu šlo, byl by to významný důvod. Teď to běží na W2000 naprosto 
> bez problémů (je to server řídících jednotek připojených tepelných 
> čerpadel). Ukázka, co to umí je tady:
>
> http://www.ekovy.cz/servis/index.htm?firma=demo
>
> Martin Záruba
>
> Dne 2.8.2020 v 19:59 Martin Záruba napsal(a):
>> Mám program, kde běží stále cca 100 vláken a každé zapisuje data do 
>> svého souboru. Výsledkem je po celkem krátké době šílená fragmentace 
>> disku. Bloky jsou cca 100 byte. Nelze nějak NTFS přimět k tomu, aby 
>> vždy vyhradil třeba 1MB a tím by několik tisíc vzorků bylo uloženo za 
>> sebou bez fragmentace?
>>
> _______________________________________________
> HW-list mailing list  -  sponsored by www.HW.cz
> Hw-list at list.hw.cz
> http://list.hw.cz/mailman/listinfo/hw-list


-- 
Jindroush <jindroush at seznam.cz>