-
1. Data: 2009-10-09 17:19:25
Temat: Dużo bitów - mało czasu
Od: "PcmOL" <...@...net>
Jak zapisać te nędznych parę bitów w jednostce czasu, gdy dane nadchodzą z
ciągłą (sustained) prędkością rzędu 10GiB/s, a ich liczba sięga dziesiątek
terabajtów?
Mniej więcej wiem jak to zrobić energochłonnymi i/lub kosmicznie drogimi
protezami, ale też tak sobie myślę o innych dziwadłach.
Taki luźny temat łyk-endowy, trochę Sci-Fi.
-
2. Data: 2009-10-09 23:54:07
Temat: Re: Dużo bitów - mało czasu
Od: Adam Dybkowski <a...@4...pl>
PcmOL pisze:
> Jak zapisać te nędznych parę bitów w jednostce czasu, gdy dane nadchodzą
> z ciągłą (sustained) prędkością rzędu 10GiB/s, a ich liczba sięga
> dziesiątek terabajtów?
To znaczy szukasz nośnika o pojemności dziesiątek terabajtów i
transferze podczas zapisu rzędu 1 gigabajta na sekundę? Idealnie do tego
nadawałaby się macierz RAID0 złożona z dysków SSD. Albo podtrzymywana
akumulatorem pamięć RAM - kwestia tylko pojemności i ceny, bo prędkością
wyrobi nawet zwykły pecetowy DDR2. A po zrzuceniu próbki do RAMu potem
już spokojnie kopiujesz na macierz tanich dysków SATA (przy zapisach
100MB/s wystarczy macierz 16-dyskowa RAID0 aby wyciągnąć ok. 1GB/s).
BTW: A docelowo to popytaj chłopaków z CERNu, oni jakoś w końcu muszą
zapisywać całe góry danych z Wielkiego Zderzacza.
--
Adam Dybkowski
http://dybkowski.net/
Uwaga: przed wysłaniem do mnie maila usuń cyfry z adresu.
-
3. Data: 2009-10-10 07:38:53
Temat: Re: Dużo bitów - mało czasu
Od: "Michał Lankosz" <m...@t...pl>
Użytkownik "Adam Dybkowski" <a...@4...pl> napisał w wiadomości
news:haoies$r6t$1@news.onet.pl...
> PcmOL pisze:
>
>> Jak zapisać te nędznych parę bitów w jednostce czasu, gdy dane nadchodzą
>> z ciągłą (sustained) prędkością rzędu 10GiB/s, a ich liczba sięga
>> dziesiątek terabajtów?
>
> To znaczy szukasz nośnika o pojemności dziesiątek terabajtów i
> transferze podczas zapisu rzędu 1 gigabajta na sekundę? Idealnie do tego
> nadawałaby się macierz RAID0 złożona z dysków SSD. Albo podtrzymywana
> akumulatorem pamięć RAM - kwestia tylko pojemności i ceny, bo prędkością
> wyrobi nawet zwykły pecetowy DDR2. A po zrzuceniu próbki do RAMu potem
> już spokojnie kopiujesz na macierz tanich dysków SATA (przy zapisach
> 100MB/s wystarczy macierz 16-dyskowa RAID0 aby wyciągnąć ok. 1GB/s).
>
Jak rozumieć: "Jak zapisać te nędznych parę bitów w jednostce czasu"? Jeśli
ze strumienia ma być przechwycone kilka bitów to może inna machineria
potrzebna? Poza tym nie wiadomo, czy człowiek dysponuje jakimkolwiek
interfejsem do komputera. Jakie to medium?
> BTW: A docelowo to popytaj chłopaków z CERNu, oni jakoś w końcu muszą
> zapisywać całe góry danych z Wielkiego Zderzacza.
Do tego są całe zaprzęgi urządzeń/komputerów połączone w kaskady, na każdym
etapie robiona jest filtracja danych i gdy strumienie danych nadają się już
do dalszej transmisji kierowane do ośrodków obliczeniowych na świecie.
Przynajmniej tak miało być, takie schematy i opisy oglądałem, gdy prowadzone
były symulacje zaprojektowanego systemu.
Michał