-
Data: 2010-09-19 11:27:42
Temat: Re: bash: konkurencyjne przekierowanie jednego pliku do wielu programów
Od: klops <k...@k...pl> szukaj wiadomości tego autora
[ pokaż wszystkie nagłówki ]Chyba najprościej to:
* w pętli (do końca pliku wejściowego):
* w pętli (np. 8 dla 8 rdzeni):
* odczytać parę wierszy
* uruchomić nowy proces do przetwarzania
* w pętli (np. 8 dla 8 uruchomionych procesów roboczych)
* czekać na koniec procesu
Wada - dla każdej pary wierszy trzeba tworzyć nowy proces.
Albo na upartego 2 skrypty:
Skrypt 1: z parametrem ilość procesów roboczych (np. 8). W skrypcie:
* dzielisz liczbę wierszy do przetworzenia przez liczbę procesów
* ustalasz zakresy wierszy do przetwożnia dla wszystkich procesów
* uruchamiasz Skrypt 2 z odpowiednimi parametrami
Skrypt 2: z parametrem zakres wierszy do przetworzenia. W skrypcie:
* Odczytujesz zakres wierszy.
* Pchasz to rurą do programu roboczego.
Wada: idealistyczne założenie, że wszystkie pary wierszy z pliku
wejściowego wymagają takiej samej ilości obliczeń.
Następne wpisy z tego wątku
- 19.09.10 19:38 Mariusz Marszałkowski
- 19.09.10 20:01 Michoo
- 19.09.10 23:47 Mariusz Marszałkowski
- 20.09.10 06:43 Maciej Pilichowski
- 20.09.10 09:22 hubert depesz lubaczewski
- 20.09.10 19:21 klops
- 20.09.10 22:38 Mariusz Marszałkowski
- 23.09.10 20:20 slawek
- 02.10.10 09:12 Mariusz Marszałkowski
Najnowsze wątki z tej grupy
- 7. Raport Totaliztyczny: Sprawa Qt Group wer. 424
- TCL - problem z escape ostatniego \ w nawiasach {}
- Nauka i Praca Programisty C++ w III Rzeczy (pospolitej)
- testy-wyd-sort - Podsumowanie
- Tworzenie Programów Nieuprzywilejowanych Opartych Na Wtyczkach
- Do czego nadaje się QDockWidget z bibl. Qt?
- Bibl. Qt jest sztucznie ograniczona - jest nieprzydatna do celów komercyjnych
- Co sciaga kretynow
- AEiC 2024 - Ada-Europe conference - Deadlines Approaching
- Jakie są dobre zasady programowania programów opartych na wtyczkach?
- sprawdzanie słów kluczowych dot. zła
- Re: W czym sie teraz pisze programy??
- Re: (PDF) Surgical Pathology of Non-neoplastic Gastrointestinal Diseases by Lizhi Zhang
- CfC 28th Ada-Europe Int. Conf. Reliable Software Technologies
- Młodzi programiści i tajna policja
Najnowsze wątki
- 2024-12-20 Precedensy politycznie motywowanego nie wydawania w UE
- 2024-12-20 Obrońcy
- 2024-12-20 Obrońcy
- 2024-12-20 Obrońcy
- 2024-12-20 Gdańsk => Inżynier bezpieczeństwa aplikacji <=
- 2024-12-20 czyste powietrze
- 2024-12-20 Katowice => Analyst in the Trade Development department (experience wi
- 2024-12-20 Opole => Inżynier Serwisu Sprzętu Medycznego <=
- 2024-12-20 Katowice => Regionalny Kierownik Sprzedaży (OZE) <=
- 2024-12-20 Rzeszów => International Freight Forwarder <=
- 2024-12-20 Katowice => Key Account Manager (ERP) <=
- 2024-12-20 Ekstradycja
- 2024-12-20 Mikroskop 3D
- 2024-12-20 Warszawa => Spedytor Międzynarodowy <=
- 2024-12-20 Warszawa => Analityk w dziale Trade Development (doświadczenie z Powe