Jak uruchomić apache nutch różnych zadań w równoległy sposób

Question

Używam nutch 2.3. Wszystkie zadania uruchamiane są jeden po drugim, tj. Pierwszy generator, pobieranie, analiza, indeks itp. Chcę uruchomić kilka zadań jednocześnie. Wiem, że niektóre zadania nie mogą działać równolegle, ale inne mogą np. Analizować zadanie, dbupdate, indeksowanie powinny być uruchamiane z pobieraniem.

Czy to możliwe? Moim podstawowym celem jest ciągłe wykonywanie zleceń fetcherów. Przypuszczam, że możemy to zrobić z innym znacznikiem czasu. Czy każdy może prowadzić mnie we właściwy sposób?

Answer 1

Jeśli wyewidencjonujesz serwer aplikacji sieci Web firmy Nutch, okaże się, że może on wykonywać równolegle wiele zadań indeksowania. Powinieneś sprawdzić kod źródłowy Nutch 2.3 dla webapp [NutchUiServer]. Mam nadzieję że to pomoże.