distributed

6Ciepło

4Odpowiedz

Zadania Iskra nie wydają się być dobrze rozmieszczone.

Prowadzę pracę Sparka i wydaje się, że zadania nie są dobrze rozmieszczone (patrz załącznik). Czy istnieje sposób na równomierne rozłożenie zadań? Dzięki!

5Ciepło

1Odpowiedz

Java RMI: Jaka jest rola szkieletu generowanego przez kompilator rmic

Obecnie uczę się Java RMI (Remote Method Invocation), a ja poszedłem za tutorialem dostarczonym przez Oracle na jego stronie internetowej. Mam jednak konkretne pytanie: Jaki jest pożytek z szkieletu g

6Ciepło

2Odpowiedz

W jaki sposób funkcja `MonitoredTrainingSession()` działa z "przywracaniem" i "trybem testowania"?

W Tensorflow mogliśmy tworzyć i tworzyć wiele sesji Tensorflow, korzystając z szkolenia Between-graph Replication. MonitoredTrainingSession() koordynuje wiele sesji Tensorflow i istnieje argument chec

5Ciepło

3Odpowiedz

Jak ustawić liczbę reduktorów w sposób dynamiczny w zależności od mojego rozmiaru wyjściowego mapera?

Wiem, że liczba programów odwzorowujących można ustawić na podstawie rozmiaru podzielonego pliku dfs, ustawiając mapred.min.split.size na dfs.block.size. Podobieństwo w jaki sposób ustawić I liczbę re

9Ciepło

1Odpowiedz

Obliczanie macierzy międzyoperacyjnej macierzy korelacji krzyżowej

Jak mogę obliczyć matrycę korelacji krzyżowej Pearsona z dużego zbioru danych (> 10 TB), być może w sposób rozproszony? Sugerowana będzie każda skuteczna sugestia dotycząca rozproszonego algorytmu. zm

5Ciepło

1Odpowiedz

Spark 1.0.2 (także 1.1.0) wisi na partycji

Mam dziwny problem w iskierniku Apache i byłbym wdzięczny za pomoc. Po odczytaniu danych z hdfs (i wykonaniu jakiejś konwersji z json do obiektu) następny etap (przetwarzanie wymienionych obiektów) ko

6Ciepło

2Odpowiedz

Rozproszona kompilacja z bitbakiem

Masz pojęcie, jak zbudować projekt Oe z rozproszoną kompilacją bitów? Myślałem o distcc. export PATH=~/distcc/bin:$PATH make -jn CC=linux-gcc make będzie wywoływać linux-gcc z mojej ścieżki, która

9Ciepło

1Odpowiedz

Synchronizacja zookeepera z serwerem redis

Mam małą grupę serwerów, które muszę utrzymywać w synchronizacji. Początkowo myślałem o tym, aby jeden serwer był "głównym" i publikować aktualizacje za pomocą funkcji pub/sub redis (ponieważ używamy

16Ciepło

1Odpowiedz

Redis, dystrybuowane czy nie?

Pytanie 1: Wiem, że Redis ładuje wszystkie dane do pamięci, poprawiając w ten sposób szybkość odczytu/zapisu. Czy to oznacza, że jeśli moja wielkość pamięci to 2G, maksymalny rozmiar zbioru danych n

6Ciepło

1Odpowiedz

Rozproszone kompilacje w XCode 4.5?

Chciałbym włączyć "Rozproszone kompilacje", aby mój Mac mógł budować budynek na innych wolnych komputerach Mac w biurze, aby przyspieszyć czas budowy. Podobno kiedyś „Distributed Buduje” opcję w prefe