large-data

5Ciepło

2Odpowiedz

python - łączenie argsort z maskowaniem w celu uzyskania najbliższych wartości w ruchu okna

Mam kod do obliczania brakujących wartości w obrazie, w oparciu o sąsiadujące wartości w okólniku 2D. Wykorzystuje również wartości z jednego lub więcej sąsiadujących ze sobą obrazów w tych samych lok

python arrays numpy image-processing large-data 2014-10-16

---

8Ciepło

1Odpowiedz

Używanie indeksu na wewnętrznym sprzężeniu tabeli w MySQL

Mam tabelę Foo z 200 milionami rekordów i tablicą z 1000 rekordami, są one połączone wiele do jednego. Istnieją indeksy dla kolumn Foo.someTime i Bar.someField. Również w barze 900 zapisy someField 1,

mysql indexing inner-join large-data 2013-06-13

---

6Ciepło

3Odpowiedz

Jak przechowywać wyjątkowo duże liczby?

Na przykład mam program silni, który musi zapisać naprawdę duże liczby całkowite, które mogą mieć ponad 50 cyfr. Maksymalny podstawowy typ danych w C++ to unsigned long long int o maksymalnej wartości

c++ data-structures int large-data 2013-08-05

---

6Ciepło

1Odpowiedz

Wprowadzanie dużej ilości danych do BigQuery za pośrednictwem biblioteki BigQuery-Pythona

Mam duże pliki CSV i pliki Excel, w których je czytam i dynamicznie utworzę potrzebny skrypt tabeli tworzenia, w zależności od pól i typów, jakie ma. Następnie wstaw dane do utworzonej tabeli. Przeczy

python python-2.7 google-bigquery large-data 2016-08-16

---

6Ciepło

1Odpowiedz

Jak skutecznie przechowywać dużą mapę Java?

Jestem brutalnie wymuszając jedną grę i muszę przechowywać dane dla wszystkich pozycji i wyników. Dane prawdopodobnie będą miały setki Gb. Rozważałem SQL, ale obawiam się, że wyszukiwania w ciasnej pę

java sql large-data 2016-11-24

---

7Ciepło

1Odpowiedz

Błąd przepełnienia stosu ochrony przed przepełnieniem

Używam fread w data.table (1.8.8, R 3.0.1) w celu odczytu bardzo dużych plików. Plik, którego dotyczy pytanie, ma 313 wiersze i ~ 6,6 milionów kolsjek wierszy danych liczbowych, a plik ma około 12 GB.

r data.table large-data 2013-08-26

---

15Ciepło

1Odpowiedz

Podziel duży plik według wartości w pojedynczej kolumnie (AWK)

Chciałbym podzielić duży plik (10^6 wierszy) zgodnie z wartością w 6. kolumnie (około 10 * 10^3 unikatowych wartości). Jednak nie mogę go uruchomić z powodu liczby rekordów. To powinno być łatwe, ale

awk split genetic large-data 2013-05-19

---

5Ciepło

4Odpowiedz

Prealocacja dużej tablicy w pliku MATLAB z innym niż zerowym

Potrzebuję napisać tablicę, która jest zbyt duża, aby zmieścić się w pamięci do pliku binarnego .mat. Można to osiągnąć za pomocą polecenia matfile, które umożliwia losowy dostęp do pliku .mat na dysk

arrays matlab large-data 2014-10-01

---

5Ciepło

1Odpowiedz

Plik odwzorowany w pamięci dla numpy tablic

Potrzebuję odczytywać w częściach ogromnej tablicy numpy przechowywanej w pliku zmapowanym w pamięci, przetwarzać dane i powtarzać dla innej części tablicy. Cała ta zmienna tablica zajmuje około 50 GB

numpy memory large-files large-data 2014-10-05

---

5Ciepło

1Odpowiedz

Java Swing Wyświetlanie dużych ilości danych z ArrayLists

Nie mogę podać kodu, ponieważ jest to abstrakcyjny problem, przed którym obecnie stoję. Pracuję nad programem, który pozwala użytkownikowi śledzić graczy z gier. Program zasadniczo zapisuje informacje

java swing arraylist large-data 2015-06-13

---