data.table

5Ciepło

2Odpowiedz

Ładowanie bardzo dużego zestawu danych CSV do Pythona i R, walki Pandy

Załaduję ogromny csv (18 GB) do pamięci i zauważam bardzo duże różnice między R i Pythonem. To jest na AWS ec2 r4.8xlarge which has 244 Gb of memory. Oczywiście jest to skrajny przykład, ale zasada ob

7Ciepło

1Odpowiedz

Jak zachować łączenie kolumny bez zmian w sprzężeniu non-equi do data.table?

Próbowałem usunąć wiersze w data.frame, gdzie wartość w kolumnie posn nie była w zakresach podanych w innym data.frame, z funkcją łączenia non-equi data.table. Oto jak wygląda moje dane: library(data.

10Ciepło

1Odpowiedz

Błąd data.table R nie może zmienić nazwy kolumn, które są NA

Mam data.table gdzie niektóre nazwy kolumn są NA. próba zmiany ich na nazwę postaci kończy się niepowodzeniem i pozostają one NA. Udaje mi się je zastąpić, przełączając się do data.frame, ale czy jest

5Ciepło

1Odpowiedz

Pomiń NA w data.table przez

Chciałbym użyć data.table ale chciałby pominąć obliczenia j części, jeżeli by odpowiada brakuje (NA): Oto przykład data.table library(data.table) DT <- data.table(y=10, g=c(1,1,1,2,2,2,2,2,NA,NA))

5Ciepło

2Odpowiedz

Jak wykonywać operatory logiczne przez indeksowanie w data.table w R?

Próbuję dowiedzieć się, jak mogę wykonać logical operators, gdy używam indeksowania w data.table package w R? Poniżej znajduje się przykład. Tworzę datatable o nazwie dt. a następnie dokonać var2 jako

5Ciepło

2Odpowiedz

Jak połączyć wszystkie elementy listy z innej tabeli danych pod warunkiem

Mam następujące dane: library(data.table) dt1 <- data.table(var1 = c("wk1","wk1","wk2"), var2 = c(1,2,3)) dt2 <- data.table(var3 = c("a","b","c"), var2 = c(1,2,3)) lista <- lis

10Ciepło

1Odpowiedz

Dlaczego wybranie kolumn (y) z tabeli data.table powoduje wykonanie kopii?

Wygląda na to, że wybranie kolumn z tabeli data.table za pomocą [.data.table powoduje skopiowanie bazowego wektora (ów). Mówię o bardzo prostym wyborze kolumn, według nazwy, nie ma wyrażeń do obliczen

15Ciepło

2Odpowiedz

Skuteczna obliczenie macierzy VAR KOWARIANCJA w R

szukam wzrostu wydajności przy obliczaniu (auto) macierz kowariancji z pojedynczych pomiarów w czasie t z t, t-1 itp .. W macierzy danych, przy czym każdy rząd oznacza osobę fizyczną, a każda kolumna

5Ciepło

2Odpowiedz

Znajdowanie najbliższej wartości w data.table

Próbuję znaleźć najbliższą wartość dla każdej traktowanej obserwacji. Dane wyglądać następująco (dane z częściowym 1.2M OB): > dta id treatment score 1: 5 0 0.02381024 2: 10 0 0.05428605

6Ciepło

5Odpowiedz

cbind z częściowo zagnieżdżoną listą

Próbuję uzyskać cbind lub unnest lub as.data.table listę częściowo zagnieżdżoną. id <- c(1,2) A <- c("A1","A2","A3") B <- c("B1") AB <- list(A=A,B=B) ABAB <- list(AB,AB) nested_list <- list(id=id