google-bigquery

5Ciepło

1Odpowiedz

Autoryzacja dostępu do BigQuery z sesji R na serwerze

Używam R i pakiet Bigrquery, aby uzyskać dostęp do BigQuery z sesji R. Działa to świetnie, dopóki jestem na mojej lokalnej maszynie. Jednak, gdy próbuję uzyskać dostęp do BigQuery z R na zdalnym serwe

5Ciepło

1Odpowiedz

Jak mogę znaleźć rozmiar zestawu danych BigQuogle, a nie rozmiary tabel?

Widzę szczegóły metadanych tabel w BigQuery, ale dla oszacowań projektów mam nadzieję zobaczyć metadane całego zestawu danych. SELECT * From 'dataset'._TABLES_SUMMARY_WHERE size_bytes>0 isn't working

5Ciepło

2Odpowiedz

Jak dokładnie określa się wartość count (*) w BigQuery?

Dołączam do stołu złożonego z około 70000 rzędów z nieco większym drugim stołem poprzez wewnętrzny łączący każdy. Teraz licz (a.business_column) i count (*) dają różne wyniki. Ten pierwszy poprawnie z

7Ciepło

3Odpowiedz

Uzyskaj dostęp do danych BigQuery Google z lokalnych notebooków Jupyter

Dostałem kilka notebooków i działało na DataLab. Chciałbym, z różnych powodów, uzyskać dostęp do tych samych danych z lokalnego notatnika Jupyter na moim komputerze. This question zasugerował kilka po

5Ciepło

1Odpowiedz

Zapytania BigQuery zagnieżdżone/powtórzone pola

Jestem nowym użytkownikiem BigQuery (i sql) i próbuję skonfigurować tabelę, w której każdy wiersz zawiera kolumnę message (ciąg) i metadata kolumnę (powtórzoną). Chcę użyć kolumny metadanych, aby móc

5Ciepło

2Odpowiedz

Wybieranie hurtowni danych dużych

W dzisiejszych czasach wyzwaniem było stworzenie hurtowni danych do przechowywania i przetwarzania ogromnej ilości danych. Szacowana kwota to ponad 7 miliardów wydarzeń dziennie. Dane powinny być prze

6Ciepło

3Odpowiedz

BigQuery - usuń nieużywaną kolumnę ze schematu

Przypadkowo dodałem niewłaściwą kolumnę do mojego schematu tabeli BigQuery. Zamiast przeładowywania pełną tabelę (miliony wierszy), chciałbym wiedzieć, czy po to możliwe: usunąć złych wierszy (wiersze

6Ciepło

2Odpowiedz

Synchronizacja Amazon RDS z Google BigQuery

Ludzie, firma, w której pracuję, ma kilka baz danych MySQL na temat AWS (Amazon RDS). Tworzymy POC z BigQuery, a obecnie badam to, jak powielić bazy do BigQuery (istniejące rejestry i nowe w przyszłoś

10Ciepło

3Odpowiedz

Usuwanie zduplikowanych wierszy z tabeli BigQuery

Mam tabelę zawierającą> 1 mln wierszy danych i ponad 20 kolumn. W ramach mojej tabeli (tabela X) zidentyfikowałem zduplikowane rekordy (~ 80 tys.) W jednej konkretnej kolumnie (kolumna_adresów). Jeśli

5Ciepło

3Odpowiedz

BigQuery creat powtórzone pole rekordu z zapytania

Czy w BigQuery można utworzyć kolumnę powtarzalnych rekordów? Na przykład dla następujących danych: | a | b | c | ------------- | 1 | 5 | 2 | ------------- | 1 | 3 | 1 | ------------- | 2 | 2 |