Wywoływanie wielu tabel w Big Query

Question

Ponieważ nie jest możliwa aktualizacja danych w tabeli w BigQuery i obsługiwany jest tylko mechanizm dołączania, zdecydowałem się tworzyć nowe tabele miesięcznie. Załóżmy, że dla roku 2012 tabele będą (tbl_012012, tbl_022012, , ... tbl_122012). Każdy rekord będzie przechowywany wraz z datą timestamp jako ciąg.

Teraz, jeśli moja aplikacja chce pobrać zapisy od stycznia 2012 (tbl_012012) do marca 2012 (tbl_032012), czy interfejs BigQuery API będzie automatycznie przechodzić przez żądane tabele za pomocą pojedynczego zapytania SQL lub czy będę musiał napisać wiele zapytań SQL z dodatkowym kodem aplikacji, aby pobrać każdy wynik zapytania, a następnie zagregować je w całości?

Answer 1

Jedno zapytanie SQL może odwoływać się do wielu tabel. Po prostu oddziel każdą tabelę przecinkiem w klauzuli FROM, aby uzyskać zapytanie dotyczące wszystkich wymienionych tabel.

Answer 2

Oto urywek demonstrując przykładową tabelą wielokrotnego wyboru:

SELECT trafficSource.medium AS Traffic_Source, COUNT(trafficSource.medium) AS Counts_Source 
FROM [608XXXXX.ga_sessions_20131008], 
[608XXXXX.ga_sessions_20131009], 
[608XXXXX.ga_sessions_20131010], 
[608XXXXX.ga_sessions_20131011], 
[608XXXXX.ga_sessions_20131012], 
[608XXXXX.ga_sessions_20131013], 
[608XXXXX.ga_sessions_20131014], 
[608XXXXX.ga_sessions_20131015], 
GROUP BY Traffic_Source 
ORDER BY Counts_Source DESC 

Answer 3

Można również użyć funkcji Tabela wieloznacznych. Oto jeden z przykładów z docs dla StandardSQL:

SELECT 
    name 
FROM 
    mydata.people 
WHERE 
    age >= 35 
    AND 
    (_TABLE_SUFFIX BETWEEN '20140325' AND '20140327') 

A oto podobny przykład dla LegacySQL (docs).

SELECT 
    name 
FROM 
    (TABLE_DATE_RANGE([mydata.people], 
       TIMESTAMP('2014-03-25'), 
       TIMESTAMP('2014-03-27'))) 
WHERE 
    age >= 35 

Ten wyśle ​​zapytanie tabele:

• mydata.people20140325
• mydata.people20140326
• mydata.people20140327

Istnieje kilka innych opcji na docs. Zaleciłbym sprawdzenie ich.

Answer 4

2017 aktualizacja:

Dzięki BigQuery #standardSQL - można użyć standardowego UNION ALL przejść przez wielu tabel, można też użyć * dopasować wszystkie tabele, które dzielą ten sam prefiks. Podczas korzystania z macierzy * będziesz mieć również dostęp do meta-kolumny _TABLE_SUFFIX - aby dowiedzieć się, z której tabeli pochodzą wiersze.

SELECT * FROM Roster 
UNION ALL 
SELECT * FROM TeamMascot