wywoływanie funkcji SQL z Blaze

Question

W szczególności chciałbym zadzwonić do funkcji Postgres levenshtein. chciałbym napisać blasku zapytanie do powrotu słowa podobne do słowa „podobny”, czyli równowartość:

select word from wordtable where levenshtein(word, 'similar') < 3; 

W Blaze powinno to wyglądać mniej więcej tak

db.wordtable.word[levenshtein(db.wordtable.word, 'similar') < 3] 

ale levenshtein nie jest zdefiniowane w dowolnym module, który importuję po stronie Pythona. Gdzie/jak uzyskać definicję levenshtein do użycia w wyrażeniach Blaze po stronie Pythona?

---

Znalazłem pakiet sqlalchemy.sql.func który zapewnia Python uchwyty do funkcji SQL do użytku z sqlalchemy, ale te nie działają w wyrażeniach Blaze. Czy istnieje odpowiednik pakietu Blaze lub jak mogę użyć sqlalchemy.sql.func.levenshtein w wyrażeniu Blaze?

Answer 1

Blaze to tylko frontend; i przebudowuje, a następnie wysyła zapytanie do Backendu SQL, który zbiera dane z DB.

From the doku:

Jakie operacje pracować na bazach danych SQL? Większość operacji tabelarycznych, ale nie wszystkie. Tłumaczenie SQLAlchemy ma wysoki priorytet. Niepowodzenia obejmują tablice operacje takie jak wycinanie i produkty z kropkami nie mają sensu w SQL. Dodatkowo niektóre operacje, takie jak dostęp do czasu dostępu, jeszcze nie są dobrze obsługiwane przez SQLAlchemy. Wreszcie niektóre bazy danych, takie jak SQLite, mają ograniczone wsparcie dla wspólnych funkcji matematycznych, takich jak grzech.

Blaze ma na celu zapomnieć o zapleczu i mieć podobną/tę samą składnię dla wszystkich backendów. Dlatego obsługuje tylko typowe operacje. Moim zdaniem, nie ma możliwości określenia funkcji sqlalchemy lub postgresql dla użycia blaze, więc myślę, że to już nie jest możliwe.

... ALE Blaze ma wersję 0.10, jest to rodzaj beta z aktywnym wkładem w zeszłym roku. Jestem przekonany, że zostanie to zaimplementowane za jakiś czas. Zawsze możesz śledzić zmiany w release notes.

Dodawanie: Dodawanie: Aby uzyskać więcej informacji na temat funkcji UDF (funkcji zdefiniowanych przez użytkownika) w SQL i pracy z nimi w trybie blasku, porównaj link provided by beldaz (bardzo podobny do tego pytania).

Answer 2

jest twoim przyjacielem. Wyszukiwanie tam znajduje pakiet python-Levenshtein . Jeśli jesteś w systemie Windows i chcesz wersji skompilowanej, użyj Christoph Gohlke's wheel (jego kompilacje są bezpieczne, niezawodne i poprawne, kompilacje numpy korzystają z bibliotek MKL, więc też są szybkie!).

Answer 3

Jeśli chcesz zobaczyć te słowa i wykonać kilka prostych czynności, możesz spróbować załadować przefiltrowane dane do Blaze z zapytania PostgreSQL.

from blaze import data 
import sqlalchemy as sa 

engine = sa.create_engine('postgresql://...') 
result = engine.execute('''select word from wordtable where levenshtein(word, 'similar') < 3;''') 
rows = result.fetchall() 
wordtable = data(rows) 

# Now you may work with wordtable as a blaze table 
wordtable[wordtable.word.like('a*')] # all words starting with 'a'