snappy

9Ciepło

3Odpowiedz

Jak mogę odczytać skompresowane pliki Snappy na HDFS bez korzystania z Hadoop?

Przechowuję pliki w HDFS w formacie kompresji Snappy. Chciałbym móc przeanalizować te pliki w lokalnym systemie plików systemu Linux, aby upewnić się, że proces Hadoop, który je utworzył, działał popr

hadoop compression hdfs snappy 2013-05-21

---

8Ciepło

2Odpowiedz

Porównanie między lz4 vs lz4_hc vs blosc vs snappy vs fastlz

Mam duży plik o wielkości 500 mb do kompresji w ciągu minuty z najlepszym możliwym stopniem kompresji. Dowiedziałem się, że te algorytmy są odpowiednie do mojego użytku. lz4 lz4_hc snappy quicklz blos

snappy lossless-compression lz4 2016-06-03

---

17Ciepło

2Odpowiedz

Metody pisania plików Parkietu za pomocą języka Python?

Mam problem ze znalezieniem biblioteki, która umożliwia zapisywanie plików Parkietu za pomocą języka Python. Dodatkowe punkty, jeśli mogę użyć Snappy lub podobnego mechanizmu kompresji w połączeniu z

python apache-spark apache-spark-sql parquet snappy 2015-10-05

---

5Ciepło

2Odpowiedz

Spark SQL - różnica między formatami kompresji gzip vs snappy vs lzo

Próbuję użyć Spark SQL do napisania pliku parquet. Domyślnie Spark SQL obsługuje gzip, ale obsługuje również inne formaty kompresji, takie jak snappy i lzo. Jaka jest różnica między tymi formatami kom

gzip apache-spark-sql parquet snappy lzo 2016-03-04

---