avro

6Ciepło

1Odpowiedz

NoSuchMethodError pisanie Avro obiekt do HDFS użyciu Builder

Dostaję ten wyjątek podczas pisania obiektu do HDFS: Exception in thread "main" java.lang.NoSuchMethodError: org.apache.avro.Schema$Parser.parse(Ljava/lang/String;[Ljava/lang/String;)Lorg/apache/avro/

6Ciepło

2Odpowiedz

Jak generować pliki avro bez schema używając apache avro?

Używam Apache avro do serializacji danych. Ponieważ dane mają stały schemat, nie chcę, aby schemat był częścią zserializowanych danych. W poniższym przykładzie schemat jest częścią pliku avro "users.a

9Ciepło

1Odpowiedz

generowanie schematu AVRO z dokumentu JSON

Czy istnieje narzędzie zdolne do utworzenia schematu AVRO z "typowego" dokumentu JSON. Na przykład: { "records":[{"name":"X1","age":2},{"name":"X2","age":4}] } znalazłem http://jsonschema.net/rebo

9Ciepło

2Odpowiedz

Jak naprawić oczekiwany start-union. Mam VALUE_NUMBER_INT podczas konwersji JSON do Avro w wierszu poleceń?

Próbuję sprawdzić poprawność pliku JSON przy użyciu schematu Avro i napisać odpowiedni plik Avro. Po pierwsze, mam następujący schemat zdefiniowany Avro nazwie user.avsc: {"namespace": "example.avro",

16Ciepło

1Odpowiedz

Apache Kafka z Avro i Schema Repo - gdzie w wiadomości pojawia się schemat Id?

Chcę użyć Avro do serializowania danych dla moich wiadomości Kafka i chciałbym użyć go z repozytorium schematów Avro, więc nie muszę dołączać schematu do każdej wiadomości. Używanie Avro z Kafką wydaj

9Ciepło

3Odpowiedz

Ogólna konwersja z POJO do rekordu Avro

Szukam sposobu na konwersję POJO na obiekt avro w sposób ogólny. Implementacja powinna być odporna na wszelkie zmiany w klasie POJO. Osiągnąłem to, ale wyraźnie zapełniłem rekord avro (patrz przykład

7Ciepło

3Odpowiedz

Json String to Java Object Avro

Próbuję przekonwertować ciąg Json na ogólny obiekt Java, ze schematem Avro. Poniżej znajduje się mój kod. String json = "{\"foo\": 30.1, \"bar\": 60.2}"; String schemaLines = "{\"type\":\"record\",\"

5Ciepło

2Odpowiedz

Znaleziono interfejs org.apache.hadoop.mapreduce.TaskAttemptContext

Nie widziałem dotąd rozwiązania mojego konkretnego problemu. To nie działa co najmniej. To doprowadza mnie do szału. Ta szczególna kombinacja nie wydaje się mieć wiele w przestrzeni Google. Mój błąd w

8Ciepło

1Odpowiedz

Jak avro kodować binarnie mój ciąg json do tablicy bajtów?

Mam rzeczywisty ciąg JSON, który potrzebuję do avro kodowania binarnego do tablicy bajtowej. Po przejściu przez Apache Avro specification, wymyśliłem poniższy kod. Nie jestem pewien, czy jest to właśc

6Ciepło

3Odpowiedz

Json na konwersję avro

Konwertuję JSON na avro. Mam dane json w JSONArray. Tak więc przy konwertowaniu go na tablicę bajtową napotykam problem. poniżej jest mój kod: static byte [] fromJsonToAvro(JSONArray json, String sche