Это не решает проблему: avro-компилятор все еще генерирует поле даты joda для такого логического типа.

дний компилятор Avro (1.8.2) генерирует Java-исходники длядаты логических типов [http://avro.apache.org/docs/1.8.2/spec.html#Date]с участиемJoda времени [http://www.joda.org/joda-time/]основанные реализации. Как я могу настроить компилятор Avro ...

Используйте схему для преобразования сообщений AVRO с помощью Spark в DataFrame

Есть ли способ использовать схему для преобразования Avro [/questions/tagged/avro] сообщения от Кафка [/questions/tagged/kafka] с Искра [/questions/tagged/spark] в Dataframe [/questions/tagged/dataframe]? Файл схемы для записей пользователя: { ...

Невозможно правильно загрузить данные Twitter авро в таблицу улья

Oozie: Запустить действие Map-Reduce от Oozie <java>?

Структура сериализации данных

Я новичок в этом Apache Avro (платформа для сериализации). Я знаю, что такое сериализация, но почему существуют отдельные фреймворки, такие как avro, thrift, Protocol Buffers и Почему мы не можем использовать API сериализации Java вместо этих ...

Авро против Паркет

Для схемы выше:

оложим, у меня есть следующая схема: { "name" : "Profile", "type" : "record", "fields" : [ { "name" : "firstName", "type" : "string" }, { "name" : "address" , "type" : { "type" : "record", "name" : "AddressUSRecord", "fields" : [ { "name" : ...

Как записать вывод AVRO в карту hadoop уменьшить?

Я написал одну программу подсчета слов Hadoop, которая

Как читать и писать Map <String, Object> из / в паркетный файл на Java или Scala?

Ищете краткий пример о том, как читать и писать

MRUnit с Avro NullPointerException в сериализации

Я пытаюсь протестировать работу Hadoop .mapreduce Avro с помощью MRUnit. Я получаю исключение NullPointerException, как показано ниже. Я приложил часть кода и исходного кода. Любая помощь будет оценена. Спасибо Я получаю ...