Как преобразовать данные Protobuf в apache avro

Question

Я использую Apache Avro в моем проекте, и у меня есть требование сохранить будущие данные protobuf в схеме Avro. Я искал в Интернете, но не нашел никаких решений.

Как я могу это сделать?

Answer 1

Вы не можете десериализовать данные protobuf с помощью системы сериализации apache avro, потому что они не используют один и тот же протокол кодирования/декодирования .

Одним из способов решения вашей проблемы является создание системы интерфейса, которая десериализует протобуф предстоящих данных (с использованием системы protobuf). После этого шага вы можете легко заполнить свой сгенерированный класс дешифрованными данными.

Answer 2

Я реализовать преобразование из буфера протокола к Avro записи вы можете попробовать: https://github.com/cecol/protobuf-to-avro , но вам все еще нужно, чтобы обеспечить надлежащую схему буфера протокола .proto файла и соответствуют Avro Schema .avsc файлового