从 Kafka Connect 到 S3 的 Parquet 输出 [英] Parquet Output From Kafka Connect to S3
本文介绍了从 Kafka Connect 到 S3 的 Parquet 输出的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！
问题描述
我看到 Kafka Connect 可以以 Avro 或 JSON 格式写入 S3.但是没有 Parquet 支持.添加这个会有多难?
I see Kafka Connect can write to S3 in Avro or JSON formats. But there is no Parquet support. How hard would this be to add?
推荐答案
从 Confluent 5.4.0 开始，官方支持 Parquet 输出到 S3.
Starting with Confluent 5.4.0, there is official support for Parquet output to S3.
这篇关于从 Kafka Connect 到 S3 的 Parquet 输出的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！
查看全文
