从Kafka Connect到S3的木地板输出 [英] Parquet Output From Kafka Connect to S3

查看:66
本文介绍了从Kafka Connect到S3的木地板输出的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我看到Kafka Connect可以以Avro或JSON格式写入S3.但是没有Parquet支持.这将增加多少难度?

I see Kafka Connect can write to S3 in Avro or JSON formats. But there is no Parquet support. How hard would this be to add?

推荐答案

从Confluent 5.4.0开始,官方将Parquet输出到S3.

Starting with Confluent 5.4.0, there is official support for Parquet output to S3.

这篇关于从Kafka Connect到S3的木地板输出的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
相关文章
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆