flink-statefun相关内容

Python Flink Stateful函数入口上的Kafka键访问

我一直在研究Flink Stateful函数。它看起来非常有希望--除了一件事--我希望我只是错过了它。 我怎么也看不到从Python中的Kafka入口处访问Kafka密钥的方法。在Java中,我看到可以使用反序列化程序并有效地将其打包到已解码的message对象中。但我找不到替代方案。 在我们的示例中,键包含值中不存在的有价值的信息。 有没有人碰到这个--或者我刚刚错过了? ..
发布时间:2022-03-15 11:55:56 Python

flink 中自定义类的 hashCode() 和 equals() 方法

我怀疑 Flink 中的自定义类是否需要覆盖 hashCode() 和 equals() 方法,因为我已经阅读了 这个页面 hashCode() 绝不能在分布式系统中实现,Apache Flink 就是其中之一. 示例:我有这个类: public class EventCounter {公共字符串 ID;公长计数;公共时间戳 firstEvent;公共时间戳 lastEvent;公开日期; ..

flink 中自定义类的 hashCode() 和 equals() 方法

我怀疑 Flink 中的自定义类是否需要覆盖 hashCode() 和 equals() 方法,因为我已经阅读了 这个页面 hashCode() 绝不能在分布式系统中实现,Apache Flink 就是其中之一. 示例:我有这个类: public class EventCounter {公共字符串 ID;公长计数;公共时间戳 firstEvent;公共时间戳 lastEvent;公开日期; ..

最小延迟的 Flink 最佳配置

对于 Flink 流/Flink 有状态函数,众所周知,将 setBufferTimeout 设置为较小的值(例如,5 毫秒)将提供“最佳"延迟体验.在优化 Flink 流或有状态函数作业中的延迟时,必须注意的其他推荐配置值是什么(设置、重置、修改...)? 解决方案 端到端延迟受多种因素影响.忽略事件被 Flink 摄取之前产生的延迟,剩下这些问题需要考虑: 网络缓冲区超时 序列 ..
发布时间:2021-11-12 01:01:47 其他开发