复杂的云数据流管道不会在开发人员控制台中显示执行图表 [英] Complex Cloud Dataflow pipelines don't show the execution graph in the developer console

查看:16
本文介绍了复杂的云数据流管道不会在开发人员控制台中显示执行图表的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

我们正在实现一个相当复杂的管道,它由几个链接在一起的GroupBy和Combine组成。除此之外,管道还应用了KeyedPCollectionTuple。

此管道可以成功执行,但图形不会显示在Google开发人员控制台中。仅显示日志。 也缺少这些步骤。

有什么方法可以让它们显示出来吗?

推荐答案

这是因为如果任何转换的分配名称为空,则无法显示图形。

Github问题#58已创建以解决此问题。

同时,请查看您的代码,并确保任何.apply(name, transform)调用都不会有空的name字符串或以/字符开头的名称。还要确保setNamenamed的任何用法都满足这些要求。

这篇关于复杂的云数据流管道不会在开发人员控制台中显示执行图表的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆