Spark Dataframe最大列数 [英] Spark Dataframe Maximum Column Count

查看:530
本文介绍了Spark Dataframe最大列数的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

spark Dataframe的最大列数是多少?我尝试从数据框文档中获取它,但是找不到它.

What is the maximum column count of spark Dataframe? I tried getting it from data frame documentation but unable to find it.

推荐答案

从体系结构的角度看,它们是可伸缩的,因此列数不应有任何限制,但会导致节点和负载的负载不均. ;可能会影响转换的整体效果.

From the architectural perspective, they are scalable, so there should not be any limit on the column count, but it can give rise to uneven load on the nodes & may affect the overall performance of your transformations.

这篇关于Spark Dataframe最大列数的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆