Scala Dataframe空检查列 [英] Scala Dataframe null check for columns

问题描述

val new_df = df.filter($"type_interne" !== "" || $"type_interne" !== "null")

给我错误值 || 不是字符串的成员

Give me error value || is not member of string

当我使用 === 过滤器效果很好

When i use === works well for filter

val new_df = df.filter($"type_interne" === "" || $"type_interne" === "null")

推荐答案

问题好像是运算符的优先级，尝试使用大括号:

The problem seems to be the operator precedence, try to use braces:

 val new_df = df.filter(($"type_interne" !== "") || ($"type_interne" !== null))

你也可以这样写:

val new_df = df.filter(($"type_interne" !== "") or $"type_interne".isNotNull)

这篇关于Scala Dataframe空检查列的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！