筛选在PYSPARK中不包含字符串的行

时间:2020-08-06 10:24:56

标签: apache-spark pyspark

search = search.filter(!F.col("Name").contains("ABC"))

search = search.filter(F.not(F.col("Name").contains("ABC"))

这两种方法均由于语法错误而失败,请您帮我过滤掉pyspark中不包含特定字符串的行。

^ SyntaxError:语法无效

1 个答案:

答案 0 :(得分:2)

在列表达式中,

search.filter(~col("Name").contains("ABC"))

其中~用于not条件。

相关问题