如何在一列pyspark中删除具有空值的行

杰克

我有一个数据框,我想将所有带有NULL值的行都放在列(字符串)之一中。我可以很容易地得到:

df.filter(df.col_X.isNull()).count()

我尝试使用以下命令删除它。执行但计数仍返回正数

df.filter(df.col_X.isNull()).drop()

我尝试了不同的尝试,但返回“对象不可调用”错误。

流氓一号

数据帧是不可变的。因此,仅应用不删除null值的过滤器将创建一个新的数据框,该数据框不会包含具有null值的记录。

df = df.filter(df.col_X. isNotNull())

本文收集自互联网,转载请注明来源。

如有侵权,请联系 [email protected] 删除。

编辑于
0

我来说两句

0 条评论
登录 后参与评论

相关文章

如何在PySpark DataFrame中删除具有空值的所有列?

Pyspark DataFrame如何在所有列中删除带有空值的行?

如何在JavaScript中删除具有空值的3d数组的行

合并在一列中具有值而在另一列中具有空值的行

如何删除另一列中具有特定值的所有 NaN 值的行?

如何删除R上具有空值的行

如何在TypeScript中删除对象数组中具有空值的键?

如何在PostgreSQL中从具有空值的表中删除固定的行数

如何在SQL Server的表的所有列中选择具有空值的行?

删除一列中具有重复值但另一列中具有不同值的行

选择具有相同 id 但在另一列中的所有空值的行并按相同的 id 分组

仅当存在前一行具有空值时才向前填充数据框中的一列

如何在R的一列中添加具有不同值的新行

如何在派生列中排除具有空值的行?

Pyspark:如何为另一列中具有相同值的所有行设置相同的 id?

当3列具有空值时,用查询隐藏表中的一行

如何在不删除/删除其他重复行的情况下对 1 列中具有重复值的行和另一列中具有不同值的行进行分组?

如何在Laravel查询构建器中获取一列具有最高值而另一列具有特定值的行

如何获取在SQL中给定行具有空值的列数?

awk 将一列转换为多个具有空值的未知列

SQLite3:删除共享列值并且在另一列中具有一个或多个空值的所有行

如何在awk中删除具有相同的第一列和较低的第二列的行?

删除一列中具有重复值但其他列中具有不同值的行

删除具有空值的选定行的行

csv删除一列中具有重复值的所有行

删除某些行中某些行可能具有空值的特定行

删除r中另一列中具有相同ID但值不同的行

如何在pyspark使用的一行中修改一列值

如何过滤具有一列中的选择值但具有公共ID的行?