我在python中有一个列表,其中包含重复的数据帧。目的是整体删除这些重复的数据帧。这是一些代码:
import pandas as pd
import numpy as np
##Creating Dataframes
data1_1 =[[1,2018,80], [2,2018,70]]
data1_2 = [[1,2017,77], [3,2017,62]]
df1 = pd.DataFrame(data1_1, columns = ['ID', 'Year', 'Score'])
df2 = pd.DataFrame(data1_2, columns = ['ID', 'Year', 'Score'])
###Creating list with duplicates
all_df_list = [df1,df1,df1,df2,df2,df2]
理想的结果是这样的:
###Desired results
desired_list = [df1,df2]
有没有一种方法可以删除python列表中的所有重复数据帧?
谢谢
我们可以结合使用pandasDataFrame.equals
和pandas来相互比较列表中的项目:list comprehension
enumerate
desired_list = [all_df_list[x] for x, _ in enumerate(all_df_list) if all_df_list[x].equals(all_df_list[x-1]) is False]
print(desired_list)
[ ID Year Score
0 1 2018 80
1 2 2018 70, ID Year Score
0 1 2017 77
1 3 2017 62]
DataFrame.equals
True
如果比较的数据帧相等,则返回:
df1.equals(df1)
True
df1.equals(df2)
False
注意:正如文本在评论中指出的那样。您的清单应按排序[df1, df1, df1, df2, df2, df2]
。或使用更多df:[df1, df1, df2, df2, df3, df3]
本文收集自互联网,转载请注明来源。
如有侵权,请联系 [email protected] 删除。
我来说两句