时间:2021-05-22
有一些问题可能会遇到同元素多列去重问题,下面介绍一种非常简单效率也很快的做法,用pandas来实现。
首先我们看一下数据类型:
G1 G2a bb ac dd ce f对这样的两列数据进行同元素去重,最终得到结果为:
G1 G2a bc de f代码如下:
#-*- coding: utf-8 -*-data = {'G1':['a','b','c','d','e'],'G2':['b','a','d','c','f']}data = pd.DataFrame(data)data['G3'] = data['G1'] + '|' + data['G2']p = []for i in data['G3'].tolist(): tmp = sorted(i.split('|')) # The most important part,sort p.append(tmp[0] + '|' + tmp[1])data['G3'] = pd.Series(p)data = data.drop_duplicates('G3')以上这篇Pandas 同元素多列去重的实例就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持。
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
1)去重指定多列去重,这是在dataframe没有独一无二的字段作为PK(主键)时,需要指定多个字段一起作为该行的PK,在这种情况下对整体数据进行去重。Atte
本文实例讲述了JS实现数组简单去重及数组根据对象中的元素去重操作。分享给大家供大家参考,具体如下:js数组简单去重vararr1=[1,2,3,4,5,6,3,
pandas提供了set_index方法可以将DataFrame的列(多列)变成行索引,通过reset_index方法可以将层次化索引的级别会被转移到列里面。1
1.使用array_unique方法进行去重对数组元素进行去重,我们一般会使用array_unique方法,使用这个方法可以把数组中的元素去重。输出:Array
在pandas中提供了利用映射关系来实现某些操作的函数,具体如下:replace()函数:替换元素;map()函数:新建一列;rename()函数:替换索引。一