Matlab用两句话搞定数据中的重复行

2021年7月9日 85次阅读 来源: billy145533

在数据处理中，有时候数据里混入了重复的行，给数据分析带来了不必要的麻烦，要删除并不难，如何以最简单的方式处理则需要花一点时间

直接上代码，最后面两句是用于查找重复数据的行号
随机生成A数据，在9，18，19位置加入重复的行

A = rand(8,8);
A(9,:) = A(2,:);
A = [A;rand(8,8)];
A(18,:) = A(6,:);
A(19,:) = A(6,:);
[B,ia,ib] = unique(A,'rows');
dup = setdiff(1:size(A,1),ia)

《Matlab用两句话搞定数据中的重复行》
[B,ia,ib] = unique(A,‘rows’);; 去掉了A中重复的行，再经过排序得到了B
B ==A(ia,:)
A ==B(ib,:)

ia(i）代表了B的第i等于A中的第ia(i)行
ib(i）A的第i行对应于B的第ib(i)行
B中没有重复的列，并且B中的每一行跟A中的某一行是一一对应的
可以看出，A中重复的行的行号是不会出现在ia当中的
因此，只需要将所有行号与ia做一个补集就能得到哪些是重复的行

如果想知道具体哪些行之间是重复的，只需要在查到重复的行号后，再查一下ib即可。因为重复的数据在ib中对应的数字是相等的
例如，重复行号为i,find(ib==ib(i))

    原文作者：billy145533
    原文地址: https://blog.csdn.net/billy145533/article/details/107352022
    本文转自网络文章，转载此文章仅为分享知识，如有侵权，请联系博主进行删除。
点赞