- 无论是组合去重还是单项去重,直接上代码
db.getCollection("huicong_customer_data").aggregate([
{
//$group:{_id:{company_name:'$company_name'},count:{$sum:1},dups:{$addToSet:'$_id'}}
$group:{_id:{company_name:'$company_name',company_info:'$company_info'},count:{$sum:1},dups:{$addToSet:'$_id'}}
},
{
$match:{count:{$gt:1}}
}
]).forEach(function(it){
it.dups.shift();
db.getCollection("huicong_customer_data").remove({_id: {$in: it.dups}});
});
- 解释
使用aggregate聚合查询重复数据$group中是查询条件,根据content、endTime、startTime字段来聚合相同的数据;
$count用来统计重复出现的次数, $match来过滤没有重复的数据;
$addToSet将聚合的数据id放入到dups数组中方便后面使用;查询结果使用forEach进行迭代id来删除数据
shift()作用是剔除队列中第一条id,避免删掉所有的数据;
PS:注意函数的大小写,mongoDB是严格区分大小写的!!!