千家信息网

mongodb去重操作只留一条

发表于:2025-01-20 作者:千家信息网编辑
千家信息网最后更新 2025年01月20日,原表记录:需要把related_type=1 and action_type=3 并且related_id相同的删掉一条。只留一个去重。db.user_action_log.aggregate([{$
千家信息网最后更新 2025年01月20日mongodb去重操作只留一条

原表记录:

需要把related_type=1 and action_type=3 并且related_id相同的删掉一条。只留一个去重。
db.user_action_log.aggregate([

{$match:{related_type:1,action_type:3}}, (查询条件)
{
$group: { _id: {related_id: '$related_id'},count: {$sum: 1},dups: {$addToSet: '$_id'}} (根据related_id分组,$group只会返回参与分组的字段,使用$addToSet在返回结果数组中增加_id字段)

},{    $match: {count: {$gt: 1}}            (匹配数量大于1的数据)}

]).forEach(function(doc){ (使用forEach循环根据_id删除数据)
doc.dups.shift();
db.user_action_log.remove({_id: {$in: doc.dups}});
})

删除后数据:

db.user_action_log.aggregate([

{$match:{related_type:1,action_type:3}},
{
$group: { _id: {related_id: '$related_id'},count: {$sum: 1},dups: {$addToSet: '$_id'}}

},{    $match: {count: {$gt: 1}}}

]).forEach(function(doc){
doc.dups.shift();
db.user_action_log.remove({_id: {$in: doc.dups}});
})

0