校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃

主頁 > 知識庫 > 使用aggregate在MongoDB中查詢重復數據記錄的方法

使用aggregate在MongoDB中查詢重復數據記錄的方法

熱門標簽:沈陽營銷電銷機器人招商 徐州ai電銷機器人原理 智能電銷機器人銷售話術 機器人外呼系統軟件存在問題 南京400電話怎樣辦理 企業智能外呼系統價格多少 高德地圖標注商戶位置 福州電銷機器人源代碼 兗州電話外呼營銷系統

MongoDB中聚合(aggregate)主要用于處理數據(諸如統計平均值,求和等),并返回計算后的數據結果。有點類似sql語句中的 count(*)。

aggregate() 方法

MongoDB中聚合的方法使用aggregate()。

語法

aggregate() 方法的基本語法格式如下所示:

>db.COLLECTION_NAME.aggregate(AGGREGATE_OPERATION)

我們知道,MongoDB屬于文檔型數據庫,其存儲的文檔類型都是JSON對象。正是由于這一特性,我們在Node.js中會經常使用MongoDB進行數據的存取。但由于Node.js是異步執行的,這就導致我們無法保證每一次的數據庫save操作都是原子型的。也就是說,如果客戶端連續兩次發起同一事件將數據存入數據庫,很可能會導致數據被重復保存。高并發的情況下,哪怕是你在代碼中已經做了非常嚴格的校驗,例如插入數據前判斷要保存的數據是否已經存在,但仍然有可能會出現數據被重復保存的風險。因為在異步執行中,你沒有辦法保證哪個線程先執行,哪個線程后執行,客戶端發起的所有請求并非按我們想象的都是順序執行的。一個較好的解決辦法是在Mongo數據庫的所有表中創建唯一索引。事實上,MongoDB默認會為所有表創建一個_id字段的唯一索引(可以取消)。如果你想在Node.js中通過mongoose.schema來自動創建索引,可以參考下面的代碼:

var mongoose = require('mongoose');
var Schema = mongoose.Schema;
var customerSchema = new mongoose.Schema({
cname: String,
cellPhone, String,
sender: String,
tag: String,
behaviour: Number,
createTime: {
type: Date,
default: Date.now
},
current:{
type: Boolean,
default: true
}
}, {
versionKey: false
});
customerSchema.index({cname:1,cellPhone:1,sender:1,tag:1,behaviour:1}, {unique: true});module.exports = mongoose.model('customer', customerSchema); 

  上面的model中我們定義了表customer的結構,并通過index()方法在字段cname,cellPhone,sender,tag,behaviour上創建了唯一索引,這樣當包含這些字段的重復數據被插入時,數據庫會拋出異常。借用mongoose,如果數據庫表之前已經被創建并且程序正在運行中,當我們修改model并添加索引,然后重新啟動app,只要有對該model的訪問,mongoose會自動進行檢測并創建索引。當然,如果數據出現重復,則索引創建會失敗。此時我們可以通過在創建索引時添加dropDups選項,讓數據庫自動將重復的數據刪除,如:

customerSchema.index({cname:1,cellPhone:1,sender:1,tag:1,behaviour:1}, {unique: true, dropDups: true});

  不過據MongoDB的官方說明,自3.0以后的版本不再使用該選項,而且也并沒有提供替代的解決辦法。貌似官方不再提供創建索引時自動刪除重復記錄的功能。那如何才能快速有效地找出重復的記錄并且刪除呢?首先我們要找出這些記錄,然后通過remove()方法進行刪除。下面的查詢語句可以找出給定字段有重復數據的記錄:

db.collection.aggregate([
{ $group: { 
_id: { firstField: "$firstField", secondField: "$secondField" }, 
uniqueIds: { $addToSet: "$_id" },
count: { $sum: 1 } 
}}, 
{ $match: { 
count: { $gt: 1 } 
}}
]) 

  替換_id屬性的值以指定你想要進行判斷的字段。相應地,在Node.js中代碼如下:

var deferred = Q.defer();
var group = { firstField: "$firstField", secondField: "$secondField"};
model.aggregate().group({
_id: group,
uniqueIds: {$addToSet: '$_id'},
count: {$sum: 1}
}).match({ count: {$gt: 1}}).exec(deferred.makeNodeResolver());
return deferred.promise; 

上述代碼使用了Q來替換函數執行中的回調。在Node.js的異步編程中,使用Q來處理回調是個不錯的選擇。

  下面是返回的結果:

/* 1 */
{
"result" : [ 
{
"_id" : {
"cellPhone" : "15827577345",
"actId" : ObjectId("5694565fa50fea7705f01789")
},
"uniqueIds" : [ 
ObjectId("569b5d03b3d206f709f97685"), 
ObjectId("569b5d01b3d206f709f97684")
],
"count" : 2.0000000000000000
}, 
{
"_id" : {
"cellPhone" : "18171282716",
"actId" : ObjectId("566b0d8dc02f61ae18e68e48")
},
"uniqueIds" : [ 
ObjectId("566d16e6cf86d12d1abcee8b"), 
ObjectId("566d16e6cf86d12d1abcee8a")
],
"count" : 2.0000000000000000
}
],
"ok" : 1.0000000000000000
}

  從結果中可以看到,一共有兩組數據相同的記錄,所以返回的result數組的長度為2。uniqueIds屬性為一個數組,其中存放了重復記錄的_id字段的值,通過該值我們可以使用remove()方法來查找并刪除對應的數據。

您可能感興趣的文章:
  • MongoDB aggregate 運用篇個人總結
  • Mongodb在CSharp里實現Aggregate實例
  • nodejs+mongodb aggregate級聯查詢操作示例
  • mongodb中非常好用的Aggregate入門教程

標簽:丹東 吉安 景德鎮 邯鄲 本溪 大理 鶴崗 昭通

巨人網絡通訊聲明:本文標題《使用aggregate在MongoDB中查詢重復數據記錄的方法》,本文關鍵詞  使用,aggregate,在,MongoDB,中,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《使用aggregate在MongoDB中查詢重復數據記錄的方法》相關的同類信息!
  • 本頁收集關于使用aggregate在MongoDB中查詢重復數據記錄的方法的相關信息資訊供網民參考!
  • 推薦文章
    校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃
    欧美精品一区二| 秋霞国产午夜精品免费视频| 国产精品天美传媒沈樵| 在线电影欧美成精品| 国产欧美在线观看一区| 性欧美疯狂xxxxbbbb| 成人av资源网站| 精品国产乱码久久久久久蜜臀| 欧美激情一区二区三区在线| 久久精品国产亚洲高清剧情介绍 | 精品国产伦一区二区三区免费 | 中文字幕不卡在线| 日日骚欧美日韩| 一本大道久久a久久综合| 久久久久久久久97黄色工厂| 午夜精品一区在线观看| av男人天堂一区| 国产亚洲一区二区三区在线观看 | 亚洲成人激情综合网| av男人天堂一区| 国产精品五月天| 国产大片一区二区| 亚洲精品一线二线三线 | 国产精品你懂的| 国产精品资源在线| 日韩一级在线观看| 免费看黄色91| 欧美电视剧免费观看| 日韩成人av影视| 在线不卡免费av| 日韩激情av在线| 91麻豆精品国产自产在线 | 欧美日韩中文字幕一区| 亚洲欧美日韩一区二区三区在线观看 | 欧美一二三在线| 婷婷一区二区三区| 欧美日韩精品二区第二页| 丝袜亚洲另类丝袜在线| 欧美日韩夫妻久久| 亚洲精品中文在线| 欧美性xxxxxx少妇| 五月天久久比比资源色| 欧美日本一道本| 久久99国内精品| 中文字幕第一区综合| 成人黄色免费短视频| 1区2区3区欧美| 欧美日韩在线播放| 蜜臀久久久久久久| 国产欧美精品一区二区色综合| 成人永久免费视频| 亚洲伦在线观看| 欧美精品乱码久久久久久| 日韩av电影免费观看高清完整版| 玖玖九九国产精品| 国产肉丝袜一区二区| 91色婷婷久久久久合中文| 一区二区三区 在线观看视频| 欧美一级视频精品观看| 国产在线国偷精品产拍免费yy| 中文字幕av资源一区| 欧美日韩亚洲另类| 极品少妇xxxx精品少妇偷拍| 中文字幕一区二区三区在线播放 | 日韩福利视频导航| 久久九九99视频| 欧美视频在线一区二区三区| 老司机精品视频在线| 国产精品国产三级国产| 亚洲综合在线视频| 亚洲精品一区二区三区在线观看 | 国产麻豆精品95视频| 国产精品传媒视频| 日韩一区二区三区免费看| 成人永久免费视频| 日本一区中文字幕| 亚洲色图一区二区三区| 精品国产3级a| 色噜噜夜夜夜综合网| 久草在线在线精品观看| 欧美一a一片一级一片| 国产精品乡下勾搭老头1| 舔着乳尖日韩一区| 国产精品久久久久天堂| 欧美一二三四区在线| 欧美在线观看视频一区二区| 国产风韵犹存在线视精品| 亚洲成人激情社区| 亚洲欧美日本韩国| 国产精品久久久久毛片软件| 欧美一级视频精品观看| 色综合久久88色综合天天6| 狠狠色丁香婷婷综合久久片| 亚洲最大的成人av| 日韩伦理av电影| 久久精品在线观看| 日韩美一区二区三区| 欧美三级资源在线| 色综合久久综合网欧美综合网| 国产一区91精品张津瑜| 麻豆精品国产传媒mv男同| 亚洲高清免费视频| 136国产福利精品导航| 国产精品国产三级国产a| 国产精品看片你懂得| www激情久久| 久久这里只精品最新地址| 欧美电影免费观看高清完整版| 婷婷久久综合九色国产成人| 亚洲精品自拍动漫在线| 国产精品久久久久永久免费观看 | 7777精品伊人久久久大香线蕉超级流畅| 成人国产精品免费观看动漫| 国产在线一区观看| 国产呦精品一区二区三区网站| 日韩黄色一级片| 亚洲高清不卡在线| 亚洲第一会所有码转帖| 三级一区在线视频先锋| 久久精品国内一区二区三区| 国产一区二区三区黄视频 | 欧美日韩二区三区| 欧美人与性动xxxx| 欧美一二三在线| 久久久精品蜜桃| 国产精品国产馆在线真实露脸 | 色欧美88888久久久久久影院| 日韩一区欧美小说| 亚洲精选视频在线| 日本色综合中文字幕| 久久99久久99小草精品免视看| 久久99精品久久只有精品| 丁香另类激情小说| 在线观看欧美日本| 7777精品伊人久久久大香线蕉超级流畅| 538prom精品视频线放| 久久综合色之久久综合| 国产女主播一区| 亚洲最大成人网4388xx| 国产成人午夜99999| 另类的小说在线视频另类成人小视频在线 | 久久综合色之久久综合| 亚洲国产岛国毛片在线| 亚洲精品水蜜桃| 久久久精品影视| 夜色激情一区二区| 美洲天堂一区二卡三卡四卡视频| 国产一区91精品张津瑜| 欧洲中文字幕精品| 精品久久人人做人人爰| 欧美精品一区二| 亚洲精品中文在线观看| 欧美男生操女生| 日韩欧美第一区| 亚洲欧美一区二区在线观看| 午夜激情一区二区三区| 国产一区视频在线看| 在线观看免费视频综合| 久久久久久久精| 五月激情六月综合| 成人午夜视频在线| 日韩精品综合一本久道在线视频| 国产精品久久久久久久午夜片 | 精品免费一区二区三区| 亚洲午夜一区二区三区| 午夜精品一区二区三区三上悠亚 | 另类专区欧美蜜桃臀第一页| 99久久99精品久久久久久| 精品国产一区二区三区久久久蜜月 | 欧美一区日本一区韩国一区| 国产精品入口麻豆原神| 视频一区视频二区中文字幕| 成人一级视频在线观看| 日韩写真欧美这视频| 一区二区不卡在线播放| a4yy欧美一区二区三区| 精品国产免费人成电影在线观看四季| 亚洲成人你懂的| 亚洲黄色性网站| 99久精品国产| 国产精品免费久久| 国产精品亚洲第一区在线暖暖韩国| 这里是久久伊人| 亚洲国产aⅴ天堂久久| 色爱区综合激月婷婷| 亚洲精品乱码久久久久久久久 | 91在线观看高清| 精品少妇一区二区三区在线视频| 亚洲一区二区精品视频| 成人app软件下载大全免费| 国产欧美精品区一区二区三区 | 欧美日韩日本视频| 亚洲老妇xxxxxx| 色又黄又爽网站www久久| 国产精品久久久久影院亚瑟| av一区二区三区在线| 一区在线播放视频| 成人app在线观看| 国产精品久久久久久久久免费樱桃| 寂寞少妇一区二区三区|