MongoDB 日期查询与mongodump 按日期范围导出数据

来源：互联网发布：展示实时数据时间轴编辑：程序博客网时间：2024/05/17 02:51

http://duoyun.org/topic/512b3dc7cd0cc40a0a0605d3

MongoDB 日期查询目前可通过Date 和ISODate两种方式：
1.Date方式，例如startDate<=2012.12.7，endDate>=2012.12.7： "startDate":{$lte:new Date(2012,11,7)},"endDate":{$gte:new Date(2012,11,7)}。
如下是查询日期大于等于2013年2月25日的记录条数（注意，中间的月份写1）

 db.log.find({"optime":{$gte:new Date(2013,1,25)}}).count()

在currentOp()可以看到，相当于ISODate("2013-02-24T16:00:00Z")

"ns" : "log.log",        "query" : {            "count" : "log",            "query" : {                "optime" : {                    "$gte" : ISODate("2013-02-24T16:00:00Z")                }            },            "fields" : {            }        }

2.ISODate方式，查询大于等于北京时间2013年2月25日0点的数据记录数方法为，MongoDB中的格式是标准时间，相差8小时：

db.log.find({"optime":{$gte:ISODate("2013-02-24T16:00:00Z")}}).count()

mongodump 按日期导出数据
mongodump --query选项可指定查询条件，按日期范围导出数据，并不支持ISODate格式：

 mongodump  -umonitor -p'xxxxxx' --port 20011 -d exaitem_gmsbatchtask -c jdgmsbatchtask -q '{"addDate":{$gte:ISODate("2013-02-10T16:00:00.000Z")}}'   -o  jdgmsbatchtaskconnected to: 127.0.0.1:20011Tue Feb 26 10:12:03 Assertion: 10340:Failure parsing JSON string near: "addDate":0x5811c2 0x5287d4 0x528b4e 0xaa4c3b 0xa9b18d 0xa9f122 0x305061d994 0x4fe4c9  mongodump(_ZN5mongo11msgassertedEiPKc+0x112) [0x5811c2] mongodump(_ZN5mongo8fromjsonEPKcPi+0x444) [0x5287d4] mongodump(_ZN5mongo8fromjsonERKSs+0xe) [0x528b4e] mongodump(_ZN4Dump3runEv+0x33b) [0xaa4c3b] mongodump(_ZN5mongo4Tool4mainEiPPc+0x169d) [0xa9b18d] mongodump(main+0x32) [0xa9f122] /lib64/libc.so.6(__libc_start_main+0xf4) [0x305061d994] mongodump(__gxx_personality_v0+0x3d1) [0x4fe4c9]assertion: 10340 Failure parsing JSON string near: "addDate":

仅支持时间戳，并转换成毫秒，如下正常导出数据：

date -d 2013-02-25 +%s1361721600mongodump  -umonitor -p'xxxxxx' --port 20011 -d exaitem_gmsbatchtask -c jdgmsbatchtask -q '{"addDate":{$gte:Date(1361721600000)}}'   -o  jdgmsbatchtaskconnected to: 127.0.0.1:20011DATABASE: exaitem_gmsbatchtask     to     jdgmsbatchtask/exaitem_gmsbatchtask    exaitem_gmsbatchtask.jdgmsbatchtask to jdgmsbatchtask/exaitem_gmsbatchtask/jdgmsbatchtask.bson        847400/81641905    1%

两个日期之间查询如下：

mongodump  -umonitor -p'xxxxxx' --port 20011 -d exaitem_gmsbatchtask -c jdgmsbatchtask -q '{"addDate":{$gte:Date(1360598400000),$lt:Date(1361851200000)}}'   -o  jdgmsbatchtask

另外如果使用双引号，可通过转义符。

mongodump --query "{\"ts\":{\"\$gt\":{\"\$date\":`date -d 2011-08-10 +%s`000},\"\$lte\":{\"\$date\":`date -d 2011-08-11 +%s`000}}}"

最后，为了导出一个月的数据，发现_id字段默认的，采用ObjectId来完成的。

PRIMARY> db.jdgmslog.find({"optime":{$gte:ISODate("2013-01-26T00:00:00Z")}}).limit(1){ "_id" : ObjectId("51031c80c8665789e6a9b7fe"), "source" : 2, "optime" : ISODate("2013-01-26T00:00:00.003Z")}mongodump  -umonitor -p'xxxxxx' --port 20011  -d exaitem_gmslog  -c jdgmslog -q '{"_id" : {$gte:ObjectId("51031c80c8665789e6a9b7fe")}}'   -o  jdgmslog_monthconnected to: 127.0.0.1:20011DATABASE: exaitem_gmslog     to     jdgmslog_month/exaitem_gmslog    exaitem_gmslog.jdgmslog to jdgmslog_month/exaitem_gmslog/jdgmslog.bson        639500/213149563    0%        1238200/213149563    0%

0 0