Mongo

指南

https://blog.toright.com/posts/4483/mongodb-schema-設計指南.html

lock

https://mongodb-documentation.readthedocs.io/en/latest/tutorial/recover-data-following-unexpected-shutdown.html

效能

mongostat -u {username} -p {password} -h {ip}
mongo -u {username} -p --authenticationDatabase admin

https://kkc.github.io/2015/07/14/mongodb-storage/

https://340starobserver.github.io/2016/08/19/Mongo-Optimal/

http://yangcongchufang.com/linux-profilling.html

https://read01.com/zh-tw/O0RxGB.html#.WbiMUGUfba0

MongoDB数据空洞解决方法 http://ifujun.com/mongodbshu-ju-kong-dong-jie-jue-fang-fa/

http://nosqldb.org/p/512596b4cd0cc40a0a0558f8

Mongo效能坑 http://xiewenwei.github.io/blog/2014/06/22/trap-in-mongodb/

效能筆記 http://www.cnblogs.com/cswuyg/p/4355948.html

schema analyzer for MongoDB

https://github.com/variety/variety

HA(High Availability)

http://www.jianshu.com/p/2825a66d6aed http://caibird.blog.51cto.com/1403570/1337622

mongo config : failIndexKeyTooLong

http://docs.mongoing.com/manual-zh/reference/parameters.html http://www.fancyecommerce.com/category/19-nosql-mongodbredis/

php mongoClient

http://wulijun.github.io/2012/12/10/mongodb-php-driver-connectiong-handling.html

Ref

http://www.runoob.com/mongodb/mongodb-tutorial.html

CRUD

Query

array not empty

ME.find({ pictures: { $exists: true, $ne: [] } })

insert

db.COLLECTION_NAME.insert(document)

db.col.insert({title: 'MongoDB 教程', 
    description: 'MongoDB 是一个 Nosql 数据库',
    by: '菜鸟教程',
    url: 'http://www.runoob.com',
    tags: ['mongodb', 'database', 'NoSQL'],
    likes: 100
})

update

db.collection.update(
   <query>,
   <update>,
   {
     upsert: <boolean>, //可选,这个参数的意思是,如果不存在update的记录,是否插入objNew,true为插入,默认是false,不插入。
     multi: <boolean>,//可选,mongodb 默认是false,只更新找到的第一条记录,如果这个参数为true,就把按条件查出来多条记录全部更新。
     writeConcern: <document>//可选,抛出异常的级别。
   }
)

remove

db.house.update(
    {},
    {$unset:{<field>:'' , <field>:''}},
    {multi: true}
)
db.col.update({'title':'MongoDB 教程'},{$set:{'title':'MongoDB'}})

db.col.update({'title':'MongoDB 教程'},{$set:{'title':'MongoDB'}},{multi:true})

Aggregation

教學 http://marklin-blog.logdown.com/posts/1394100-mongodb-polymerization-of-30-14-1-aggregate-framework-with-buckle

欄位權重寫法

db.collection.aggregate([
    {$match: {"status":1 , "test":2}},
    {$project : { "_id":1 , "status":1 , "test":1 , Tag01:"$Tag01" ,  Tag02:"$Tag02" ,  Tag03:"$Tag03" ,  Tag04:"$Tag04", "weight": { "$add": [
              {"$cond" : [  { "$eq": ["$Tag01", "1"] } ,1,0]},
              {"$cond" : [  { "$eq": ["$Tag02", "1"] } ,1,0]},
              {"$cond" : [  { "$eq": ["$Tag03", "1"] } ,1,0]},
              {"$cond" : [  { "$eq": ["$Tag04", "1"] } ,1,0]}
       ]}
    }},    
    { '$sort' : { "weight" : -1 }},    
],
{allowDiskUse: true}
);

profile

查詢優化分析

profile 設定

profile 級別
0:关闭,不收集任何数据。
1:收集慢查询数据,默认是100毫秒。
2:收集所有数据

1:通过mongo shell:
#查看状态:级别和时间
drug:PRIMARY> db.getProfilingStatus()   
{ "was" : 1, "slowms" : 100 }
#查看级别
drug:PRIMARY> db.getProfilingLevel()    
1
#设置级别
drug:PRIMARY> db.setProfilingLevel(2)
{ "was" : 1, "slowms" : 100, "ok" : 1 }
#设置级别和时间
drug:PRIMARY> db.setProfilingLevel(1,200)
{ "was" : 2, "slowms" : 100, "ok" : 1 }

以上要操作要是在test集合下面的话,只对该集合里的操作有效,要是需要对整个实例有效,则需要在所有的集合下设置或则在开启的时候开启参数:
2:不通过mongo shell:
mongod --profile=1 --slowms=15
或则在配置文件里添加2行:
profile = 1
slowms = 300

profile 相關參數

{
    "op" : "query",    #操作类型,有insert、query、update、remove、getmore、command
        getmore是一个getmore 操作,getmore通常发生在结果集比较大的查询时,第一个query返回了部分结果,后续的结果是通过getmore来获取的。
    "ns" : "mc.user",  #操作的集合
    "query" : {        #查询语句
        "mp_id" : 5,
        "is_fans" : 1,
        "latestTime" : {
            "$ne" : 0
        },
        "latestMsgId" : {
            "$gt" : 0
        },
        "$where" : "new Date(this.latestNormalTime)>new Date(this.replyTime)"
    },
    "cursorid" : NumberLong("1475423943124458998"),
    "ntoreturn" : 0,   #返回的记录数。例如,profile命令将返回一个文档(一个结果文件),因此ntoreturn值将为1。limit(5)命令将返回五个文件,因此ntoreturn值是5。如果ntoreturn值为0,则该命令没有指定一些文件返回,因为会是这样一个简单的find()命令没有指定的限制。
    "ntoskip" : 0,     #skip()方法指定的跳跃数
    "nscanned" : 304,  #扫描数量
        nscanned(扫描的记录数)远大于nreturned(返回结果的记录数)的话,要考虑通过加索引来优化记录定位了。responseLength 如果过大,说明返回的结果集太大了,这时要看是否只需要必要的字段。
    "keyUpdates" : 0,  #索引更新的数量,改变一个索引键带有一个小的性能开销,因为数据库必须删除旧的key,并插入一个新的key到B-树索引
    "numYield" : 0,    #该查询为其他查询让出锁的次数
    "lockStats" : {    #锁信息,R:全局读锁;W:全局写锁;r:特定数据库的读锁;w:特定数据库的写锁
        "timeLockedMicros" : {     #锁
            "r" : NumberLong(19467),
            "w" : NumberLong(0)
        },
        "timeAcquiringMicros" : {  #锁等待
            "r" : NumberLong(7),
            "w" : NumberLong(9)
        }
    },
    "nreturned" : 101,        #返回的数量
    "responseLength" : 74659, #响应字节长度
    "millis" : 19,            #消耗的时间(毫秒)
    "ts" : ISODate("2014-02-25T02:13:54.899Z"), #语句执行的时间
    "client" : "127.0.0.1",   #链接ip或则主机
    "allUsers" : [ ],     
    "user" : ""               #用户


    //其他
    "nmoved": 文件在磁盘上操作。
    "nupdated":更新文档的数目
    "scanAndOrder":scanAndOrder是一个布尔值,是True当一个查询不能使用的文件的顺序在索引中的排序返回结果:MongoDB中必须将其接收到的文件从一个游标后的文件进行排序。如果scanAndOrder是False,MongoDB的可使用这些文件的顺序索引返回排序的结果。即:True:文档进行排序,False:使用索引。
    "moved":更新操作在磁盘上移动一个或多个文件到新的位置。表明本次update是否移动了硬盘上的数据,如果新记录比原记录短,通常不会移动当前记录,如果新记录比原记录长,那么可能会移动记录到其它位置,这时候会导致相关索引的更新.磁盘操作更多,加上索引更新,会使得这样的操作比较慢.
}

db.serverStatus

查詢mongo目前狀況

http://m.blog.itpub.net/15498/viewspace-2076968/

results matching ""

    No results matching ""