MongoDB在不同主机间复制数据库和集合的教程
1.db.cloneCollection()
db.cloneCollection(from,collection,query)
在不同的mongodb实例间复制数据,db.cloneCollection是cloneCollection数据库命令的一个外在体现。
function(from,collection,query){ assert(isString(from)&&from.length); assert(isString(collection)&&collection.length); collection=this._name+"."+collection; query=query||{}; returnthis._dbCommand({cloneCollection:collection,from:from,query:query }); }
参数:
fromstring包含需要复制的表的mongodb实例主机名 collectionstring数据实例中需要复制的表名,该命令只可以复制远程mongodb实例上相同数据库名称的表 querydocument可选的选项。标准的查询语句过滤掉不需要的文档
db.cloneCollection()不允许通过mongos来复制表,只能通过mongod实例来操作。
示例:
192.168.11.51mongod实例mydb库,bar集合:
{"_id":ObjectId("53687d9df433cf04b788c6d1"),"name":"dog"} {"_id":ObjectId("53687ff1f433cf04b788c6d2"),"name":"cat"} {"_id":ObjectId("53687ff4f433cf04b788c6d3"),"name":"tiger"}
本地mongod实例mydb库,复制远程主机的bar集合中满足查询条件的文档:
db.cloneCollection("192.168.11.52","bar",{"name":"tiger"}) db.bar.find(); {"_id":ObjectId("53687ff4f433cf04b788c6d3"),"name":"tiger"}
2.db.cloneDatabase()
db.cloneDatabase("hostname")
复制远程主机的数据库到本地,该命令假设远程mongodb实例中拥有与本地相同的数据库名称。
hostnamestring包含需要复制的数据库的mongodb实例主机名
db.cloneDatabase是clone数据库命令的一个外在体现。
function(from){ assert(isString(from)&&from.length); returnthis._dbCommand({clone:from}); }
示例:
192.168.11.51mongod实例mydb库,
本机mongodb实例:
usemydb db.dropDatabase(); db.cloneDatabase("192.168.11.52");
3.db.copyDatabase()
db.copyDatabase(fromdb,todb,fromhost,username,password)
从远程主机复制数据库到本地,或从本地复制数据库到远程主机。
db.copyDatabase是copydb数据库命令的一个外在体现。 function(fromdb,todb,fromhost,username,password){ assert(isString(fromdb)&&fromdb.length); assert(isString(todb)&&todb.length); fromhost=fromhost||""; if(username&&password){ varn=this._adminCommand({copydbgetnonce:1,fromhost:fromhost}); returnthis._adminCommand({copydb:1,fromhost:fromhost,fromdb:fromdb, todb:todb,username:username,nonce:n.nonce,key:this.__pwHash(n.nonce,userna me,password)}); }else{ returnthis._adminCommand({copydb:1,fromhost:fromhost,fromdb:fromdb, todb:todb}); } }
参数:
fromdbstring源数据库名称 todbstring目标数据库名称 fromhoststring可选项,源数据库的主机名。如果是同一主机,忽略该选项 usernamestring可选项,源主机名用户名 passwordstring可选项,源主机名用户名对应密码
属性:
(1)db.copyDatabase()运行在目标主机的mongod实例上。
(2)db.copyDatabase()会创建目标数据库,如果其原来不存在。
(3)db.copyDatabase()需要目标机器上有足够的空间进行复制。
(4)db.copyDatabase()并不会产生目标数据库的即时快照。如果在复制过程中在源或目标库发生读写操作,会导致数据库不一致。
(5)db.copyDatabase()在操作过程中并不会锁住目标主机,所以复制过程中可能出现暂时的中断来完成其他操作。
源数据库(fromdb):
mongodb2.6需要在源主机和目标主机拥有以下权限来执行copydb。
(1)如果源主机数据库不是admin,必须确保拥有以下权限:
{resource:{db:"mySourceDB",collection:""},actions:["find"]}
{resource:{db:"mySourceDB",collection:"system.js"},actions:["find"]}
如果源主机是一台远程主机,必须确保拥有以下权限:
{resource:{db:"mySourceDB",collection:"system.indexes"},actions:["find"]} {resource:{db:"mySourceDB",collection:"system.namespaces"},actions:["find"]}
(2)如果源主机数据库是admin,必须确保拥有以下权限:
{resource:{db:"admin",collection:""},actions:["find"]} {resource:{db:"admin",collection:"system.js"},actions:["find"]} {resource:{db:"admin",collection:"system.users"},actions:["find"]} {resource:{db:"admin",collection:"system.roles"},actions:["find"]} {resource:{db:"admin",collection:"system.version"},actions:["find"]}
如果源主机是一台远程主机,必须确保拥有以下权限:
{resource:{db:"admin",collection:"system.indexes"},actions:["find"]} {resource:{db:"admin",collection:"system.namespaces"},actions:["find"]}
(3)源数据库在远程主机
如果从一个拥有用户认证的远程主机复制数据库,需要一个拥有恰当的权限的用户认证。
目标数据库(todb):
A、如果目标主机数据库不是admin,必须确保拥有以下权限:
{resource:{db:"myTargetDB",collection:""},actions:["insert","createIndex"]} {resource:{db:"myTargetDB",collection:"system.js"},actions:["insert"]}
B、如果目标主机数据库是admin,必须确保拥有以下权限:
resource:{db:"myTargetDB",collection:""},actions:["insert","createIndex"]}, {resource:{db:"myTargetDB",collection:"system.js"},actions:["insert"]}, {resource:{db:"myTargetDB",collection:"system.users"},actions:["insert"]}, {resource:{db:"myTargetDB",collection:"system.roles"},actions:["insert"]}, {resource:{db:"myTargetDB",collection:"system.version"},actions:["insert"]}
示例:
192.168.11.51mongod实例mydb库,
复制到本地newmydb库:
db.copyDatabase("mydb","newmydb","192.168.11.52");
4.cloneCollection
从远程mongodb实例复制集合到当前mongodb实例。集合名称是一致的:
{cloneCollection:"<namespace>",from:"<hostname>",query:{<query>}}
cloneCollection拥有以下的域值:
cloneCollectionstring集合的命名空间,命名空间包含了数据库名和集合名的组合 fromstring指定远程主机名和可选的端口号 querydocument可选的,过滤选项
示例:
192.168.11.51mongod实例mydb库,bar集合:
{"_id":ObjectId("53687d9df433cf04b788c6d1"),"name":"dog"} {"_id":ObjectId("53687ff1f433cf04b788c6d2"),"name":"cat"} {"_id":ObjectId("53687ff4f433cf04b788c6d3"),"name":"tiger"}
本地mongod实例:
db.runCommand({cloneCollection:"mydb.bar",from:"192.168.11.52:27017",query:{"name":"tiger"}}) usemydb db.bar.find() {"_id":ObjectId("53687ff4f433cf04b788c6d3"),"name":"tiger"}
cloneCollectionAsCapped可以利用数据库中存在的非cpped集合创建出一个新的capped集合,操作对原来的集合没有副作用。
指令的语法:
{cloneCollectionAsCapped:<existingcollection>,toCollection:<cappedcollection>,size:<cappedsize>}
新集合名称在数据库中是独一无二的,如果要把一个已经存在的正常集合转变为cpped集合,可以使用convertToCapped命令,在复制过程中,cloneCollectionAsCapped指令呈现出以下行为:
mongodb会已自然顺序遍历集合中的文档。
如果size小于先前集合的尺寸,会以FIFO规则删除早先的文档。
实例:
db.runCommand({cloneCollectionAsCapped:"bar",toCollection:"barone",size:100}) db.barone.isCapped(); true
5.clone
clone命令从远程服务器mongodb实例复制一个数据库到当前的mongodb实例,形式如下:
{clone:"db1.example.net:27017"}
需要注意的几点:
(1)clone不能去操作slave节点或副本集的非主节点。
(2)clone并不支持数据库快照功能,如果有客户端对数据更新过了,可能造成结果不一致。
(3)clone命令必须运行在目标节点上。
(4)clone过程中,目标主机没有锁定,所以复制过程中可能出现暂时的中断来完成其他操作。
6.copydb
从远程主机复制数据库到本地,或从本地复制数据库到远程主机。
在本地admin库里运行以下命令语法:
{copydb:1, fromhost:<hostname>, fromdb:<database>, todb:<database>, slaveOk:<bool>, username:<username>, nonce:<nonce>, key:<key>}
选项:
fromhoststring运行mongodb实例的远程源主机,如果是本地可以忽略 fromdbstring源数据库名称 todbstring目标数据库名称 slaveOkboolean可选的,设置为true,允许从从库复制库 usernamestring可选的,远程主机的用户名。 noncestring可选的,远程主机的共享密钥 keystring可选的,远程主机的认证密码哈希
属性:
(1)copydb()运行在目标主机的mongod实例上。
(2)copydb()会创建目标数据库,如果其原来不存在。
(3)copydb()需要目标机器上有足够的空间进行复制。
(4)copydb()并不会产生目标数据库的即时快照。如果在复制过程中在源或目标库发生读写操作,会导致数据库不一致。
(5)copydb()在操作过程中并不会锁住目标主机,所以复制过程中可能出现暂时的中断来完成其他操作。
mongodb2.6需要在源主机和目标主机拥有以下权限来执行copydb。
(1)如果源主机数据库不是admin,必须确保拥有以下权限:
{resource:{db:"mySourceDB",collection:""},actions:["find"]} {resource:{db:"mySourceDB",collection:"system.js"},actions:["find"]}
如果源主机是一台远程主机,必须确保拥有以下权限:
{resource:{db:"mySourceDB",collection:"system.indexes"},actions:["find"]} {resource:{db:"mySourceDB",collection:"system.namespaces"},actions:["find"]}
(2)如果源主机数据库是admin,必须确保拥有以下权限:
{resource:{db:"admin",collection:""},actions:["find"]} {resource:{db:"admin",collection:"system.js"},actions:["find"]} {resource:{db:"admin",collection:"system.users"},actions:["find"]} {resource:{db:"admin",collection:"system.roles"},actions:["find"]} {resource:{db:"admin",collection:"system.version"},actions:["find"]}
如果源主机是一台远程主机,必须确保拥有以下权限:
{resource:{db:"admin",collection:"system.indexes"},actions:["find"]} {resource:{db:"admin",collection:"system.namespaces"},actions:["find"]}
(3)源数据库在远程主机
如果从一个拥有用户认证的远程主机复制数据库,需要一个拥有恰当的权限的用户认证。
目标数据库(todb):
A、如果目标主机数据库不是admin,必须确保拥有以下权限:
{resource:{db:"myTargetDB",collection:""},actions:["insert","createIndex"]} {resource:{db:"myTargetDB",collection:"system.js"},actions:["insert"]}
B、如果目标主机数据库是admin,必须确保拥有以下权限:
resource:{db:"myTargetDB",collection:""},actions:["insert","createIndex"]}, {resource:{db:"myTargetDB",collection:"system.js"},actions:["insert"]}, {resource:{db:"myTargetDB",collection:"system.users"},actions:["insert"]}, {resource:{db:"myTargetDB",collection:"system.roles"},actions:["insert"]}, {resource:{db:"myTargetDB",collection:"system.version"},actions:["insert"]}
认证:
如果远程主机需要安全认证,则需要使用username,nonce和key进行认证。
nonce是一个一次性的密码,通过运行copydbgetnonce命令:
useadmin mynonce=db.runCommand({copydbgetnonce:1,fromhost:<hostname>}).nonce
如果直接在远程主机运行copydbgetnonce命令,可以忽略fromhost选项。
如下生成一个哈希键:
hex_md5(mynonce+username+hex_md5(username+":mongo:"+password))
副本集:设置slaveOk为true,可以在从节点运行copydb。
分片集:不要在mongos实例上运行copydb;不要复制包含分片集合的库。
实例:
(1)运行在同一主机上的copydb
(2)从远程主机复制的copydb
db._adminCommand({ copydb:1, fromdb:"mydb", todb:"mydbtwo", formhost:"192.168.11.52" }) {"ok":1}
(3)从需要安全验证的远程主机复制的copydb
远程主机建立用户test:caoqing/mydb
useadmin mynonce=db.runCommand({copydbgetnonce:1,fromhost:"192.168.11.51:27017"}).nonce mykey=hex_md5(mynonce+"test"+hex_md5("test"+":mongo:"+"caoqing")) db._adminCommand({ copydb:1, fromdb:"mydb", todb:"mydbthree", fromhost:"192.168.11.51", username:"test", nonce:mynonce, key:mykey }) {"ok":1}