MongoDB Capped Collection

2024-04-05 22:32
文章标签 mongodb collection capped

本文主要是介绍MongoDB Capped Collection,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1、简单介绍
capped collections 是性能出色的有着固定大小的集合,以LRU(Least Recently Used 最近最少使用)规则和插入顺序进行age-out(老化移出)处理,自动维护集合中对象的插入顺序,在创建时要预先指定大小。如果空间用完,新添加的对象将会取代集合中最旧的对象。
2、功能特点
可以插入及更新,但更新不能超出collection 的大小,否则更新失败。不允许删除,但是可以调用drop() 删除集合中的所有行,但是drop 后需要显式地重建集合。在32 位机上,一个capped collection 的最大值约为482.5M,64 位上只受系统文件大小的限制。
3、常见用处
(1)logging

MongoDB 中日志机制的首选,MongoDB 没有使用日志文件,而是把日志事件存储在数据库中。在一个没有索引的capped collection 中插入对象的速度与在文件系统中记录日志的速度相当。
(2)cache
缓存一些对象在数据库中,比如计算出来的统计信息。这样的需要在collection 上建立一个索引,因为使用缓存往往是读比写多。
(3)auto archiving
可以利用capped collection 的age-out 特性,省去了写cron 脚本进行人工归档的工作。
4、推荐用法
(1)为了发挥capped collection 的最大性能,如果写比读多,最好不要在上面建索引,否则插入速度从"log speed"降为"database speed"。
(2)使用"nature ordering"可以有效地检索最近插入的元素,因为capped collection 能够保证自然排序就是插入时的顺序,类似于log 文件上的tail 操作。
5、注意事项
(1)可以在创建capped collection 时指定collection 中能够存放的最大文档数。但这时也要指定size,因为总是先检查size 后检查maxRowNumber。可以使用validate()查看一个collection已经使用了多少空间,从而决定size 设为多大,单位字节。如:
db.createCollection("student", {capped:true, size:100000, max:100});
db.student.validate();max=1 时会往collection 中存放尽量多的documents。
(2)上述的createCollection 函数也可以用来创建一般的collection , 还有一个参数"autoIndexID",值可以为"true"和"false"来决定是否需要在"_id"字段上自动创建索引,如:
db.createCollection("student", {size:10000000, autoIndexId:false})。
默认情况下对一般的collection 是创建索引的,但不会对capped collection 创建。
6、Capped Collection实际应用
MongoDB 支持 Capped Collection,一种固定大小的集合,当集合的大小达到指定大小时,新数据覆盖老数据,MongoDB Replica set 中的 oplog 就是 Capped Collection 类型。
1)查看 oplog 是否是 Capped Collection
> db.student.isCapped();
true
备注:通过 db.collection.isCapped()命令可以查看一个集合是否是 Capped Collection 。
Capped Collection 具有以下特性,在使用的时候需要注意:
*不可以对 Capped Collection 进行分片。
*在 2.2 版本以后,创建的Capped Collection 默认在 _id 字段上创建索引,而在 2.2 版本或以前没有。
*在 Capped Collection 插入文档后可以进行更新(update)操作,当更新不能导致原来文档占用空间增长,否则更新失败。
*不可以对 capped collection 执行删除文档操作,但可以删除整个集合。
2)创建 Capped Collection
> db.createCollection("mycoll1",{capped:true,size:1024});
{"ok": 1,"$gleStats": {"lastOpTime": {"t": 1426665956000,"i": 1},"electionId": ObjectId("5508de2cd812466ec2804cc9")}
}
备注:通过 db.createCollection 命令创建 Capped Collection 集合,创建时必须指定集合大小,用于预先分配空间。
3)查看一个集合是否是 Capped Collection
可以通过以下两种方法查看一个集合是否是 Capped Collection 。
> db.mycoll1.isCapped();
> db.mycoll1.stats();
{"sharded": false,"primary": "shard_a","ns": "test.mycoll1","count": 0,"size": 0,"storageSize": 4096,"numExtents": 1,"nindexes": 1,"lastExtentSize": 4096,"paddingFactor": 1,"systemFlags": 1,"userFlags": 0,"totalIndexSize": 8176,"indexSizes": {"_id_": 8176},"capped": true,"max": NumberLong("9223372036854775807"),"ok": 1,"$gleStats": {"lastOpTime": {"t": 1426665956000,"i": 1},"electionId": ObjectId("5508de2cd812466ec2804cc9")}
}
备注:"capped" 属性为 true 表示是 Capped Collection 。
4)测试:插入记录
> for (var i = 1; i <= 10000; i++) db.mycoll1.save({id : i, name : 'francs'});
> db.mycoll1.find().count();
56
备注:由于限制了集合大小不小,目标插入 10000 条,结果只插入了 56 条数据,并且老数据被新数据覆盖。另外不可以删除 Capped Collection 的文档
5)测试: 删除 capped collection 中的文档
> db.mycoll1.remove({id:9956});
canot remove from a capped collection
备注:删除文档时抛出异常。
6)测试:更新 capped collection 中的文档
> db.mycoll1.find({id:9956});
{ "_id" : ObjectId("550932943b42e8050fa8ae7a"), "id" : 9956, "name" : "francs" }
> db.mycoll1.update({id:9956},{$set:{name:'aaa_francs'}});
failing update: objects in a capped ns cannot grow
> db.mycoll1.update({id:9956},{$set:{name:'bbb'}});
> db.mycoll1.find({id:9956});
{ "_id" : ObjectId("550932943b42e8050fa8ae7a"), "id" : 9956, "name" : "bbb" }
备注:这里正好验证了特性3,更新后的值不能超过原有空间,否则更新失败。
7)官网参考

http://docs.mongodb.org/manual/core/capped-collections/

参考:http://blog.csdn.net/z1988316/article/details/8938618

转至: http://blog.csdn.net/u013339851/article/details/23601973

这篇关于MongoDB Capped Collection的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/878313

相关文章

Go Mongox轻松实现MongoDB的时间字段自动填充

《GoMongox轻松实现MongoDB的时间字段自动填充》这篇文章主要为大家详细介绍了Go语言如何使用mongox库,在插入和更新数据时自动填充时间字段,从而提升开发效率并减少重复代码,需要的可以... 目录前言时间字段填充规则Mongox 的安装使用 Mongox 进行插入操作使用 Mongox 进行更

使用Python实现操作mongodb详解

《使用Python实现操作mongodb详解》这篇文章主要为大家详细介绍了使用Python实现操作mongodb的相关知识,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、示例二、常用指令三、遇到的问题一、示例from pymongo import MongoClientf

使用MongoDB进行数据存储的操作流程

《使用MongoDB进行数据存储的操作流程》在现代应用开发中,数据存储是一个至关重要的部分,随着数据量的增大和复杂性的增加,传统的关系型数据库有时难以应对高并发和大数据量的处理需求,MongoDB作为... 目录什么是MongoDB?MongoDB的优势使用MongoDB进行数据存储1. 安装MongoDB

Collection List Set Map的区别和联系

Collection List Set Map的区别和联系 这些都代表了Java中的集合,这里主要从其元素是否有序,是否可重复来进行区别记忆,以便恰当地使用,当然还存在同步方面的差异,见上一篇相关文章。 有序否 允许元素重复否 Collection 否 是 List 是 是 Set AbstractSet 否

浅谈PHP5中垃圾回收算法(Garbage Collection)的演化

前言 PHP是一门托管型语言,在PHP编程中程序员不需要手工处理内存资源的分配与释放(使用C编写PHP或Zend扩展除外),这就意味着PHP本身实现了垃圾回收机制(Garbage Collection)。现在如果去PHP官方网站(php.net)可以看到,目前PHP5的两个分支版本PHP5.2和PHP5.3是分别更新的,这是因为许多项目仍然使用5.2版本的PHP,而5.3版本对5.2并不是完

Collection的所有的方法演示

import java.util.ArrayList;import java.util.Collection;import java.util.Iterator;public class TestCollection {/*** @param args* Collection的所有的方法演示* 此程序没有使用泛型,所以可以添加任意类型* 以后如果写到泛型会补充这一方面的内容*/public s

生产mongodb 分片与集群 方案

链接:http://my.oschina.net/pwd/blog/411439#navbar-header 注:主要是有一键安装的脚本可以借鉴

mongodb基本命令和Java操作API示例

1.Mongo3.2 java API示例:http://www.cnblogs.com/zhangchaoyang/articles/5146508.html 2.MongoDB基本命:http://www.cnblogs.com/xusir/archive/2012/12/24/2830957.html 3.java MongoDB查询(一)简单查询: http://www.cnblogs

使用jetty和mongodb做个简易文件系统

使用jetty和mongodb做个简易文件系统 - ciaos 时间 2014-03-09 21:21:00   博客园-所有随笔区 原文   http://www.cnblogs.com/ciaos/p/3590662.html 主题  MongoDB  Jetty  文件系统 依赖库: 1,jetty(提供http方式接口) 2,mongodb的java驱动(访问mo

mongodb简单入门

一篇较好的mongodb常用操作命令:http://www.cnblogs.com/hoojo/archive/2011/06/01/2066426.html mongodb的java操作:http://www.cnblogs.com/cyhe/p/5451421.html