查看文章 |
特性
CouchDB能够适应非常广泛的应用场景,在某些偶尔连接网络的应用中,我们可以用CouchDB暂存数据,随后进行同步。也可以在Cloud环境中,作为大型的分布式的数据存储。CouchDB提供了基于 HTTP的API的访问方式,这样,保证了所有的常见的语言都可以使用CouchDB。 底层存储结构CouchDB是一个"面向文档"的数据库,文档的格式是一个JSON字符串(也可包含二进制附件)。 底层结构是由一个"存储"(storeage) ,以及多个"视图索引"(view indexs)。 "储存"用来储存文件, "视图索引"用于查询处理。 CouchDB落实到最底层的数据结构就是两类B+Tree 。 第一类B+Tree,by_id_index (使用document的id为key)。常用来通过document的id来查找document的位置,实际上,他是指向的一个reversion列表集合。 第二类B+Tree, by_seqnum_index (使用序列号来作为key,说得具体点就是记录最新的reversion来作为key) 。当document进行更新的时候,就会产生一个新的序列号。 (值得注意的是,所有更新操作都是一个串行的方式,因此序列号反映了序列的非同步更新)。 同步复制的追踪,数据的显示以及更新与它都密不可分。
一切皆追加所有的更新操作(包括document的创建,修改和删除)都是以在couch文件尾部追加的方式(即Append方式)进行。而不是修改现有的文件。在此之后, B+树节点也修改为指向新的文件的位置。修改操作实际上就是在现有的B+树的末尾附加一个新的文件。这反过来又引发修改父节点的B+树节点,造成一个新的副本父节点...直到所有的方式回到根B+树节点。最后修改文件头以指向新的跟节点。 这意味着所有更新将触发1次写入文件(除删除)和logN写入每个B +树节点的页面。 因此,复杂度为O ( logN )。 一切皆最佳的操作提供了一个有趣的MVCC (多版本并发控制)模型,因为该文件保存了所有以前的历史文件版本信息。 只要客户端持有先前根节点的B +树索引,它就可以得到的快照视图。即便是更新不断发生,客户将不会看到任何的最新变化。这种一致性快照在在线备份以及在线"瘦身"方面是非常有用的。 值得注意的是,读操作是并行的,写操作是串行的。 换句话说,在任何时候只有一个文件可以进行更新操作(但是,如果是写入附件的话,可以在一个文件中进行并行操作。) GET document当客户端向CouchDB的发出的HTTP的REST的GET请求,DBServer将做如下操作...
PUT document(修改操作)当客户端向CouchDB的发出的HTTP的REST的PUT请求,DBServer将做如下操作...
请注意, by_seqnum B +树索引总是指向最新版本,以前的修改会自动被覆盖。 PUT/POST document(创建)当客户端向CouchDB的发出的HTTP的REST的PUT请求,DBServer将做如下操作...
删除文件(修改)当客户端向CouchDB的发出的HTTP的REST的DELETE请求,DBServer将做如下操作...
Online Compation(删除旧的Document)作为一个一切皆追加的存储方式,存储文件会随着时间的推移与日俱增。 因此,我们需要对其进行"瘦身",删除那些旧的Document数据。这个过程称为 Compaction。 打开一个新的存储文件 在Compation的过程,数据库仍然可用,只是请注意,在Compation的时候,是通过遍历DBName.couch文件, 将最新的数据拷贝到一个DBName.compat文件中, 因此这个过程可能会耗费很大的存储空间,如果您在系统繁忙(主要是write)的情况下进 行Compation,可能会导致你的硬盘空间耗尽。推荐系统在一个写操作不是很繁忙的情况下进行Compation。 View IndexsCouchDB支持类似数据库的View的概念。所不同的是CouchDB是采用Map/Reduce的方式来表现的。(请注意,reduce语义与谷歌的Map/Reduce模型有着很大的不同)。Map()是一个用户定义的函数,它用来将每个文件处理成中间结果。Reduce()是另外的一种用户定义的函数,它用户将Map()函数所产生的中间结果进行收集汇总而生成最终结果。 Map()的中间对象和Reduce()后的结果存储在View Indexs中。随着存储得到更新, 以前的结果也会随着更新。 每一个View的定义就是一个Map函数和一个可选的Reduce函数。View存储在design Document中。 (map函数,必须) 请注意这里design Document和View Index是不同的。design Document保存的是view的定义,View Index保存的是针对某个Database进行View操作,产生的结果。
起初,View文件是空的(View尚未创建) , 当查询执行的时候会触发下面一系列的处理。 1.CouchDB将遍历存储文件的by_seqnum B +树索引。 CouchDB继续上升一个等级,并重复计算rereduce结果。 最后,直到更新完根节点的rereduce的结果为止。 ![]()
当处理完成后,View Index 看上去就是下面这种样子
增量视图更新CouchDB更新view indexes采用懒加载和增量的方式。 也即是说,当文件被更新了,CouchDB不会立即刷新view index,直到下一次查询到来的时候才进行更新。 CouchDB刷新index采用如下的方式:
由于一致的快照的特性,在进行数据更新操作的过程中,view 查询需要花费较长时间。 查询需要等待索引更新完成后才能看到一致的结果。 还有一个选择(开发中) ,立即返回一个陈旧的副本,这对客户来说是可以容忍的。 |



