202009-07 细说MongoDB 173 VIEW 一、概述(1)版本历程0.x 起步节点1.x 支持复制集和分片2.x 更加丰富的数据库功能3.x 合并了一家专门做数据库引擎的Wired Tiger公司,更加完善的周边生态环境4.x 支持分布式事务MongoDB的正式版本都是偶数版本,x.x.x,主要版本(x.x)大约每年升级一次,小版本主要是修复.... Read More >
201909-23 mongo-connector实现MongoDB与elasticsearch实时同步 415 VIEW 引言:验证表明:mongo-connector工具支持MongoDB与ES之间的实时增insert、删delete、改update操作。对于历史数据,mongo-connector工具不能同步到ES中,根因是本身工具不支持(初步界定),还是没有这种场景,待查(进一步研究后再更新)。1. mongo-.... Read More >
201707-17 CentOS 7 yum方式快速安装MongoDB 510 VIEW MongoDB是深受广大开源爱好者支持和研究的NoSQL数据库之一,它基于灵活的JSON文档方式,非常适合敏捷开发,其高可用功能强大,支持水平扩展等众多关键特性。一如其简约而不简单的MySQL一样,安装起来也非常方便,支持源码编译安装,rpm安装以及yum安装等众多方式。本文主要讲述在CentOS.... Read More >
201703-23 GridFS:基于MongoDB的分布式文件存储系统 816 VIEW 基本原理 GridFS是MongoDB之上的分布式文件系统,其利用了MongoDB的分布式存储机制并通过MongoDB来存储文件数据和文件元数据,兼具文档型数据库和文件系统的优势。GridFS是当前大数据潮流和复杂数据分析需求的产物。 简单地来说,GridFS通过将文件数据和文件元数据保存在Mong.... Read More >
201506-10 高可用可伸缩架构实用经验谈(七牛云存储) 1048 VIEW 移动互联网、云计算和大数据的成熟和发展,让更多的好想法得以在很短的时间内实现为产品。此时,如果用户需求抓得准,用户数量将很可能获得爆发式增长,而不需要像以往一样需要精心运营几年的时间。然而用户数量的快速增长(尤其是短时间内的爆发式增长),通常会让应用开发者有些吃不消,不得不面临一些严峻的技术挑战:如何避免因为单台机器当机导致服务不可用;如何避免在服务容量不足时,用户体验下降,等等。在系统构建之初就.... Read More >
201308-10 Mongo-Hadoop 1.1 发布,利用 Hadoop 并行处理 MongoDB 中的大数据 1737 VIEW Mongo-Hadoop 1.1 发布了,Mongo-Hadoop可以很容易地使用Mongo数据库库以及.bson格式的mongoDB备份文件,并将此作为Hadoop Map/Reduce任务的数据输入源或者输出目标。Mongo-Hadoop先检测数据并计算数据分割,然后交给Hadoop并行处理,这样非常大的数 据集就可以快速被处理。 详细介绍请看: http://www.oschina.n.... Read More >
201307-25 mongodb非正常关闭后无法启动 2072 VIEW 今天上午服务器不清楚为什么突然重启了,重启后发现mongodb竟没有正常启动起来,立刻查看了下日志,结果就发现了非正常关机都导致了mongodb有些文件没有正常写入,导致相关锁的生成。看了看官方文档,应该没有太大问题,输入:mongodb –repair,结果报我一个错误,还是不能正常启动。仔细看了.... Read More >
201307-25 Mongodb 断电或者强制关机之后 不能启动 3191 VIEW Mongodb相信大家都比较熟悉了,将它注册为服务什么的就不说了,网上到处都是。在公司用的过程中,我发现在意外断电,或者强制关机之后,启动服务时候就会报错,找了很久,试了很多种方法,才发现,它有个自带的修复命令,将其执行以下就ok了 Mongod --repair --dbpath=D:\Mongodb\data(即你设置服务的时候,用于放数据库的位置) 注意repair 是2个 -.... Read More >