ferry2174的博客
ferry2174 · 共 4 篇文章
使用ambari搭建hadoop集群(local)
Ambari是Hortonworks开源的一个管理和安装hadoop集群的工具,跟ClouderaManager类似。 1、系统要求 1.1、操作系统要求 都要求是64位操作系统。 Red Hat EnterPrise Linux:5.x 或 6.x CentOS:5.x 或 6.x SUSE Linux Enterprise Server 11, SP1 必须有相应版本的操作系统包,否则安装会遇到错误 1.2、 浏览器要求 Ambari是一个基于浏览器的web程序,要求如下: Windows(Vista,7) IE9或以上 Firefox最新版 Safari最新版 Google Chrom…
2013-08-30 09:03 · Hadoop · 评论(0)
mongo-java-driver连接池
MongoDB的连接对象是DBPort,所以可以从DBPortPool对象看起,构造函数如下: DBPortPool( ServerAddress addr , MongoOptions options ){ super ( "DBPortPool-" + addr.toString() + ", options = " + options.toString() ,options.connectionsPerHost ); _options =options; _addr = addr; _waitingSem = new Semaphore( _options.connectionsPer…
2013-08-16 08:37 · NoSql · 评论(0)
MongoDB使用
1、预分片(shard) mongodb通过对数据的横向切分,将一个collection的数据分布到不同的片中。不同的片可以部署在不同的主机上,在数据分布均衡的情况下,可以同时对不同片内的数据进行增删改查操作,从而提升整个系统的吞吐量。 mongodb存储数据的基本单元是chunk,chunk分布在各个片中,写入数据时,chunk会逐渐增大,当超过一个阀值时,会分裂成两个片,数据就会同时写入到这两个chunk中,因此,可以将mongodb的负载均衡功能看做是对chunk的负载均衡。如果该collection可以应用分片,mongodb会自动将某个chunk迁移到其他的片上。也可以手工拆分片,…
2013-08-16 08:35 · NoSql · 评论(0)