yayainparis

keep learning~

1
推荐
1938
阅读

dubbo学习笔记一 zk+dubbo-admin+dubbo-simple-monitor+dubbo-demo部署

最近因为换了公司,好久没有来天善了,因为新公司的基础架构是阿里云,因此远离了玩了1年多的hadoop,目前在项目中学习和使用一些数据服务类的基础框架,下面就和大家分享一下dubbo这个框架,使用dubbo的主要原因是,为了实现服务治理中的上下线优雅退出和服务切换加权,减少中断服务的时间,保证服务的连续性。话不多说...

发表了文章 • 2016-07-21 10:49 • 1 条评论

2
推荐
3444
阅读

浅谈如何控制Mapreduce的map个数

1.Block 块 文件上传到HDFS中,第一步就是数据的划分,这个是真实物理上的划分,数据文件上传到HDFS后,要把文件划分成一块一块,每块的大小按照hdfs-site.xml里配置选项进行划分,数据一般需要备份,默认的dfs.replication为3。   namenode中配置文件路径为/etc/hadoop/  hdfs-site.xml中没有设置dfs.block.size,则默认...

发表了文章 • 2015-04-09 10:12 • 0 条评论