Hadoop集群
0
推荐
2078
浏览
CDH安装系统环境准备——系统版本和安装包下载地址指南
由于Hadoop深受客户欢迎,许多公司都推出了各自版本的Hadoop,也有一些公司则围绕Hadoop开发产品。在Hadoop生态系统中,规模最大、知名度最高的公司则是Cloudera。接下来的日子里,小编将带大家一起学习搭建CDH。...
dcpeng 发表了文章 • 2018-09-11 13:03
0
投票
0
回答
1211
浏览
可以采用不同的操作系统来构建hadoop集群吗,比如master是win7,slave是linux? 如何实现,求思路。
xiaob786 发起了问题 • 2017-02-08 22:07
0
投票
1
已解决
1357
浏览
5台台式机搭建小型hadoop集群的可行性?
GeorgeYao 回复了问题 • 2016-05-18 11:27
0
投票
0
回答
3508
浏览
为什么不能远程访问hadoop集群的master:50070和master:8088端口?
erlybt 发起了问题 • 2015-11-16 21:13
6
推荐
3890
浏览
Hadoop集群系列(目录)
下面是Hadoop集群系列的目录安排,按照一星期发布一期的原则进行。希望大家的关注。 目录安排: 1)Hadoop集群_第1期_CentOS安装配置_V1.0 2)Hadoop集群_第2期_机器信息分布表_V1.1 3)Hadoop集群_...
xia520pi 发表了文章 • 2015-10-08 16:29
首先,看到你的配置说明;整体还是不错的。
1.你处理的数据是消费数据还是用户行为数据,数据量是否足够大?
2.Hadoop分布式文件系统处理数据是及其消耗内存的,所有的计算都放在内存中处理;
3.五台机器搭建集群已经完全足够了,但是建议还是将内存最大化;最好1... 显示全部 »
1.你处理的数据是消费数据还是用户行为数据,数据量是否足够大?
2.Hadoop分布式文件系统处理数据是及其消耗内存的,所有的计算都放在内存中处理;
3.五台机器搭建集群已经完全足够了,但是建议还是将内存最大化;最好1... 显示全部 »
首先,看到你的配置说明;整体还是不错的。
1.你处理的数据是消费数据还是用户行为数据,数据量是否足够大?
2.Hadoop分布式文件系统处理数据是及其消耗内存的,所有的计算都放在内存中处理;
3.五台机器搭建集群已经完全足够了,但是建议还是将内存最大化;最好16G以上;
4.还有你处理数据是使用Hive还是Mapreduce、Spark,总之语言不同;处理方式也就不同,要对门入座,选择合适的方法即可;
....
就先建议这么多,希望有用。
1.你处理的数据是消费数据还是用户行为数据,数据量是否足够大?
2.Hadoop分布式文件系统处理数据是及其消耗内存的,所有的计算都放在内存中处理;
3.五台机器搭建集群已经完全足够了,但是建议还是将内存最大化;最好16G以上;
4.还有你处理数据是使用Hive还是Mapreduce、Spark,总之语言不同;处理方式也就不同,要对门入座,选择合适的方法即可;
....
就先建议这么多,希望有用。
0
投票
0
回答
1211
浏览
可以采用不同的操作系统来构建hadoop集群吗,比如master是win7,slave是linux? 如何实现,求思路。
xiaob786 发起了问题 • 2017-02-08 22:07
0
投票
1
已解决
1357
浏览
5台台式机搭建小型hadoop集群的可行性?
GeorgeYao 回复了问题 • 2016-05-18 11:27
0
投票
0
回答
3508
浏览
为什么不能远程访问hadoop集群的master:50070和master:8088端口?
erlybt 发起了问题 • 2015-11-16 21:13
0
推荐
2078
浏览
CDH安装系统环境准备——系统版本和安装包下载地址指南
由于Hadoop深受客户欢迎,许多公司都推出了各自版本的Hadoop,也有一些公司则围绕Hadoop开发产品。在Hadoop生态系统中,规模最大、知名度最高的公司则是Cloudera。接下来的日子里,小编将带大家一起学习搭建CDH。...
dcpeng 发表了文章 • 2018-09-11 13:03
6
推荐
3890
浏览
Hadoop集群系列(目录)
下面是Hadoop集群系列的目录安排,按照一星期发布一期的原则进行。希望大家的关注。 目录安排: 1)Hadoop集群_第1期_CentOS安装配置_V1.0 2)Hadoop集群_第2期_机器信息分布表_V1.1 3)Hadoop集群_...
xia520pi 发表了文章 • 2015-10-08 16:29