hadoop怎么从数据库读取某个字段并完成计数

0
已邀请:
0

Bob - 同程旅游大数据+BI 架构师 2016-01-28 回答

1.hadoop是通过DBInputFormat来读取数据库。
在使用DBInputFormat前,相应数据库的驱动jar包需要放在hadoop集群每个节点的lib/目录下
注意:使用hadoop来读取数据库时会产生大量的连接,不建议直接读取数据库的大表。如果数据库的数据较多,建议先转为文本,上传到hadoop后再执行读取操作。
 
示例:
http://www.edureka.co/blog/usi ... l-db/
 

要回复问题请先登录注册