请问哪位有没有用spark 读取hbase 或者hive 进行sql 操作的代码示例
0
没有找到相关结果
重要提示：提问者不能发表回复，可以通过评论与回答者沟通，沟通后可以通过编辑功能完善问题描述，以便后续其他人能够更容易理解问题.
没有找到相关结果
推荐一份编程学习资源，包含了各类编程语言学习进阶路线图、视频教程、配套书籍文档、数百份面经，各大厂面试真题。编程语言包括：Java、前端、PHP、Python、Linux运维、软件测试、数据解构与算法、C语言、go语言等
微信扫码关注公众号，发送 "编程"获取资源
1 个回复
regan - run! run! run! happy runner! 我是奔跑的小米~ 2017-02-20 回答
赞同来自:
table insurance_dm.accident_analysis_beeline as select imei,longitude,latitude,data_date,time from dsp_dw.cw_location_trace_new \
where data_date >= 20161210 and longitude > 119.710 and longitude <119.719 and latitude > 37.000 \
and latitude <37.009;"
直接写脚本读就是了。如果要在Spark里面读取Hive表，需要在spark中启用hive支持，然后在Spark的conf目录中加入hive的hive-site.xml文件，就能直接使用sql("select * from hivetable")操作了。当然要读取hbase中的数据，建议使用hbase-rdd这样一个开源的插件