1
推荐
9673
阅读

Apache NiFi的一些学习资源

原来我一直使用Inforamtica作数据处理工具, 由于实时数据(主要基于Kafka)的需要,一直在找类似工具,直到最近看到了Apache NiFi这个工具。Apache NiFi具体是做什么的?根据OSCON 2015 - Beyond Messaging: Enterprise Dataflow with Apache NiFi这个pptApache NiFi适用范围可靠安全的系统间数据传输分发数据到分析系统...

发表了文章 • 2018-07-26 17:36 • 0 条评论

1
推荐
1700
阅读

Apache Drill介绍-SQL语句和系统表查询

Apache Drill 主要用于查询,主要关注select 和 建表语句,Drill 支持select 很标准, 这次主要介绍create语句,Drill可使用的SQL语句:系统设置语句ALTER SESSION SET ALTER SYSTEM SET ALTER SYSTEM RESET ALTER SYSTEM RESET ALL RESET SET查询及建表语句USE schema_name; SELECT CREATE TABLE AS(CTAS) CREATE VIEW ...

发表了文章 • 2016-10-10 15:40 • 0 条评论

0
推荐
1801
阅读

Apache Drill介绍-ODBC配置、Drill Explorer及Tableau连接

由于计划会使用Tableau连接Drill作为探索工具,就在Windows 7中文版上做了一些测试:包括ODBC安装,Tableau的ODBC连接设置,和Drill自带的Drill Explorer这3项。Drill ODBC驱动及Drill Explorer安装:安装程序地址:http://package.mapr.com/tools/MapR-ODBC/MapR_Drill/MapRDrill_odbc_v1.2.1.1000/MapRDrillODBC64.msi...

发表了文章 • 2016-09-28 23:50 • 0 条评论

1
推荐
3011
阅读

Apache Drill问题-中文兼容性问题测试及解决

前几天在测试Drill连接不同数据源的时候发现中文存在一些问题,就具体测试了一下,总的来说只有Mongodb有问题,不过hadoop系列需要转换一下。Drill 中文测试总结:配置修改:vi apache-drill-1.0.0/conf/drill-env.sh export DRILL_SHELL_JAVA_OPTS="-Dsaffron.default.charset=UTF-16LE"不配置的错误信息:Query Failed...

发表了文章 • 2016-09-27 23:06 • 0 条评论

1
推荐
2514
阅读

Apache Drill问题:1.8版本连接HBASE的问题处理

使用Apache Drill 1.8版本连接HBASE上的问题,碰到了一个,还是花了一定时间去处理,这里记录一些。问题描述:Apache Drill 1.8 默认配置下连接HBASE,连接成功,但是执行SQL语句报错。配置信息--hbase         {           "type": "...

发表了文章 • 2016-09-25 23:40 • 0 条评论

0
推荐
1841
阅读

Apache Drill介绍-Hadoop平台、MongoDB上的连接

Drill和Hadoop平台、MongoDB上的连接Drill很大一个特性就是和Hadoop平台的集成,提供了3种方式(1)直接访问HDFS(2)访问HIVE(3)访问HBASE我使用CDH 5.7的版本,Drill使用1.8, 都使用远程方式连接,需要配置hostnameHDFS访问方式和访问文件一样,配置也是类似--hdfs {   "type": "file",   "enabled": true,  ...

发表了文章 • 2016-09-24 15:34 • 0 条评论

0
推荐
1538
阅读

Apache Drill介绍--关系数据库连接

测试使用的是Drill 1.8,  官方的参考文档URL: http://drill.apache.org/docs/rdbms-storage-plugin/先介绍一下基本步骤(0) 复制jdbc driver到$installfolder/jars/3rdparty中,然后重启服务(1) 在Storage中创建一个Storage Plugins  注意创建的时候会验证数据库是否连通(2) 填写配置信息,以下是postgresql的示...

发表了文章 • 2016-09-20 17:59 • 0 条评论

0
推荐
1968
阅读

Apache Drill介绍--管理界面

Apache Drill提供了一个管理界面,可以做一些配置和监控, 内容列表如下:Apache Drill:系统总体状态Query:执行查询语句Profile:执行情况和具体日志Storage:数据连接配置Metrics:监控指标Logs:日志Options:参数配置可以通过8047端口访问, 如http://127.0.0.1:8047/今天先贴一下图,内容慢慢再补。Default Page:Query:...

发表了文章 • 2016-09-13 13:48 • 0 条评论

0
推荐
1942
阅读

Apache Drill介绍--101基本内容

最近看了一下Apache Drill方面的内容,近期会做一下这方面的介绍。总体介绍:Apache Drill我的理解就是一个data federation的工具,可以用于数据探索方面、快速开发方面的工作,优点是和大数据平台紧密集合,并且在odbc/jdbc上支持标准的SQL语句,这一点还是很有用的。以下是官网(http://drill.apache.org/docs/drill-in...

发表了文章 • 2016-09-11 15:04 • 0 条评论