2016年,工作的第9个年头,对自己是个顿悟和成长的一年。
对行业的感悟——传统BI从业者的没落
BI行业的变换真的很快,2016年内,公司基本已经完成数据仓库从结构化数据库向大数据平台迁移的过程。2017年大数据会继续向着更全面、更实时、更智能的方向发展。在这样的潮流中,技术的更新和淘汰原来越频繁,不得不感叹做IT真的很苦,要不停的学才可能赶上时代的发展。传统BI工具逐渐没落,代替它的是更快,更易用,更连接应用场景的工具。以前我做Cognos开发,几年前Cognos本身就是一个大而全的BI解决方案,学一个工具就可以满足全部BI需求。但数据量的暴增,用户对数据任知的提高、对数据实时性、工具易用性的要求变得更高,让它越来越不堪重负,于是乎,Cognos+关系型DB的BI解决方案 被Hadoop、Spark、Kylin、Tableau这些行业新宠代替。在开发成本上,传统展示工具更是被爆的体无完肤,原来制作一张报表需要1周,现在只要1天。目前Cognos还能守住的是就只有固定报表这块了,但被代替也是迟早的事情。
就从展示工具被颠覆的现实上推断,传统DB上的数据仓库也逐渐会被颠覆,不远的将来,也就2-3年,数仓将全面基于大数据平台,建模过程也会逐渐变得更简单。再大胆猜测一下,未来五年,是不是连数据仓库都可以不要了?
细思恐极!再不学习大数据技术,传统BI从业者很快就会被行业淘汰。
对工作的顿悟——技术能力不等于领导力,让你成为主管的能力,正在阻碍你成为好主管
经过这一年的成长,更深理解了团队领导的职责,体会到了更大的责任和压力,不是简单的分配任务,也不是机械的完成上级的任务,更不是埋头拼命干活。而是要为团队指明方向,制定计划,根据团队成员特点分配任务,协调团队完成项目,提高团队的技术能力,维护团队氛围……可能以后对技术不会再深入到最细节了,但在大方向上一定要保证团队走在正确的路上。
2017年计划
目标很简单,但也很难,在既定的道路上,带领团队走下去,打造一支卓越团队。
1. 利用Flume、Spark streaming、ES、网络爬虫等大数据技术,完善用户行为数据的收集和处理,与业务数据的深度整合,为智能营销、智能反作弊提供数据基础
2. 实现基于大数据平台的OLAP分析,实现Kylin等技术在具体场景上的应用
3. 团队成长,团队成员都得到技术提升
4. 个人晋升
5. 多来天善。发现好久没来了,今天读了读大家的文字,对自己也是一次启发。等我们项目完成,可以做个视频分享下新的有趣技术。