文本文件入库，怎么比较好的过滤其中的垃圾数据
0
没有找到相关结果
重要提示：提问者不能发表回复，可以通过评论与回答者沟通，沟通后可以通过编辑功能完善问题描述，以便后续其他人能够更容易理解问题.
没有找到相关结果
推荐一份编程学习资源，包含了各类编程语言学习进阶路线图、视频教程、配套书籍文档、数百份面经，各大厂面试真题。编程语言包括：Java、前端、PHP、Python、Linux运维、软件测试、数据解构与算法、C语言、go语言等
微信扫码关注公众号，发送 "编程"获取资源
1 个回复
牟瑞 - 大数据 Hadoop 讲师 Hadoop入门课程地址：http://www.hellobi.com/course/39 有架构师，技术总监，CTO的职位请联系我！ 2016-04-07 回答
赞同来自:
一般首先采用正则表达式过滤比较明显的垃圾数据，比如数据缺失等等，
然后再根据业务规则解析数据
最后将解析的数据入库。
如果你的文本文件是日志文件的话，一般产生的垃圾数据也是有其原因的，可能是程序的bug，系统的异常等等，所以分析这些数据也有非常大的价值。