这是菜鸟学Python的第123篇原创文章
阅读本文大概需要3分钟
Python的数据分析是我比较喜欢的一个方向,因为可以探索数据里面的秘密,加上可视乎会非常漂亮,但是里面也蕴含着很多技巧的综合,陆陆续续我已经写了好多这样的文章,大部分都是爬虫和数据分析,数据可视化结合的相关的文章,里面也有一些铁杆粉丝的优秀投稿的文章!今天我们来总结回顾一下~~
数据分析篇内容很丰满
1.爬虫:
从单页面的爬虫,到多页面的多线程的爬虫,然后用scrapy框架爬取,最后用selemium模拟器爬取,里面包含了一些反爬虫的策略运用,比如cookies,代理池等等.
2.数据的清洗
从基本的正则表达式,到Pandas的大量的技巧运用
3.数据的可视化
从Pandas的matplotlib,到R语言的ggplot2,再到Tableau神奇的运用
数据分析精华文章回顾
1.Python1200本书爬取
市面上Python的书这么多,出版社也很多,有很多出版社都跟我联系出书的事情,于是我把整个市面上所有的Python书都爬取了,并进行了深度分析。想知道Python那本书最火,评分最高,哪家出版社出版了Python书最多,最受欢迎,那本Python书名最长.
详细请看:
我爬取了市面上所有的Python书|想知道几件事
如何爬取全网1200本Python书|爬虫实战篇
史上最全的Python书排行榜|你想知道的都在这里
2.Python分析福利彩票
这篇文章出自粉丝“路上行舟”同学,数据分析部分我加了一点内容,福利彩票相信大家都买过,里面有没有啥秘密或者规律呢,不妨看看这篇文章。
详细请看:
【小白学爬虫】用Python分析福彩3D|发现数字的秘密
3.股票的数据分析
基金和股票的数据分析,其实我已经分析了很久了,这块的数据分析有趣,而且投资价值非常大!当然我只是业余的选手,股票的分析涉及到量化交易和投资模型,风险策略等等。我只是从数据分析的一个小角度探索了一些:
详细请看:
爬取4000多只股票2年的数据|只为找到七夕必涨的她
有趣!【9个月银行股数据】|可视化分析
当然还有专业的大牛,比如量化基金的投资可以看下面的链接文章:
用Python定投基金|看看巴菲特有坑我们吗?
用Python来分析股票|发现炒股软件里惊人内幕
4.NBA数据分析
我有一个铁杆粉丝小郑同学,对NBA有独特的情怀,于是投稿了几篇关于NBA的优秀的文章。向自己的偶像科比致敬,非常不错!
详细请看:
38年来,NBA最有价值球员|数据分析
厉害了!20年【科比NBA】生涯|数据分析
5.爬取全网5000部手机
现在手机已经成为每个人的必需品,这篇文章是我的另外一个忠实粉丝"BlueDamage"同学的投稿,思路和技巧都非常不错,值得一读!
详细请看:
实战爬取全网5000部手机|上篇
实战爬取全网近5000手机|下篇
6.周星驰的电影
我自己是周星驰的超级影迷,非常喜欢他的电影,看他的电影看了很多遍,有一些电影可能反复看了5-6遍,真的是非常经典!于是我做了一个小小星爷30年电影的数据分析.
详细请看:
周星驰30年电影数据分析
7.近20000套南京二手房数据分析
房价之高,房价涨幅之大,让屌丝望而却步!于是我爬取了南京近20000多套二手房的数据,进行深入分析,发现300万几乎买不到什么房子,不信的话,请看:
屌丝想买房,爬取南京20000多套二手房|上篇
南京的房子有多贵| 分析近20000套二手房的数据
南京的房子卖的有多火|二手房成交数据分析上篇
南京楼市火吗|16000套二手房数据分析
8.深圳的租房数据分析
这个我的另外一个粉丝"闪亮的日子"同学,写了一篇关于分析深圳的租房情况,写的非常不错,尤其是数据清洗部分!
详细请看:
深圳租房有多贵|我爬取了深圳所有的房子告你诉答案
9.学Python薪资如何,爬取了全国1600多个Python岗位
Python这么火,每个学Python的同学一定都想知道Python的薪资待遇如何,哪些城市招聘数量多,岗位待遇比较高。
详细请看:
学好Python薪水有多少|我爬取了所有的Python职位
Python年薪最高有50w|探秘全国近1600个Python岗位数据分析
10.爬取淘宝上4000件羽绒服
双十二来了,想买件羽绒服,于是把淘宝上的羽绒服全部爬取了,并做了数据分析,发现折扣力度并不大,打折最多的都是1200多块的羽绒服。
详细请看:
双十二来了,我爬取了淘宝上所有的羽绒服|想找到最大折扣
结论
Python从入门到进阶,到数据分析,到数据可视化我已经写了累计有120多篇了.下面我准备开始写机器学习的文章,有同学会问那前面几个主题还会写吗,如果有好玩的数据,厉害的Python高级技巧,我依然会写的.