LD634

数据学习记录

10
推荐
2152
阅读

爬取起点小说网

两天的爬虫线下培训结束了,感谢大伟老师和工作人员们的辛苦付出,以下为本次作业的简述:一、先处理单页信息的爬取:输出结果后发现网页被重定向至其他网页,并非需要爬取的排行榜,于是加入代理及异常机制尝试:输出结果正常:接着,加入解析器,通过循环,把需要的信息先放入字典,再将全部信息分类汇总入列表:引入p...

发表了文章 • 2017-11-20 15:45 • 4 条评论