0
推荐
3428
阅读
零基础学爬虫（四）：不规则分页的抓取和反爬虫应对方法
上一篇文章，我们讲到了爬虫的进阶用法（零基础学爬虫（三）：抓取网页的多个元素）。今天，我们将升级我们的爬虫程序，学习不规则分页的抓取和反爬虫应对方法。小编可以告诉大家，看完这篇文章，大家可以抓取互联网上90%的数据！一、不规律分页的数据抓取1.不规律分页分为滚动下拉和需要鼠标点击两种情况。我们先来看滚...
1
推荐
3256
阅读
零基础学爬虫（三）：抓取网页的多个元素
上一篇文章，我们使用“Web Scraper”插件制作了我们的第一个爬虫程序。（零基础学爬虫（二）：几分钟完成你的第一个爬虫程序！）今天，我们将升级我们爬虫程序，同时抓取网页的多个元素，以及抓取二级页面的信息。开始之前我们要知道元素集（Element）的概念，元素集是包含了多个元素（附类）的集合，如果抓取信息时需要...
1
推荐
2242
阅读
零基础学爬虫（二）：几分钟完成你的第一个爬虫程序！
上一篇文章，我们讲到了查询xml文件爬取网页数据（零基础学爬虫（一）：不用编程抓取B站弹幕信息）。今天，我们开始正式搭建第一个爬虫程序。我们打开谷歌浏览器，在Chrome网上应用商店搜索并安装一个名为“Web Scraper”的浏览器插件，安装谷歌浏览器插件需要科学上网的网络环境。小编给大家推荐一个科学上网软件（链接：...
0
推荐
2486
阅读
零基础学爬虫（一）：不用编程抓取B站弹幕信息
网络爬虫是一种自动获取网页内容的程序，是搜索引擎的重要组成部分。利用网络爬虫可以做到很多很有趣、有用的事情，比如收集某网站的用户信息、抓取论坛发言、各大电商销售数据、各类招聘网站职位数据等等，还有很多数据，不一一列举了。只要有爱数据的心和爬虫程序，一切且有可能。今天给大家的例子是不用编程抓取B站弹...