0
推荐
1544
阅读
Python爬虫之Xpath学习
问题解决这是我昨天发的简书python爬虫之豆瓣音乐top250大牛们解决了一大部分的问题1 MySQL报错问题字段长度设置太小，说着也很奇怪，我用的vachar(20)都说小了，哎，后面建表干脆用text型，数据量不大还行。2 爬不到数据的问题我只能说是完美答案，我在这就不解释了，这个简友是it互联网的编辑，平时也会写很多Python爬...
0
推荐
1506
阅读
python爬虫之豆瓣音乐top250
回家很久了，实在熬不住，想起来爬点数据玩一玩，之前自己笔记本是win7加ubuntu16.04双系统，本打算在ubuntu里写代码的，可是回到家ubuntu打开一直是紫屏，百度知乎方法用了也没解决，厉害的兄弟可以教下我哦，过年有红包哦！！然后就还是在win7下开始写代码了（电脑太卡，一直不想装Python），今天爬的是豆瓣音乐top250...
0
推荐
1604
阅读
python爬虫之微博评论爬取
最近喜欢看《火星情报局》，搞笑中也不缺内涵。记得2016年的最后一期，里面说到，年终总结只需一个字，而沈梦辰给自己的是一个黑字，2016的她如此招黑，那今天我爬取她2017年的一篇微博评论，看看2017有什么变化呢？提交Cookie信息模拟微博登录需要爬取登录之后的信息，大家都是望而止步，不要担心，今天呢，给大家提供...
0
推荐
1136
阅读
python爬虫之图片下载APP 2.0
上次讲到利用python进行搜索并下载图片，今天更新一下，我们知道，https://www.pexels.com/ 这个网站搜索图片需要英文，但有些人不太会使用英文，想搜索什么东西需要先去翻译了才能搜索，今天调用API store里面的斯必克API进行自动翻译，这样就可以输入中文进行搜索啦！看修改的代码：from bs4 import BeautifulSoup
im...
1
推荐
1110
阅读
python爬虫之图片下载APP1.0
今天给大家来个好玩一点的，运用python爬取图片到本地，网站为https://www.pexels.com/这个网站为外文网，所以搜索图片要用英语，今天要做的就是在python中进行搜索和下载图片，做一个网页版的APP。直接上代码from bs4 import BeautifulSoup
import requests
headers ={
'accept':'text/html,application/xhtml+xml...
0
推荐
1398
阅读
爬取豆瓣电影top250并简单分析
代码：import requests
from bs4 import BeautifulSoup
import pymongo
import re
client = pymongo.MongoClient('localhost', 27017)
douban = client['douban']
top250 = douban['top250']
urls = ['https://movie.douban.com/top250?start={}'.format(str(i)) for i in range(0,250,25)]
def get_info(url):
w...
0
推荐
924
阅读
Python数据结构
说实话，数据结构是一门很难的课程，我也没有系统的学过，如果有兴趣的同学可以去看看数据结构的书籍，以后可以和我讨论一下，在这里说说我自己的理解吧。数据结构就是数据以什么样的形式存储；而以什么样的形式存储就得用相应的方法去处理分析数据（这是最近看数据分析的一点小体会），今天不过多的展开，介绍4个python...
0
推荐
953
阅读
循环与判断
循环和判断感觉也并不是很难的问题，与C语言差距也不是很大，我在这里也就是讲一下用法吧，然后用2个小程序给大家解释一下，布尔值大家应该是知道的，True和False，记得大写。判断格式为：if condition:
do
else:
do
#感觉和c差不多，冒号和缩进不要忘记了
#再看一下多重条件的格式
if condition:
do
elif condit...
0
推荐
1143
阅读
函数讲解
一周不见，今天给大家讲一讲函数，这次课比较简单，篇幅不会很长，并不是小编懒啊，这周英语作业好多，呜呜~还记得上周讲的变量和字符串吗?忘了的同学回去好好看看。print就是一个内置函数，内置函数很多，大家可以在网上找找资料看一下，我主要讲解自己建立函数。def 函数名（参数1，参数2...）：
return '结果'函数...
0
推荐
1148
阅读
千里之行，始于足下
上次小白讲了python和pycharm的安装，大家有没有好好去熟悉pycharm的操作了。“千里之行，始于足下”’，在讲爬虫之前了，还是要打下python的基础的，不然后面代码大家看不懂。后面的一段时间可能都会讲基础，我尽量用比较轻松的方法让大家入门，更深层的东西，以后大家可以自学。变量学过编程语言的都知道变量吧，最简单的...
0
推荐
1192
阅读
工欲善其事，必先利其器
俗话说的好：‘’工欲善其事，必先利其器‘’，我们每天也不能空喊口号说python有多好多好，今天呢，就教大家如何安装python和我比较推荐的python IDE：pycharm，由于本人用的Windows系统，在这里只介绍Windows的安装方法，其他系统的同学可以自行百度。python3.5的安装python是开源的哦，直接去Python官网下载就好了（习惯...
0
推荐
1308
阅读
人生苦短，我用python
大道至简的python小白我本科学的是城乡规划，考研是农学的森林经理，读研究生的时候闲着无聊，就想学一门编程语言，就听了某大神的建议：首先c语言入门，然后学java就好了。可是小白我学了不久就感觉枯燥啊（什么指针，类，对象，搞得无聊，还不能写出像样的项目），碰巧数学建模中遇到要找大量数据的问题，然后自己找啊...