Python进阶者

人生苦短,我用Python。专注于分享Python网络爬虫、CDH、大数据、数据挖掘、数据分析、数据处理、数据可视化、自动化测试、运维、人工智能、云计算、机器学习等工具资源、热点资讯、相关技术文章、学习视频和学习资料等,期待您关注~~

1
推荐
1841
阅读

盘点几个在手机上可以用来学习编程的软件

前天在悟空问答的时候,很荣幸被邀请参加回答“在手机上可以用来学习编程的软件有哪些?”这个问题,当时在回答的首页看到一个头条大微(小小猿爱嘻嘻)的回答,觉得十分受用,在此将其整理好,发布头条给大家学习,希望对大家学习编程有帮助。感谢大佬提供的解答,原文可以点击拓展链接进行查看。学习编程的软件其实挺多...

发表了文章 • 2019-04-05 20:42 • 0 条评论

0
推荐
1547
阅读

网页结构的简介和Xpath语法的入门教程

相信很多小伙伴已经听说过Xpath,之前小编也写过一篇关于Xpath的文章,感兴趣的小伙伴可以戳这篇文章如何利用Xpath抓取京东网商品信息以及Python网络爬虫四大选择器(正则表达式、BS4、Xpath、CSS)总结。今天小编继续给大家介绍一些Xpath知识点,希望对大家的学习有帮助。1、Xpath让我们可以使用一种类似于Windows下的...

发表了文章 • 2019-03-22 16:05 • 0 条评论

0
推荐
1633
阅读

运行Scrapy程序时出现No module named win32api问题的解决思路和方法

有小伙伴在群里边反映说在使用Scrapy的时候,发现创建项目一切顺利,但是在执行Scrapy爬虫程序的时候却出现下列报错:“No module named win32api”,如下图所示,但是不知道怎么破,今天就这个问题讲解一下解决方案。出现这个报错是因为在Windows下我们缺少一个包,叫pypiwin32,这个报错一般只是在Windows下出现。很多小...

发表了文章 • 2019-03-13 17:07 • 0 条评论

0
推荐
1803
阅读

手把手教你如何新建scrapy爬虫框架的第一个项目(下)

前几天小编带大家学会了如何在Scrapy框架下创建属于自己的第一个爬虫项目(上),今天我们进一步深入的了解Scrapy爬虫项目创建,这里以伯乐在线网站的所有文章页为例进行说明。  在我们创建好Scrapy爬虫项目之后,会得到上图中的提示,大意是让我们直接根据模板进行创建Scrapy项目。根据提示,我们首先运行“cd arti...

发表了文章 • 2019-02-24 21:14 • 0 条评论

0
推荐
1516
阅读

手把手教你如何新建scrapy爬虫框架的第一个项目(上)

前几天给大家分享了如何在Windows下创建网络爬虫虚拟环境及如何安装Scrapy,还有Scrapy安装过程中常见的问题总结及其对应的解决方法,感兴趣的小伙伴可以戳链接进去查看。关于Scrapy的介绍,之前也在文章中提及过,今天小编带大家进入Scrapy爬虫框架,创建Scrapy爬虫框架的第一个项目,具体过程如下所示。1、进入虚拟环...

发表了文章 • 2019-02-22 17:27 • 0 条评论

0
推荐
1444
阅读

在windows下如何新建爬虫虚拟环境和进行scrapy安装

Scrapy是Python开发的一个快速、高层次的屏幕抓取和web抓取框架,用于抓取web站点并从页面中提取结构化的数据。Scrapy吸引人的地方在于它是一个框架,任何人都可以根据需求方便的修改。Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。1、关于虚拟环境的创建可以参考之前发布的两篇博文,在Windows下如何创建指定...

发表了文章 • 2019-02-11 17:12 • 0 条评论

0
推荐
1510
阅读

一篇文章带你了解网络爬虫的概念及其工作原理

众所周知,随着计算机、互联网、物联网、云计算等网络技术的风起云涌,网络上的信息呈爆炸式增长。毋庸置疑,互联网上的信息几乎囊括了社会、文化、政治、经济、娱乐等所有话题。使用传统数据收集机制(如问卷调查法、访谈法)进行捕获和采集数据,往往会受经费和地域范围所限,而且还会因其样本容量小、信度低等因素导...

发表了文章 • 2019-02-07 11:30 • 0 条评论

0
推荐
1848
阅读

一篇文章教会你理解Scrapy网络爬虫框架的工作原理和数据采集过程

在这春节之际,Python进阶者祝福小伙伴们身体健康,工作顺利,心想事成,万事如意,阖家幸福欢乐,猪年诸事顺心顺利。今天小编给大家详细的讲解一下Scrapy爬虫框架,希望对大家的学习有帮助。/ 01 / Scrapy爬虫框架Scrapy是一个使用Python编程语言编写的爬虫框架,任何人都可以根据自己的需求进行修改,并且使用起...

发表了文章 • 2019-02-07 10:16 • 0 条评论

0
推荐
1560
阅读

Windows下安装Scrapy方法及常见安装问题总结——Scrapy安装教程

这几天,很多朋友在群里问Scrapy安装的问题,其实问题方面都差不多,今天小编给大家整理一下Scrapy的安装教程,希望日后其他的小伙伴在安装的时候不再六神无主,具体的教程如下。Scrapy是Python网络爬虫的一个框架,十分好用,深得大家的青睐,其工作原理,在在此就不赘述了。1、正常我们在Python库的时候,只需要利用cm...

发表了文章 • 2019-01-13 17:56 • 0 条评论

0
推荐
1525
阅读

MySQL服务启动:某些服务在未由其他服务或程序使用时将自动停止

这几天因为工作需求,需要把MySQL请出来,所以将尘封已久的MySQL进行启动。可是事与愿违,兴许是许久没有访问MySQL了,MySQL生气的不理我,并向外抛出一阵阵报错。1、其中一个是:Windows无法启动MySQL57服务(位于本地计算机上)错误1067:进程意外终止,报错如下图所示。2、紧跟着还有一个报错:本地计算机上的MySQL服...

发表了文章 • 2019-01-06 14:04 • 0 条评论

0
推荐
2038
阅读

MySQL服务正在启动或停止中,请稍候片刻后再试一次【解决方案】

相信有些小伙伴在使用数据库的过程中会经常频繁的启动和停止MySQL服务,有时候会出现“服务正在启动或停止中,请稍候片刻后再试一次。”这样的提示,如下图所示。于是乎想办法去解决这个问题,但是发现连强制的数据库初始化都无济于事,而且在任务管理器的进程下也无法找到mysqld的相关进程,不能强制性的结束进程。即便在...

发表了文章 • 2018-12-29 21:53 • 0 条评论

0
推荐
1438
阅读

Python多版本情况下四种快速进入交互式命令行的操作技巧

因为工作需求或者学习需要等原因,部分小伙伴的电脑中同时安装了Python2和Python3,相信在Python多版本的切换中常常会遇到Python傻傻分不清楚的情况,今天小编整理了四个操作技巧,以帮助大家解决这个“心头之痛”。1、直接在命令行窗口中输入命令“python”,便可以进入命令行了,如下图所示。不过此时默认弹出的是Python2...

发表了文章 • 2018-12-22 19:31 • 0 条评论

0
推荐
1733
阅读

手把手教你进行R语言的安装及安装过程中相关问题解决方案

这篇文章旨在为R语言的新手铺砖引路,行文相对基础,希望对在R语言安装上有问题的小伙伴提供帮助和指引。一、什么是 R 语言R 编程语言被广泛应用在统计科学和商业领域。 在各种编程语言排名中 R 语言的排名都很靠前。 它是一款集成了数据操作、统计,以及可视化功能的优秀开源软件。免费,开源是 R 重要的特点。二、什么...

发表了文章 • 2018-12-20 08:53 • 0 条评论

0
推荐
1570
阅读

一篇文章助你理解Python3中字符串编码问题

前几天给大家介绍了unicode编码和utf-8编码的理论知识,以及Python2中字符串编码问题,没来得及上车的小伙伴们可以戳这篇文章:浅谈unicode编码和utf-8编码的关系和一篇文章助你理解Python2中字符串编码问题。下面在Python3环境中进行代码演示,分别Windows和Linux操作系统下进行演示,以加深对字符串编码的理解。在Pyth...

发表了文章 • 2018-12-14 21:16 • 0 条评论

0
推荐
1267
阅读

一篇文章助你理解Python2中字符串编码问题

前几天给大家介绍了unicode编码和utf-8编码的理论知识,没来得及上车的小伙伴们可以戳这篇文章:浅谈unicode编码和utf-8编码的关系。下面在Python2环境中进行代码演示,分别Windows和Linux操作系统下进行演示,以加深对字符串编码的理解。1、首先在Windows操作系统下的Python2环境中进行演示,我们都知道Python2中的编码...

发表了文章 • 2018-12-11 08:54 • 0 条评论