你的浏览器禁用了JavaScript, 请开启后刷新浏览器获得更好的体验!
没有找到相关结果
牟瑞 - 大数据 Hadoop 讲师 Hadoop入门课程地址:http://www.hellobi.com/course/39 有架构师,技术总监,CTO的职位请联系我! 2016-06-29 回答
赞同来自: seng
要回复问题请先登录或注册
小小蛋
推荐一份编程学习资源,包含了各类编程语言学习进阶路线图、视频教程、配套书籍文档、数百份面经,各大厂面试真题。编程语言包括:Java、前端、PHP、Python、Linux运维、软件测试、数据解构与算法、C语言、go语言等
微信扫码关注公众号,发送 "编程"获取资源
1 个回复
牟瑞 - 大数据 Hadoop 讲师 Hadoop入门课程地址:http://www.hellobi.com/course/39 有架构师,技术总监,CTO的职位请联系我! 2016-06-29 回答
赞同来自: seng
1.使用IP抓取网页。目标网站只能使用域名去解析,直接使用IP地址去访问就去报这种错误
2.请求参数中,可能存在空格,需要提前转义的字符等,导致提交到抓取网站时造成未处理的异常。
3.网站强制要求生成cookie,并强制记录cookie的内容,在此种情况下,如果你爬虫提交的参数内容不包含cookies就会导致该类错误。
以上,只是简单的列举了可能出现该问题的情况,具体对应的问题还需要具体分析。。
你可以换一个第三方包,比如:requests试一下,如果实在不行,采用模拟浏览器的方式也是可以的。