鱼C论坛

 找回密码
 立即注册
查看: 1380|回复: 6

[已解决]关于python requests的一个问题。

[复制链接]
发表于 2019-1-30 13:44:36 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 CRYSTAL觋 于 2019-1-30 13:44 编辑

我完全找找小甲鱼老师的文档,自己敲出来执行就会报错。
是淘宝网站屏蔽了,还是我的插件装的有问题?
豆瓣top250和淘宝 两个视频教程的例子。我执行了都报错。

我自己写模仿写了一个小爬虫、爬一些小网站的内容。就不会报错。
是不是被淘宝屏蔽了请问?麻烦帮忙解释一下。谢谢。

、小白求助。这样的问题怎么解决啊?
最佳答案
2019-1-30 15:02:30
淘宝是有反爬虫和反嗅探,想爬淘宝并不是很容易
如果想要练手的话可以看看这个网站
http://toscrape.com/
这个网站是专门的"爬虫沙箱"(Scraping Sandbox),换句话说就是专门用来练手的,其提供了两个子网站,分别是在线图书商城主题和Quotes(类似纯文字版的推特)主题
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2019-1-30 13:51:21 | 显示全部楼层
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2019-1-30 13:55:03 | 显示全部楼层
淘宝这么好爬,说明你也是高手了。

小白求助。这样的问题怎么解决啊?
你这一句话,人家要用一本书来答你,你还是慢慢学吧。别想着一口吃下一个胖子
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-1-30 14:34:21 | 显示全部楼层
只能告诉你,网站是在不断调整和更新的,爬虫这东西容易失效,视频只是参考,提供一个解决问题的思路,尽管我自己目前还没有形成一个思路,但我知道光靠临摹,学不会思考是不行的,但临摹确是拐杖,总要扔掉它,却也需要他,有时
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-1-30 15:02:30 | 显示全部楼层    本楼为最佳答案   
淘宝是有反爬虫和反嗅探,想爬淘宝并不是很容易
如果想要练手的话可以看看这个网站
http://toscrape.com/
这个网站是专门的"爬虫沙箱"(Scraping Sandbox),换句话说就是专门用来练手的,其提供了两个子网站,分别是在线图书商城主题和Quotes(类似纯文字版的推特)主题
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-1-30 15:39:55 | 显示全部楼层
虚无→与→飘渺 发表于 2019-1-30 15:02
淘宝是有反爬虫和反嗅探,想爬淘宝并不是很容易
如果想要练手的话可以看看这个网站
http://toscrape.com/ ...

明白。谢谢。
但是也比较好奇为什么小甲鱼视频中可以实现、毕竟代码是一样的。
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-1-30 18:38:41 | 显示全部楼层
CRYSTAL觋 发表于 2019-1-30 15:39
明白。谢谢。
但是也比较好奇为什么小甲鱼视频中可以实现、毕竟代码是一样的。

爬虫这种东西是有时效性的,当目标网站后台更新之后老版本的爬虫肯定也就会出问题了

就像是只支持win7及以上系统版本的软件无法在xp上运行是一个道理
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2026-4-2 03:46

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表