鱼C论坛

 找回密码
 立即注册
查看: 1657|回复: 3

[已解决]爬虫问题

[复制链接]
发表于 2019-4-13 08:43:43 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
我写了一个爬取附件的一个代码,打开那个附件,
他却说这个破损了。
  1. >>> import urllib.request
  2. >>> response = urllib.request.urlopen('https://fishc.com.cn/forum.php?mod=misc&action=attachpay&aid=38852&tid=64627')
  3. >>> html = response.read()
  4. >>> with open('E:/附件.zip', 'wb') as f:
  5.         f.write(html)

  6.        
  7. 16526
  8. >>>
复制代码

这是什么鬼???
最佳答案
2019-4-13 08:54:09
首先,python访问它是没有登录的,所以它返回的只是一个没用的网页代码,并不能写入.zip压缩包文件,因为它本来就不是压缩包,而是一个网页,不信可以打开无痕浏览再打开
  1. https://fishc.com.cn/forum.php?mod=misc&action=attachpay&aid=38852&tid=64627
复制代码


其次,附件下载用手轻轻一点就行了,也用不到爬虫,

而且,有些附件的需要鱼币的,如果登录了爬取照样也会扣你鱼币

所以,造成你压缩文件损坏的原因是你没有下载到附件(因为爬虫没登录,游客是下载不了附件的)
4.png
小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

发表于 2019-4-13 08:54:09 | 显示全部楼层    本楼为最佳答案   
首先,python访问它是没有登录的,所以它返回的只是一个没用的网页代码,并不能写入.zip压缩包文件,因为它本来就不是压缩包,而是一个网页,不信可以打开无痕浏览再打开
  1. https://fishc.com.cn/forum.php?mod=misc&action=attachpay&aid=38852&tid=64627
复制代码


其次,附件下载用手轻轻一点就行了,也用不到爬虫,

而且,有些附件的需要鱼币的,如果登录了爬取照样也会扣你鱼币

所以,造成你压缩文件损坏的原因是你没有下载到附件(因为爬虫没登录,游客是下载不了附件的)
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2019-4-13 16:56:31 | 显示全部楼层
本帖最后由 lixiangyv 于 2019-4-13 17:04 编辑
水瓶座 发表于 2019-4-13 08:54
首先,python访问它是没有登录的,所以它返回的只是一个没用的网页代码,并不能写入.zip压缩包文件,因为它 ...


可是我爬取我发布的一个附件,却没有说文件损坏呢?
你看,都能解压了:
5.png
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2019-4-13 17:26:56 | 显示全部楼层
本帖最后由 水瓶座 于 2019-4-13 17:32 编辑

那就说明你发的那个附件谁都能下呗

                               
登录/注册后可看大图
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2026-1-15 06:28

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表