[已解决]爬虫只能爬一张图····

Marcus-Liu · 发表于 2020-7-20 19:04:29

马上注册，结交更多好友，享用更多功能^_^

您需要登录才可以下载或查看，没有账号？立即注册

x

请大神帮忙分析下，为什么下面的代码只能爬一张图，我是要想把搜到的图片都爬下来，且（f+=1）每次都有打印，图片却只有一张：

import requests
from bs4 import BeautifulSoup
def getUrls():
rootUrl='http://sc.chinaz.com/tupian/'
r=requests.get(rootUrl)
r.encoding='utf-8'
soup=BeautifulSoup(r.text,'html.parser')
notes=soup.find_all('img',)
links=[]
for note in notes:
link=note['src2']
links.append(link)
return links
def getImgs():
imgs=[]
for link in getUrls():
r=requests.get(link)
r.encoding='utf-8'
imgs.append(r.content)
return imgs
def downLoad():
f='1'
with open('%s.jpg'%f,'wb') as fout:
for img in getImgs():
fout.write(img)
print(f)
f+='1'
downLoad()

复制代码

最佳答案

月排行榜 / 总排行榜

Twilight6

2020-7-20 20:25:58

改成这样：

import requests

from bs4 import BeautifulSoup

def getUrls():

rootUrl='http://sc.chinaz.com/tupian/'

r=requests.get(rootUrl)

r.encoding='utf-8'

soup=BeautifulSoup(r.text,'html.parser')

notes=soup.find_all('img',)

links=[]

for note in notes:

      link=note['src2']

      links.append(link)

return links

def getImgs():

imgs=[]

for link in getUrls():

      r=requests.get(link)

      r.encoding='utf-8'

      imgs.append(r.content)

return imgs

def downLoad():

f='1'

for img in getImgs():

      with open('%s.jpg' % f, 'wb') as fout:

         fout.write(img)

         print(f)

         f+='1'

downLoad()
复制代码

跳转到最佳答案楼层

小甲鱼的铁粉 · 发表于 2020-7-20 19:22:35

本帖最后由小甲鱼的铁粉于 2020-7-20 19:23 编辑

不好意思我看错了

Marcus-Liu · 发表于 2020-7-20 19:28:43

小甲鱼的铁粉发表于 2020-7-20 19:22
不好意思我看错了

??????

Twilight6 · 发表于 2020-7-20 20:25:58

这个最佳答案由 Twilight6 给出，感谢 Twilight6 的回答。

单击隐藏图章

改成这样：

import requests

from bs4 import BeautifulSoup

def getUrls():

rootUrl='http://sc.chinaz.com/tupian/'

r=requests.get(rootUrl)

r.encoding='utf-8'

soup=BeautifulSoup(r.text,'html.parser')

notes=soup.find_all('img',)

links=[]

for note in notes:

      link=note['src2']

      links.append(link)

return links

def getImgs():

imgs=[]

for link in getUrls():

      r=requests.get(link)

      r.encoding='utf-8'

      imgs.append(r.content)

return imgs

def downLoad():

f='1'

for img in getImgs():

      with open('%s.jpg' % f, 'wb') as fout:

         fout.write(img)

         print(f)

         f+='1'

downLoad()
复制代码

Marcus-Liu · 发表于 2020-7-20 20:38:53

Twilight6 发表于 2020-7-20 20:25
改成这样：

不愧是大佬

账号		自动登录	找回密码
密码			立即注册

[已解决]爬虫只能爬一张图····

马上注册，结交更多好友，享用更多功能^_^

浏览过的版块