[已解决]一段抓取知乎妹子的爬虫代码不能正常运行

xilingtu

一段抓取知乎妹子的爬虫代码不能正常运行，总是出现问题说缩进有问题，但是我找不出来在哪里，请大神帮忙找找并修改！谢谢！
问题：运行时总显示unexpected indet
源码如下：
#encoding:utf-8
import urllib.request
import urllib
import re
import os
from bs4 import BeautifulSoup

url='https://www.zhihu.com/question/40753170'
urlop=urllib.request.urlopen(url)
data=urlop.read().decode('utf-8')
bs=BeautifulSoup(data)

def gettitle(url):
    title=bs.find('span',{"class":"zm-editable-content"})#找到标题
    title=title.get_text()
return(title)

def getpicurl(url):#得到图片链接
    pics=re.compile('img.+?src=\"(https.+?)\"')
#pics=re.compile('img.+?src=(https.+?)')
    return(pics)

def downpics():
    title=gettitle(url)
print(title)
    dirpath='f:/知乎/'+title+"/"
    if not os.path.exists(dirpath):
        os.makedirs(dirpath)#生成了问题标题相应的文件夹
    pics=getpicurl(url)
    a=1
    urls=[]
for x in pics.findall(data):#去除重复的图片链接
        if x not in urls:
            urls.append(x)
for x in urls:
try:
                imgdata=urllib.request.urlopen(x).read()
                b = (x.rfind("."))
                imgpath=str(dirpath)+str(a)+x[b:]
print(imgpath)
print(x)
                a+=1
                file=open(imgpath,'wb')
                file.write(imgdata)
                file.flush()
                file.close()
except:
continue
downpics();

最佳答案

月排行榜 / 总排行榜

无符号整形

2016-9-17 11:28:18

1. def gettitle(url):
   
2.      title=bs.find('span',{"class":"zm-editable-content"})#找到标题
   
3.      title=title.get_text()
   
4. return(title)

复制代码

=>

1. def gettitle(url):
   
2.      title=bs.find('span',{"class":"zm-editable-content"})#找到标题
   
3.      title=title.get_text()
   
4.      return(title)

复制代码

1. for x in urls:
   
2. try:
   
3.                  imgdata=urllib.request.urlopen(x).read()
   
4.                  b = (x.rfind("."))
   
5.                  imgpath=str(dirpath)+str(a)+x[b:]
   
6. print(imgpath)
   
7. print(x)
   
8.                  a+=1
   
9.                  file=open(imgpath,'wb')
   
10.                  file.write(imgdata)
    
11.                  file.flush()
    
12.                  file.close()
    
13. except:
    
14. continue

复制代码

=>

1. for x in urls:
   
2.     try:
   
3.         imgdata=urllib.request.urlopen(x).read()
   
4.         b = (x.rfind("."))
   
5.         imgpath=str(dirpath)+str(a)+x[b:]
   
6.         print(imgpath)
   
7.         print(x)
   
8.         a+=1
   
9.         file=open(imgpath,'wb')
   
10.         file.write(imgdata)
    
11.         file.flush()
    
12.         file.close()
    
13.     except:
    
14.         continue

复制代码

1. def downpics():
   
2.      title=gettitle(url)
   
3. print(title)
   
4.      dirpath='f:/知乎/'+title+"/"
   
5.      if not os.path.exists(dirpath):
   
6.          os.makedirs(dirpath)#生成了问题标题相应的文件夹
   
7.      pics=getpicurl(url)
   
8.      a=1
   
9.      urls=[]

复制代码

=>

1. def downpics():
   
2.      title=gettitle(url)
   
3.      print(title)
   
4.      dirpath='f:/知乎/'+title+"/"
   
5.      if not os.path.exists(dirpath):
   
6.          os.makedirs(dirpath)#生成了问题标题相应的文件夹
   
7.      pics=getpicurl(url)
   
8.      a=1
   
9.      urls=[]

复制代码

跳转到最佳答案楼层

无符号整形

1. def gettitle(url):
   
2.      title=bs.find('span',{"class":"zm-editable-content"})#找到标题
   
3.      title=title.get_text()
   
4. return(title)

复制代码

=>

1. def gettitle(url):
   
2.      title=bs.find('span',{"class":"zm-editable-content"})#找到标题
   
3.      title=title.get_text()
   
4.      return(title)

复制代码

1. for x in urls:
   
2. try:
   
3.                  imgdata=urllib.request.urlopen(x).read()
   
4.                  b = (x.rfind("."))
   
5.                  imgpath=str(dirpath)+str(a)+x[b:]
   
6. print(imgpath)
   
7. print(x)
   
8.                  a+=1
   
9.                  file=open(imgpath,'wb')
   
10.                  file.write(imgdata)
    
11.                  file.flush()
    
12.                  file.close()
    
13. except:
    
14. continue

复制代码

=>

1. for x in urls:
   
2.     try:
   
3.         imgdata=urllib.request.urlopen(x).read()
   
4.         b = (x.rfind("."))
   
5.         imgpath=str(dirpath)+str(a)+x[b:]
   
6.         print(imgpath)
   
7.         print(x)
   
8.         a+=1
   
9.         file=open(imgpath,'wb')
   
10.         file.write(imgdata)
    
11.         file.flush()
    
12.         file.close()
    
13.     except:
    
14.         continue

复制代码

1. def downpics():
   
2.      title=gettitle(url)
   
3. print(title)
   
4.      dirpath='f:/知乎/'+title+"/"
   
5.      if not os.path.exists(dirpath):
   
6.          os.makedirs(dirpath)#生成了问题标题相应的文件夹
   
7.      pics=getpicurl(url)
   
8.      a=1
   
9.      urls=[]

复制代码

=>

1. def downpics():
   
2.      title=gettitle(url)
   
3.      print(title)
   
4.      dirpath='f:/知乎/'+title+"/"
   
5.      if not os.path.exists(dirpath):
   
6.          os.makedirs(dirpath)#生成了问题标题相应的文件夹
   
7.      pics=getpicurl(url)
   
8.      a=1
   
9.      urls=[]

复制代码

xilingtu

首先谢谢@无符号整形好吧，我修改了试试，还是没成功！我依然不知道哪里错了，简直了，看来还要学啊，赶紧走出新手村才行~