关于爬虫获取下载链接信息的问题

1519189222

在练习爬取信息的时候 ,总能遇到很多未知问题,比如这次
问题:在F12抓包上可以获取下载链接(见图1)
        然后自己用python获取字段的时候,却找的是网站,而不是下来链接(见图2)




__________(下面是代码)_______________

1. #获取下载地址
   
2. import urllib.request
   
3. import re
   
4. 
   
5. def open_url(url):
   
6.     req=urllib.request.Request(url)
   
7.     req.add_header('User-Agent','Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.26 Safari/537.36 Core/1.63.5221.400 QQBrowser/10.0.1125.400')
   
8.     response=urllib.request.urlopen(url)
   
9.     html=response.read()
   
10.     return html
    
11. def find_imgs(url):
    
12.     url_=[]
    
13.     html=open_url(url).decode('utf-8')
    
14.     search1='<a mid="604390" id="res_5409594" title="(.*?)" is_source="no" rel="nofollow" href="(.*?)">(.*?)</a>'
    
15.     rest1=re.compile(search1,re.DOTALL).findall(html)
    
16. 
    
17.     #for each in url_num:
    
18.    
    
19.         #url_.append('http://www.id97.com/movie/'+each+'.html')
    
20.     print(rest1)
    
21. def try1(a=1):
    
22. 
    
23.     find_imgs(url)
    
24. url='http://www.id97.com/movie/604390.html'
    
25. try1()
    

复制代码

1519189222

没人嘛？

sunlight070

XX.mp4好像就是下载地址啊，不过需要复制到下载里，比如迅雷啥的，才能下载

sunlight070

复制到下载器里

1519189222

sunlight070 发表于 2018-5-27 21:32
XX.mp4好像就是下载地址啊，不过需要复制到下载里，比如迅雷啥的，才能下载

那是文字来的     下载链接是 字母数字符号组成的