[已解决]关于爬淘宝的过程中使用正则表达式

braga

为什么我直接 re.search(target,response.text) 捕获组写的是（.*?）死活匹配不到 我查看了网页源代码 target 没有问题呀

然而我把 response.text 写入一个txt 然后在读取出来 就能匹配的到了
f.write(response.text)
_ = f.read()

这是为什么呀 大佬们
谢谢你们！！！

最佳答案

月排行榜 / 总排行榜

1q23w31

2020-4-10 18:30:31

你打印一下爬到的代码，在里面找一下有没有你需要的内容

跳转到最佳答案楼层

1q23w31

链接？

braga

1q23w31 发表于 2020-4-10 18:08
链接？

https://ai.taobao.com/search/ind ... n&sort=biz30day

braga

1q23w31 发表于 2020-4-10 18:08
链接？

好像链接审核不过去 TT
就是爱淘宝搜索的商品

1q23w31

你打印一下爬到的代码，在里面找一下有没有你需要的内容

braga

我自己找到问题了 哈哈哈

1q23w31

解决了？

braga

1q23w31 发表于 2020-4-10 18:30
你打印一下爬到的代码，在里面找一下有没有你需要的内容

嗯嗯 就是实际上网页上有空白符 保存在txt里就 变没了

braga

1q23w31 发表于 2020-4-10 18:31
解决了？

大佬 其实还是没解决 TT
期中结尾是这样的
...sultCode":0};

</script>
我想匹配以;/n 结尾 但是匹配不到

1q23w31

把源代码发一下，说一下你要匹配的东西
我试试

braga

1q23w31 发表于 2020-4-10 20:32
把源代码发一下，说一下你要匹配的东西
我试试

1. import requests
   
2. import re
   
3. import json
   
4. def url_open(key_word):
   
5.     url='https://ai.taobao.com/search/index.htm'
   
6.     headers ={'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.92 Safari/537.36'}
   
7.     params={'key':key_word,'sort':'biz30day'}
   
8.     res = requests.get(url,headers=headers,params=params)
   
9.     return res
   
10. 
    
11. def main():
    
12.     key_word=input('请输入商品关键字：')
    
13.     res = url_open(key_word)
    
14. ##    with open('0.txt','w',encoding='utf-8')as f:
    
15. ##        f.write(res.text)
    
16. ##    with open('0.txt','r',encoding='utf-8')as f:
    
17. ##        a = f.read()
    
18.     res_js = re.search(r'var _pageResult = (.*?);\n',res.text)
    
19. ##    with open('4.txt','w',encoding='utf-8')as f:
    
20. ##        f.write(res_js.group(1))
    
21.     target = res_js.group(1)
    
22.     d_json =json.loads(target)
    
23.     data = d_json['result']['auction']
    
24.     for each in data:
    
25.         print(each['nick'],each['biz30Day'])
    
26. 
    
27. if __name__=='__main__':
    
28.     main()
    

复制代码