Python爬虫过程中翻页出现了问题

chunguang

Python爬取一个网站，发现他的翻页是这样的，比较奇怪，怎能搞？求大神




都是post

新人

网页不发过来怎么看

chunguang

新人 发表于 2018-8-20 17:09
网页不发过来怎么看

http://www.yanpk.com/item-93619.html

waitforlove

任重而道远，兄弟加油

chongchuigu

http://www.yanpk.com/item-detail ... -page-1.html#review
http://www.yanpk.com/item-detail ... -page-2.html#review
这翻页地址很简单啊，你是不是找错地方了

零度冷咖啡

1. import requests
   
2. from bs4 import BeautifulSoup
   
3. data = {
   
4.         "idtype":"item_subject",
   
5.         "id":93619,
   
6.         "filter":"all",
   
7.         "order":"posttime"
   
8. }
   
9. headers = {
   
10.     "User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.26 Safari/537.36 Core/1.63.5702.400 QQBrowser/10.2.1893.400"
    
11. }
    
12. for i in range(1,3):
    
13.     url = "http://www.yanpk.com/index.php?m=review&act=ajax&do=review&op=get&in_ajax=1&page={}".format(i)
    
14.     html = requests.post(url,data=data,headers=headers)
    
15.     text = BeautifulSoup(html.content,"html.parser")
    
16.     text = text.find_all("p")
    
17.     for n in range(0,len(text)):
    
18.         print(text[n].text)

复制代码

的确很简单

chunguang

零度冷咖啡 发表于 2018-8-21 08:38
的确很简单

是我犯糊涂了，谢谢