淘宝爬取问题

fytfytf

import requests
import re

def open_url(keyword):
    item={'q':keyword,'sort':'sale-desc'}
    url='https://s.taobao.com/search'
    head={'user-agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/57.0.2987.98 Safari/537.36 LBBROWSER',
    'referer':'https://s.taobao.com/search?q=%E8%8B%B9%E6%9E%9C&sort=sale-desc'}
    res=requests.get(url,params=item)
    return res
def main():
    keyword=input('请输入搜索关键词')
    res=open_url(keyword)
    with open('taobao.txt','w',encoding='utf-8') as f:
        f.write(res.text)
    
if __name__=='__main__':
    main()

想从淘宝爬数据，但是不管输入什么爬到的都是同一堆数据，是要把登录数据也输进去吗，求解

v.ki

显然淘宝加入了反爬措施，你的请求被拦截了

fytfytf

v.ki 发表于 2020-7-25 17:14
显然淘宝加入了反爬措施，你的请求被拦截了

有解决的办法吗

温木zou

在python交流这个版块搜淘宝  有人发了爬淘宝的代码的帖子 你可以去参考下