淘宝爬取问题
import requestsimport re
def open_url(keyword):
item={'q':keyword,'sort':'sale-desc'}
url='https://s.taobao.com/search'
head={'user-agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/57.0.2987.98 Safari/537.36 LBBROWSER',
'referer':'https://s.taobao.com/search?q=%E8%8B%B9%E6%9E%9C&sort=sale-desc'}
res=requests.get(url,params=item)
return res
def main():
keyword=input('请输入搜索关键词')
res=open_url(keyword)
with open('taobao.txt','w',encoding='utf-8') as f:
f.write(res.text)
if __name__=='__main__':
main()
想从淘宝爬数据，但是不管输入什么爬到的都是同一堆数据，是要把登录数据也输进去吗，求解 显然淘宝加入了反爬措施，你的请求被拦截了 v.ki 发表于 2020-7-25 17:14
显然淘宝加入了反爬措施，你的请求被拦截了
有解决的办法吗 在python交流这个版块搜淘宝有人发了爬淘宝的代码的帖子 你可以去参考下
页:
[1]