一个月入门Python爬虫，轻松爬取大规模数据

wrpython · 发表于 2019-4-20 15:16:23

xpath似乎比beautifulsoap更好用？

Stubborn · 发表于 2019-4-20 15:18:58

wrpython 发表于 2019-4-20 15:16
xpath似乎比beautifulsoap更好用？

刚想回你帖子来着，xpath方便很多，举个例子

html = etree.HTML(requests.get(url,headers=headers).text)
                    result = html.xpath('//ul[@id="pins"]/li')

这样就可以找到ul下id='pins'下面的li标签，然后可以在取数据

wrpython · 发表于 2019-4-20 15:22:49

Stubborn 发表于 2019-4-20 15:18
刚想回你帖子来着，xpath方便很多，举个例子

好的，谢谢回复~

q1103139787 · 发表于 2019-4-20 15:28:36

林北喔 · 发表于 2019-4-20 15:36:58

nurlyst · 发表于 2019-4-20 15:58:37

看看

q1103139787 · 发表于 2019-4-20 15:58:39

啦啦啦啦

老叔 · 发表于 2019-4-20 16:32:31

zero帽宝宝 · 发表于 2019-4-20 23:32:50

小白才学到第一步

zwshn123 · 发表于 2019-4-21 00:54:24

lixiangyv · 发表于 2019-4-21 08:06:04

minjun · 发表于 2019-4-21 10:02:47

支持一下，学习学习

adviking · 发表于 2019-4-21 10:24:57

type_C · 发表于 2019-4-21 10:42:25

鱼C有你更精彩^_^

wy1018651314 · 发表于 2019-4-21 11:09:16

6666666666666

TCY · 发表于 2019-4-21 13:52:49

PYTHON:
requests + beautifulsoup + re

何东海东河 · 发表于 2019-4-21 17:25:59

看看先

账号		自动登录	找回密码
密码			立即注册

[技术交流] 一个月入门Python爬虫，轻松爬取大规模数据