[已解决]关于Python爬虫的疑惑

hldh214

刚刚看完小甲鱼老师关于爬虫的视频,心血来潮想写一个直播网站弹幕获取的Python脚本,但是踩完点发现弹幕内容是动态生成的,类似ajax异步请求后用js动态添加上去的,我用chrome的审查元素element里面能看到弹幕内容,但是Python好像只能爬取静态的内容,求大神指点一下Python如何爬取动态的内容,chrome的审查元素如图
网页源代码这一段对应的就是弹幕的主体了

1. <div class="content-chat-container">
   
2.                     <ul class="chat-content-container"></ul>
   
3.                 </div>

复制代码

不知道怎么获取里面的动态内容
目标是让Python爬到这些内容,先谢谢各位大神了~~

最佳答案

月排行榜 / 总排行榜

～风介～

2015-10-11 21:01:27

百度一下，你就知道！
https://www.baidu.com/baidu?& ... 1%E5%86%85%E5%AE%B9

跳转到最佳答案楼层

hldh214

求大神

～风介～

百度一下，你就知道！
https://www.baidu.com/baidu?& ... 1%E5%86%85%E5%AE%B9

hldh214

～风介～ 发表于 2015-10-11 21:01
百度一下，你就知道！
https://www.baidu.com/baidu?&ie=utf-8&word=Python%E7%88%AC%E5%8A%A8%E ...

这些我都看了,大抵都是用的其他语言配合Python的,我想知道有没有Python的库可以实现这一功能

hldh214

我想用Python脚本获取网页动态生成的内容,先在谷歌浏览器的审查元素console里面踩点,构造的语句已经满足要求了,想知道如何写进代码里面让代码自动获取(

～风介～

hldh214 发表于 2015-10-12 08:56
这些我都看了,大抵都是用的其他语言配合Python的,我想知道有没有Python的库可以实现这一功能

这里是Python的第三方模块列表：点击打开！你自己去找找吧~

hldh214

～风介～ 发表于 2015-10-12 12:49
这里是Python的第三方模块列表：点击打开！你自己去找找吧~

感谢帮忙,已经放弃用Python了,我写一个浏览器扩展好了,或者我去学习一下uc脚本,Python作为服务器端脚本抓不到最终的dom