[已解决]关于用python抓取豆瓣图书信息的相关问题

mskyer · 发表于 2017-10-23 13:11:17

本帖最后由 mskyer 于 2017-10-23 13:16 编辑

各位大佬们好，我最近在做一个关于电子书分享的网站，需要抓取豆瓣图书的相关信息，遇到了一些问题，一直没有办法解决，所以看看鱼友们有没有办法。我把电子书的书名放到一个txt文件中（每行一个），然后再把书名放到豆瓣图书上搜索，抓取相应图书的链接。问题就出在这里。
以搜索《巨人的陨落》这本书为例，URL为：https://book.douban.com/subject_search?search_text=巨人的陨落&cat=1001，
傲游截图20171023130728.png

但是查看源代码，里面居然是乱码：
傲游截图20171023130750.png

不知道大家在遇到这个问题的时候是怎么处理的，在线急等~

最佳答案

月排行榜 / 总排行榜

gopythoner

2017-10-23 13:11:18

selenium

跳转到最佳答案楼层

gopythoner · 发表于 2017-10-23 13:11:18

这个最佳答案由 gopythoner 给出，感谢 gopythoner 的回答。

单击隐藏图章

selenium

$DIM · 发表于 2017-10-23 13:19:32

想必你已经实现了抓取代码，为什么不把代码贴出来呢？

mskyer · 发表于 2017-10-23 17:00:09

[b]有没有人啊，来个大神来解决咯

[b][/b][/b]

新手·ing · 发表于 2017-10-23 17:51:55

你显然是不用在乎那一段乱糟糟的。
你想要的书名字就是中文啊

mskyer · 发表于 2017-10-23 23:25:21

新手·ing 发表于 2017-10-23 17:51
你显然是不用在乎那一段乱糟糟的。
你想要的书名字就是中文啊

我要的书名对应的豆瓣连接啊

ooxx7788 · 发表于 2017-10-24 09:44:41

不要看源代码，看审查元素。你要的这些都在a标签里面

mskyer · 发表于 2017-10-24 16:31:18

ooxx7788 发表于 2017-10-24 09:44
不要看源代码，看审查元素。你要的这些都在a标签里面

我要的东西都在这段加密的代码里了

ooxx7788 · 发表于 2017-10-24 19:25:00

mskyer 发表于 2017-10-24 16:31
我要的东西都在这段加密的代码里了

那么我只有祭出大杀器selenium

账号		自动登录	找回密码
密码			立即注册

[已解决]关于用python抓取豆瓣图书信息的相关问题

最佳答案

浏览过的版块