入門爬蟲爬取豆瓣圖書TOP250（小甲魚的大發現！）

文质彬彬胡汉三

各位大佬好，跟著小甲魚老師學習python有一段時間了，55個課程都看完了，這一段時間內每天規劃了學習時間，定期複習，頗有收穫。
現在我已經沉迷到python的學習中，每天都要看看官方文檔，越往後面的學習，越讓我覺得python的奧妙，學好python,真的可以為生活帶來諸多便利！
興趣使然，小可決定向爬蟲方向努力深入，先用入門的定向爬蟲爬取了豆瓣讀書的圖書排行榜，大家一起交流，懇請大佬們多多指點。話不多說，直接代碼：

1. import requests
   
2. from bs4 import BeautifulSoup as bs
   
3. 
   
4. depth = 10 #一共有10页
   
5. books = [] #存储定向信息
   
6. for i in range(depth):
   
7.     s = i*25
   
8.     r = 'https://book.douban.com/top250?start='
   
9.     url = r+str(s) #获取完整的url
   
10.     demo = requests.get(url).text
    
11.     soup = bs(demo,'html.parser')
    
12.     book = soup.find_all('td',)
    
13.     for i in book:
    
14.         if i.a.get('title') == None:
    
15.             pass
    
16.         else:
    
17.             name = i.a.get('title')
    
18.             text = i.p.text.split('/')
    
19.             author = text[0]
    
20.             price = text[-1]
    
21.             rate = i.find('span',{'class':'rating_nums'}).text
    
22.             try:
    
23.                 info = i.find('span',{'class':'inq'}).text
    
24.             except:
    
25.                 info = '无信息'
    
26.             adr = i.a.get('href')
    
27.             books.append([name,author,price,rate,info,adr])
    
28. count = 0
    
29. for each in books:
    
30.     count += 1
    
31.     booklist = 'Top:{}\n书名:{}\n作者:{}\n定价:{}\n评分:{}\n一句话书评:{}\n信息查阅:{}\n'
    
32.     print(booklist.format(count,each[0],each[1],each[2],each[3],each[4],each[5]))        
    

复制代码

截圖如下：


在查閱官方文檔的時候，發現了一個有意思的庫，turtle，使用這個庫可以使python畫圖，效果如下：

完全是Python自動畫出來的，小甲魚真厲害！

游客，如果您要查看本帖隐藏内容请回复

歡迎大家一起交流

～风介～

听说RE和爬虫更配哦~

自然水

加油！ 看到你学习速度，再抱怨自己时间不够，才是浪费时间- -

foxbabymm

感谢分享~~~~~~~~~~

要学习

自然水 发表于 2017-5-12 18:40
加油！ 看到你学习速度，再抱怨自己时间不够，才是浪费时间- -

小小0405

向你学习

一语终难尽思愁

学习学习

fanue

学习

passiy

谢谢分享

云习

好好学习

雪缘再续

谢谢楼主的分享

wsmdjsj

学习啦

payton24

不错不错

tuifei

看看

3140056787

666666

lsforever

requests是什么东东

笑°小破孩

哇~~！！