python 网页小说爬虫。

s1986q

1. import httplib,re,os
   
2. if os.path.isdir(r"e:\\html\")<>1:
   
3.     os.mkdir("e:\\html\")
   
4. f=open("e:\\html\\17182420.html","w")
   
5. f.close()
   
6. def getapost(url):
   
7.     host="m.7gxs.com"
   
8.     port=80
   
9.     global dat
   
10.     dat=""
    
11.     data={"Cookie:":dat}
    
12.     fd=httplib.HTTPConnection(host,port)
    
13.     fd.request("GET",url,"",data)
    
14.     gh=fd.getresponse()
    
15.     dat=gh.getheader("set-cookie","")
    
16.     jj=gh.read()
    
17.     return jj
    
18. zmu=os.listdir("e:\\html\")
    
19. dd=zmu[len(zmu)-1]
    
20. ur="http://www.shuhaha.com/Html/Book/66/66595/"
    
21. url=ur+dd
    
22. while True :
    
23.     print dd
    
24.     htm=getapost(url)
    
25.     f = open("e:\\html\"+dd,"w")
    
26.     f.write(htm)
    
27.     f.close()
    
28.     try:
    
29.         dd=re.findall(r"var nextpage="(\d+\.html)"",htm)[0]
    
30.     except :
    
31.         print  "任务完成！".decode("u8")
    
32.         break
    
33.     url=ur+dd
    

复制代码

有很多人写了，我写一个。
后续在发处理程序。

wzdnzd

。。。。。。。。。

whuer_py

可以的

superFeng777

楼主给力！默默的收下，然后再改造！