python网络爬虫求指导！

hansooon

我的要求：

一，爬虫脚本获取jsp动态网站源码。
二,根据之前已经获取的源码需要知道源码已知ID排序排在什么位置
三，假如已知ID排名不符合我要求，我需要执行下一个步骤。


下面我从网上http://www.jb51.net/article/52864.htm找到一段类似的源码，但是我是菜鸟，不知道怎么改。如果有大神愿意指导的，除了付鱼币之外可以额外给钱。我qq:254272394，如果知道的可以加我QQ
代码：

一、编写思路：

　　1.爬虫脚本获取当日免费书籍信息

　　2.把获取到的书籍信息与数据库中的已有信息作比较，如果书籍存在不做任何操作，书籍不存在，执行插入数据库的操作，把数据的信息存入MongoDB

　　3.执行数据库插入操作时，把更新的数据以邮件的形式发送出来

　　4.用APScheduler调度框架完成python脚本调度

二、脚本的主要知识点：

1.python简单爬虫

本次用到的模块有urllib2用来抓取页面，导入模块如下：

[backcolor=white !important]

?

/yhhEAST/zhh

你给的地址404 可否说一下具体爬什么网站

hansooon

/yhhEAST/zhh 发表于 2014-12-24 23:42
你给的地址404 可否说一下具体爬什么网站

已经解决了，谢谢