鱼C论坛

 找回密码
 立即注册
查看: 7038|回复: 16

[原创] Python:网站信息批量采集工具,标题,关键词,描述信息等

[复制链接]
发表于 2016-2-13 09:45:36 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
本帖最后由 lazy心宿 于 2018-3-12 10:06 编辑

Python:网站信息批量采集工具,标题,关键词,描述信息等此软件为本人刚学python开发的第一个成品软件,个人感觉还是不错的,只是对urllib2的模块使用不是很熟练,其实也觉得没啥,毕竟易语言我用的就是winhttp的对象协议,觉得相对比较好理解,展示一下成品,之后给大家开源(暂时没找到开源区)
230604eksiffkfffjbftfy.jpg

本程序由 Python开发, 暂时360 以及管家均未报毒,360提示拦截网络访问了,不过程序没有任何后面,添加信任即可!


本软件为完全免费软件,不会收取任何费用,希望可以给您带来便捷的工作!

切记:本程序主程序为:meta.exe 使用就打开它 没错
(此文件为主程序,其他文件也不可以删除或者丢失!)

使用说明:
1、打开软件之后,会提示你输入文本的路径。
2、你只需要把要查询的网址,一行一个的保存成txt即可,然后把文本位置输入到软件内
(如果是在软件根目录,就只需要输入名称即可!)
3、点击确认文件 - 会提示你相应的错误或者继续的步骤
4、在确认文件已经被软件导出成功的情况下,点击 开始采集 即可!
5、在后方的日志窗口,会有输出网址的信息保存情况!可以实时监控软件当前的状态!


如果软件执行完毕,会在日志以及信息框提示您任务已经全部完成!

注意:任务完成后,软件会自动把信息保存在根目录:Lazy查询结果.txt 的文档内。
文件保存的格式为:网址----标题----关键词----介绍  一行一个保存
——————————————————————————————
成品下载地址:链接:https://share.weiyun.com/c30e89b5e1fd79de524d706f9d807d05 密码:t8th6d
下载地址已经更新 有问题回帖告诉我就好啦




点评

我很赞同!: 5.0
还可以将文件放在百度网盘,这个也可以分享,不过一般情况下不会失效  发表于 2016-2-26 09:40
我很赞同!: 5
微云时间太长会失效的。可以放在论坛中,用rar压缩  发表于 2016-2-26 09:39

评分

参与人数 2荣誉 +13 鱼币 +13 贡献 +5 收起 理由
lixiaoshuai + 5 + 5
拈花小仙 + 8 + 8 + 5 感谢楼主无私奉献!

查看全部评分

想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2016-2-21 12:31:30 | 显示全部楼层
膜拜
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

发表于 2016-2-25 16:30:16 | 显示全部楼层
佩服您啊,最近正在为爬网站数据发愁
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-2-25 23:28:43 | 显示全部楼层
请问是用什么工具把 python 转化为 exe文件?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-3-1 00:25:58 | 显示全部楼层
可以在github上开源啊
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-3-3 11:11:55 | 显示全部楼层
worry921 发表于 2016-2-25 16:30
佩服您啊,最近正在为爬网站数据发愁

有时间可以交流。
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-4-14 22:32:14 | 显示全部楼层
能简单介绍下吗
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-4-21 20:39:16 | 显示全部楼层
求开源,,大神  ,,求带
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-4-22 21:20:32 | 显示全部楼层
最近的课题就是用Python做新闻的文本采集系统啊!!大神求分享代码啊!!!急需!!
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-5-4 14:53:45 | 显示全部楼层
lixiaoshuai 发表于 2016-2-25 23:28
请问是用什么工具把 python 转化为 exe文件?

就是使用的py2exe
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-6-1 16:07:26 | 显示全部楼层

谢谢,有机会多交流,我是学Java web的,qq 759460146
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-6-3 09:08:41 | 显示全部楼层
好厉害,这是学历多久就可以了?
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

发表于 2016-6-3 17:03:57 | 显示全部楼层
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2016-8-1 00:27:12 | 显示全部楼层
lanbingwxf 发表于 2016-6-3 09:08
好厉害,这是学历多久就可以了?

我学了一周写的
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

 楼主| 发表于 2016-8-1 00:27:44 | 显示全部楼层
lixiaoshuai 发表于 2016-6-1 16:07
谢谢,有机会多交流,我是学Java web的,qq 759460146

可以哦,QQ799355290
想知道小甲鱼最近在做啥?请访问 -> ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2024-12-22 19:55

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表