鱼C论坛

 找回密码
 立即注册
查看: 2105|回复: 1

爬虫

[复制链接]
发表于 2017-11-26 19:31:41 | 显示全部楼层 |阅读模式

马上注册,结交更多好友,享用更多功能^_^

您需要 登录 才可以下载或查看,没有账号?立即注册

x
我这个问题怎么解决?头疼!!
时间等待,该加的也都加了
一直在报错:10054, '远程主机强迫关闭了一个现有的连接。', None, 10054, None))



from bs4 import BeautifulSoup
import requests
import time
import socket

url='http://jobs.51job.com/shenzhen/96373035.html?s=01&t=0'
timeout = 20
socket.setdefaulttimeout(timeout)
sleep_download_time = 10
time.sleep(5)
wb_data=requests.get(url)
request.close()
wb_data.encoding='gbk'
soup=BeautifulSoup(wb_data.text,'lxml')
title=soup.select('h1')
company=soup.select('p.cname')
salary=soup.select('div[class="cn"] > strong')
information=soup.select('div.bmsg.job_msg.inbox')
data={
    'title':title[0].get_text(),
    'company':company[0].get_text(),
    'salary':salary[0].get_text(),
    'information':information[0].get_text()
}
print(data)


小甲鱼最新课程 -> https://ilovefishc.com
回复

使用道具 举报

 楼主| 发表于 2017-11-27 10:45:43 | 显示全部楼层
我去   ,多谢了     解决了
小甲鱼最新课程 -> https://ilovefishc.com
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

小黑屋|手机版|Archiver|鱼C工作室 ( 粤ICP备18085999号-1 | 粤公网安备 44051102000585号)

GMT+8, 2025-12-26 04:27

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表