[已解决]if htmlfile没有执行，这个代码错在哪里？

ooolinux

1. import requests
   
2. 
   
3. url='qq首页网址发不上来'
   
4. 
   
5. htmlfile=None
   
6. 
   
7. try:
   
8.     htmlfile=requests.get(url)
   
9.     print('网页下载成功')
   
10. except Exception as err:
    
11.     print(f'网页下载失败：{err}')
    
12. 
    
13. if htmlfile:
    
14.     fn='out23_11.txt'
    
15.     f=open(fn,'wb')
    
16.     for part in htmlfile.iter_content(10240):
    
17.         size=f.write(part)
    
18.         print(size)
    
19.     f.close()
    
20.     print(f'以{fn}存储网页成功')
    

复制代码

最佳答案

月排行榜 / 总排行榜

player-none

2025-4-3 19:28:30

ooolinux 发表于 2025-4-3 19:22
就是腾讯网首页，浏览器可以复制，这里发不出来

我将代码改为

1. 
   
2. import requests
   
3. 
   
4. url='https://www.qq.com'
   
5. 
   
6. htmlfile=None
   
7. 
   
8. try:
   
9.     htmlfile=requests.get(url)
   
10.     print('网页下载成功')
    
11. except Exception as err:
    
12.     print(f'网页下载失败：{err}')
    
13. 
    
14. print(htmlfile.status_code)
    
15. print(bool(htmlfile))
    
16. if htmlfile:
    
17.     fn='out23_11.txt'
    
18.     f=open(fn,'wb')
    
19.     for part in htmlfile.iter_content(10240):
    
20.         size=f.write(part)
    
21.         print(size)
    
22.     f.close()
    
23.     print(f'以{fn}存储网页成功')
    

复制代码

它输出

1. 网页下载成功
   
2. 501
   
3. False

复制代码

了解 501 Error

跳转到最佳答案楼层

FishC

问题分析：

你的代码可能存在以下问题导致未执行保存操作：

• 请求未成功：若未进入`try`块中的`print('网页下载成功')`，说明请求失败，此时`htmlfile`仍为None
• URL格式错误：缺少协议头（如写成`www.qq.com`而非`https://www.qq.com`）
• SSL验证失败：部分网站需要关闭证书验证
• 未处理HTTP错误状态码：如403/404等状态码不会触发请求异常
  

改进方案：

1. 
   
2. import requests
   
3. 
   
4. url = '[url=https://www.qq.com']https://www.qq.com'[/url]  # 确保包含https://
   
5. 
   
6. try:
   
7.     # 添加超时和SSL验证参数
   
8.     htmlfile = requests.get(url, timeout=5, verify=True)
   
9.     # 主动检查HTTP状态码
   
10.     htmlfile.raise_for_status()
    
11.     print('网页下载成功')
    
12. except Exception as err:
    
13.     print(f'请求失败：{err}')
    
14.     htmlfile = None  # 显式重置为None
    
15. 
    
16. if htmlfile:
    
17.     try:
    
18.         with open('out23_11.txt', 'wb') as f:
    
19.             for part in htmlfile.iter_content(10240):
    
20.                 f.write(part)
    
21.         print('存储成功')
    
22.     except Exception as e:
    
23.         print(f'存储失败：{e}')
    

复制代码

关键改进点：

• 添加timeout=5防止长时间无响应
• 使用raise_for_status()主动抛出HTTP错误
• 使用with open确保文件正确关闭
• 增加存储部分的异常处理
• 显式将失败的htmlfile设为None
  

验证步骤：

1. 检查控制台输出是否显示"网页下载成功"
2. 若出现错误信息，根据提示排查网络连接或URL有效性
3. 尝试用浏览器直接访问你写的URL进行验证

以上回复来自 FishC AI 小助理，如未能正确解答您的问题，请继续追问。

player-none

QQ首页网址去掉https://发上来，我帮你改改

ooolinux

player-none 发表于 2025-4-3 19:18
QQ首页网址去掉https://发上来，我帮你改改

就是腾讯网首页，浏览器可以复制，这里发不出来

player-none

ooolinux 发表于 2025-4-3 19:22
就是腾讯网首页，浏览器可以复制，这里发不出来

我将代码改为

1. 
   
2. import requests
   
3. 
   
4. url='https://www.qq.com'
   
5. 
   
6. htmlfile=None
   
7. 
   
8. try:
   
9.     htmlfile=requests.get(url)
   
10.     print('网页下载成功')
    
11. except Exception as err:
    
12.     print(f'网页下载失败：{err}')
    
13. 
    
14. print(htmlfile.status_code)
    
15. print(bool(htmlfile))
    
16. if htmlfile:
    
17.     fn='out23_11.txt'
    
18.     f=open(fn,'wb')
    
19.     for part in htmlfile.iter_content(10240):
    
20.         size=f.write(part)
    
21.         print(size)
    
22.     f.close()
    
23.     print(f'以{fn}存储网页成功')
    

复制代码

它输出

1. 网页下载成功
   
2. 501
   
3. False

复制代码

了解 501 Error

ooolinux

player-none 发表于 2025-4-3 19:28
我将代码改为

看来是服务器限制了，改成baidu首页成功了

ooolinux

player-none 发表于 2025-4-3 19:28
我将代码改为

if htmlfile这个判断不太好，可以改成什么判断让qq首页也行？

player-none

ooolinux 发表于 2025-4-3 19:51
if htmlfile这个判断不太好，可以改成什么判断让qq首页也行？

实际上是什么都不行，因为 501 就代表腾讯不认你.

加一个 useragent

1. htmlfile=requests.get(url, headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/135.0.0.0 Safari/537.36'})

复制代码

ooolinux

player-none 发表于 2025-4-3 19:55
实际上是什么都不行，因为 501 就代表腾讯不认你.

加一个 useragent

加headers

player-none

ooolinux 发表于 2025-4-3 21:55
加headers

是的，我这边测试是可以运行的