[已解决]关于网页读取后保存时报错

嘻嘻咯咯

#写一个程序，依次访问文件中指定的网站，并将每个站点的内容依次存放到不同文件中。
import urllib.request
import chardet

def main():
    i = 0
    #urls.txt这个文件没下载
    with open('urls.txt','r') as f:
        #读取待访问地址，由于urls.txt每行一个URL，所有按换行符'\n'分割
        urls = f.read().splitlines()

    for each_url in urls:
        response = urllib.request.urlopen(each_url)
        html = response.read()
        #识别网络编码
        encode = chardet.detect(html)['encoding']
        if encode == 'GB2312':
            encode = 'GBK'

        i += 1
        #文件名url_1、2、3。。。
        filename = 'url_%d.txt'%i
        #打开filename这个文件识别each_file的网络编码后写入文件
        with open(filename,'w',encoding = encode) as each_file:
            each_file.write(html.decode(encode),'ignore')        #此处报错待解决

if __name__ == '__main__':
    main()

最佳答案

月排行榜 / 总排行榜

无符号整形

2018-8-14 20:56:07

嘻嘻咯咯 发表于 2018-8-14 20:48
不过我并不懂后面这个 ‘ignore’ 的用处，能讲解一下吗

设置为ignore会忽略非法字符。

跳转到最佳答案楼层

无符号整形

编码报错？
参考这个？

嘻嘻咯咯

无符号整形 发表于 2018-8-14 07:50
编码报错？
参考这个？

我这里报错是因为  each_file.write(html.decode(encode,'ignore'))        #括号打错了

无符号整形

嘻嘻咯咯 发表于 2018-8-14 20:33
我这里报错是因为  each_file.write(html.decode(encode,'ignore'))        #括号打错了

好吧……
下次记得仔细些……

嘻嘻咯咯

无符号整形 发表于 2018-8-14 07:50
编码报错？
参考这个？

不过我并不懂后面这个 ‘ignore’ 的用处，能讲解一下吗

无符号整形

嘻嘻咯咯 发表于 2018-8-14 20:48
不过我并不懂后面这个 ‘ignore’ 的用处，能讲解一下吗

设置为ignore会忽略非法字符。