论坛 › Python交流 › 实战爬虫第一弹，全网站小说爬取~

suiyuanliuyue 发表于 2020-3-7 22:50:46

已试验成功，如果能合并一起就更好了。以下是我在csdn上找的代码，不知能否更新进去
import os
input_path = "path" #此处填好自己的路径，注意最后的"/"

#使用os.listdir函数获取路径下的所有的文件名，并存在一个list中
#使用os.path.join函数，将文件名和路径拼成绝对路径
whole_file =
content = []
#对于每一个路径，将其打开之后，使用readlines获取全部内容
for w in whole_file:
    with open(w,'rb') as f:
      content = content+f.readlines()

#构造输出的路径，和输入路径在同一个文件夹下，如果该文件夹内没有这个文件会自动创建
output_path = os.path.join(input_path,'output.txt')
#将内容写入文件
with open(output_path,'wb') as f:
    f.writelines(content)

pzhw7 发表于 2020-3-8 00:43:30

学习学习

loveQQW 发表于 2020-3-8 08:25:42

喜欢

EricCartmen 发表于 2020-3-8 09:05:15

学习

supermanmimi 发表于 2020-3-8 10:07:05

{:5_106:}

970804258 发表于 2020-3-8 10:29:37

嘿，亲爱的鱼油，每天都要过得开心哦^_^

于少飞 发表于 2020-3-8 11:00:19

1

我尼玛 发表于 2020-3-8 11:07:11

插眼

zp121 发表于 2020-3-8 12:53:50

we see

zp121 发表于 2020-3-8 12:54:33

we see see

SuperDay 发表于 2020-3-8 12:59:29

啥也不说，先看看

ly234 发表于 2020-3-9 11:34:38

厉害了，优秀啊

怡儿三思吾 发表于 2020-3-9 11:49:18

我想看看

Levin-e 发表于 2020-3-9 13:51:21

学习

拍嬸不拍姨 发表于 2020-3-9 21:16:05

666

heiheill 发表于 2020-3-14 14:28:29

看看

saz123 发表于 2020-3-14 16:33:07

谢谢分享

正在学习的新手 发表于 2020-3-16 07:31:45

谢谢大佬

crc123 发表于 2020-3-22 16:40:16

haohaoxuexi

木习衣 发表于 2020-3-22 17:03:38

厉害厉害

查看完整版本: 实战爬虫第一弹，全网站小说爬取~