python实现下载小说并保存在本地

2019年6月16日 217次阅读 来源: 大个土豆 
下载小说并保存在本地


import bs4,os,requests



i = 0
xiaoShuo_NeiRong = []#定义存储小说章节内容对象的列表
xiaoShuo_biaoTi = []##定义存储小说章节标题对象的列表
#从小说网站上下载小说，并保存在txt文档中
while True:
    
    if i < 20:
        resOne = requests.get('http://book.zongheng.com/chapter/457720'+'/'+str(7629918+i)+'.html')#下载小说网页
        i = i+1
        #根据是否下载成功，将解析后的对象分别存储在标题和内容的列表中
        if resOne.raise_for_status():
            bs4One = bs4.BeautifulSoup(resOne.text)
            xiaoShuo_NeiRong.append(bs4One.select('div#chapterContent'))#BeautifulSoup对象调用select()查找内容，返回Tag对象的列表，并放在内容列表中
            xiaoShuo_biaoTi.append(bs4One.select('h5'))#BeautifulSoup对象调用select()查找标题，返回Tag对象的列表，并放在内容列表中

    else:
        break
#将相关内容写入文件中
for j in range(0,len(xiaoShuo_NeiRong)):
        xiaZai_two = open('C:\\Users\\Nick\\Desktop\\python\\drawing\\2\\spam002.txt','a')
        xiaZai_two.write(xiaoShuo_biaoTi[j][0].getText())
        xiaZai_two.write(xiaoShuo_NeiRong[j][0].getText())
        xiaZai_two.close()

    原文作者：大个土豆
    原文地址: https://blog.csdn.net/pengzhi5966885/article/details/71629631
    本文转自网络文章，转载此文章仅为分享知识，如有侵权，请联系博主进行删除。
点赞