然后再來看看小說閱讀的界面：

這個(gè)界面就很簡單了，我們來看看HTML源碼：

很容易看到

標(biāo)簽中的正是每一章的標(biāo)題，

標(biāo)簽中的也就是正文

OK，經(jīng)過我們初步分析，我們可以開始寫代碼了！

3.首先我們寫出獲取網(wǎng)頁html源碼的一個(gè)方法：

# 得到網(wǎng)頁的htmldef getHtml(url):url = urlres = request.urlopen(url)res = res.read().decode()# print(res)return res

這個(gè)方法傳入一個(gè)url,會(huì)返回一個(gè)html源碼

4.然后我們再來寫一下，獲取整本小說所有章節(jié)的鏈接的方法：

# 解析小說章節(jié)頁面,獲取所有章節(jié)的子鏈接def jsoupUrl(html):# 獲取soup對象url_xiaoshuo = BeautifulSoup(html)# 因?yàn)槲覀円萌lass為box1中的divclass_dict = {'class': 'box1'}url_xiaoshuo = url_xiaoshuo.find_all('div', attrs=class_dict)# 因?yàn)榉治鰄tml中的代碼可以發(fā)現(xiàn)div的class為box1的有兩個(gè),通過上面的代碼返回的是一個(gè)list格式的結(jié)果，所以下面的索引應(yīng)該是１# 我們要獲取li中的值，所以find_all，這個(gè)方法返回的是一個(gè)ｌｉｓｔ集合url_xiaoshuo = url_xiaoshuo[1].find_all('li')# print(url_xiaoshuo)# 創(chuàng)建一個(gè)集合,用于存放每個(gè)章節(jié)的鏈接url_xs = []for item in url_xiaoshuo:# 獲取每個(gè)元素中的href值url = item.a['href']# 將值傳入url_xs集合中url_xs.append(url)return url_xs

具體的解釋，我已經(jīng)寫在注釋里了，不懂的可以在公眾號后臺留言

5.我們獲取到每個(gè)章節(jié)的鏈接之后，我們就需要把每一章節(jié)的內(nèi)容給弄下來并且把它寫入到txt文本而且每個(gè)文本的標(biāo)題為章節(jié)的標(biāo)題

# 解析小說每個(gè)章節(jié)的的主要內(nèi)容def jsoupXiaoshuo(list):for item in list:html = getHtml(item)html = BeautifulSoup(html)# 獲取小說標(biāo)題title = html.h1.get_text()xiaoshuo = html.find_all('p')for item in xiaoshuo:str = item.get_text()# open中的第二個(gè)參數(shù)是讓每一次的字符串接連到上一個(gè)字符串，千萬不能是ｗwith open(title + '.txt', 'a') as f:f.write(str+'\n')

6.最后我們在main方法中運(yùn)行這幾個(gè)方法即可：

if __name__ == '__main__':html = getHtml("http://www.136book.com/dadaozhaotian/")url_xs = jsoupUrl(html)jsoupXiaoshuo(url_xs)

大功告成！

不懂的可以在公眾號后臺留言，我全部都會(huì)回復(fù)的哦！

---