?

?

預(yù)備知識(shí)點(diǎn)

?

compile 函數(shù)

compile 函數(shù)用于編譯正則表達(dá)式，生成一個(gè)正則表達(dá)式（ Pattern ）對(duì)象，供 match() 和 search() 這兩個(gè)函數(shù)使用。

語(yǔ)法格式為：

re.compile(pattern[, flags]).compile(pattern[, flags])

參數(shù)：

• pattern : 一個(gè)字符串形式的正則表達(dá)式
• flags 可選，表示匹配模式，比如忽略大小寫(xiě)，多行模式等，具體參數(shù)為：
• • re.I 忽略大小寫(xiě)
  • re.L 表示特殊字符集 \w, \W, \b, \B, \s, \S 依賴于當(dāng)前環(huán)境
  • re.M 多行模式
  • re.S 即為' . '并且包括換行符在內(nèi)的任意字符（' . '不包括換行符）
  • re.U 表示特殊字符集 \w, \W, \b, \B, \d, \D, \s, \S 依賴于 Unicode 字符屬性數(shù)據(jù)庫(kù)
  • re.X 為了增加可讀性，忽略空格和' # '后面的注釋

?

檢索和替換

Python 的re模塊提供了re.sub用于替換字符串中的匹配項(xiàng)。

語(yǔ)法：

re.sub(pattern, repl, string, count=0).sub(pattern, repl, string, count=0)

參數(shù)：

• pattern : 正則中的模式字符串。
• repl : 替換的字符串，也可為一個(gè)函數(shù)。
• string : 要被查找替換的原始字符串。
• count : 模式匹配后替換的最大次數(shù)，默認(rèn) 0 表示替換所有的匹配。

?

Python中字符串前面加上 r 表示原生字符串， 與大多數(shù)編程語(yǔ)言相同，正則表達(dá)式里使用"\"作為轉(zhuǎn)義字符，這就可能造成反斜杠困擾。假如你需要匹配文本中的字符"\"，那么使用編程語(yǔ)言表示的正則表達(dá)式里將需要4個(gè)反斜杠"\\\\"：前兩個(gè)和后兩個(gè)分別用于在編程語(yǔ)言里轉(zhuǎn)義成反斜杠，轉(zhuǎn)換成兩個(gè)反斜杠后再在正則表達(dá)式里轉(zhuǎn)義成一個(gè)反斜杠。Python里的原生字符串很好地解決了這個(gè)問(wèn)題，這個(gè)例子中的正則表達(dá)式可以使用r"\\"表示。同樣，匹配一個(gè)數(shù)字的"\\d"可以寫(xiě)成r"\d"。有了原生字符串，你再也不用擔(dān)心是不是漏寫(xiě)了反斜杠，寫(xiě)出來(lái)的表達(dá)式也更直觀。

?

思路整理：

?在編程過(guò)程中遇到的部分問(wèn)題在這里寫(xiě)出來(lái)和大家共享

?問(wèn)題1：在編程過(guò)程中成功獲取了目標(biāo)的名字，但是它存在于div框架中，我們要做的就是將div中的文字與標(biāo)簽分開(kāi)，在這里我們用的是正則表達(dá)式

?問(wèn)題2：

上代碼：

<span style="color:#000000"># -*- coding: UTF-8 -*- import requests import time import re from bs4 import BeautifulSoup from urllib.request import urlretrieveif __name__ == '__main__':list_url = []url = 'https://www.names.org/n/kevin/about'#設(shè)置請(qǐng)求頭信息headers = {"User-Agent":"Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36"}req = requests.get(url=url,headers=headers)req.encoding='utf-8'html=req.textbf = BeautifulSoup(html,'html.parser')targets_url_1 = bf.find_all(class_='container page-section')bf = BeautifulSoup(str(targets_url_1),'html.parser')targets_url_2 = bf.find_all(class_='name')#保存名字鏈接for each in targets_url_2:list_url.append(re.sub('[\t\n]',"",re.sub(r'<[^>]+>',"",str(each))))f = open('test.txt', 'w') #首先先創(chuàng)建一個(gè)文件對(duì)象，打開(kāi)方式為wfor each in list_url:f.writelines(each) #用readlines()方法寫(xiě)入文件f.writelines('\n')print(list_url)print('下載完成！')</span>

?

?

?

?

?

?

總結(jié)

以上是生活随笔為你收集整理的Python---获取div标签中的文字的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。