Python使用中文正則表達(dá)式匹配指定中文字符串的方法示例

更新時(shí)間：2017年01月20日 09:08:21 作者：雪峰流云

這篇文章主要介紹了Python使用中文正則表達(dá)式匹配指定中文字符串的方法,結(jié)合實(shí)例形式分析了Python正則匹配及字符編碼相關(guān)操作技巧,需要的朋友可以參考下

本文實(shí)例講述了Python使用中文正則表達(dá)式匹配指定中文字符串的方法。分享給大家供大家參考，具體如下：

業(yè)務(wù)場(chǎng)景：

從中文字句中匹配出指定的中文子字符串 .這樣的情況我在工作中遇到非常多, 特梳理總結(jié)如下.

難點(diǎn):

處理GBK和utf8之類(lèi)的字符編碼, 同時(shí)正則匹配Pattern中包含漢字,要漢字正常發(fā)揮作用,必須非常謹(jǐn)慎.推薦最好統(tǒng)一為utf8編碼,如果不是這種最優(yōu)情況,也有酌情處理.

往往一個(gè)具有普適性的正則表達(dá)式會(huì)簡(jiǎn)化程序和代碼的處理，使過(guò)程簡(jiǎn)潔和事半功倍，這往往是高手和菜鳥(niǎo)最顯著的差別。

示例一:

從QQ純真數(shù)據(jù)庫(kù)中解析出省市縣等特定詞語(yǔ)，這里的正則表達(dá)式基本能夠滿(mǎn)足業(yè)務(wù)場(chǎng)景，懶惰匹配?非常必要，因?yàn)樘幚聿缓?，?huì)得不到我們想要的效果。個(gè)中妙處，還請(qǐng)各位看官自己琢磨，我這里只點(diǎn)到為止！
代碼如下:

#!/usr/bin/env python
#encoding: utf-8
#description: 從字符串中提取省市縣等名稱(chēng),用于從純真庫(kù)中解析解析地理數(shù)據(jù)
import re
import sys
reload(sys)
sys.setdefaultencoding('utf8')
#匹配規(guī)則必須含有u,可以沒(méi)有r
#這里第一個(gè)分組的問(wèn)號(hào)是懶惰匹配,必須這么做
PATTERN = \
ur'([\u4e00-\u9fa5]{2,5}?(?:省|自治區(qū)|市))([\u4e00-\u9fa5]{2,7}?(?:市|區(qū)|縣|州)){0,1}([\u4e00-\u9fa5]{2,7}?(?:市|區(qū)|縣)){0,1}'
data_list = ['北京市', '陜西省西安市雁塔區(qū)', '西班牙', '北京市海淀區(qū)', '黑龍江省佳木斯市湯原縣', '內(nèi)蒙古自治區(qū)赤峰市',
'貴州省黔南州貴定縣', '新疆維吾爾自治區(qū)伊犁州奎屯市']
for data in data_list:
 data_utf8 = data.decode('utf8')
 print data_utf8
 country = data
 province = ''
 city = ''
 district = ''
 #pattern = re.compile(PATTERN3)
 pattern = re.compile(PATTERN)
 m = pattern.search(data_utf8)
 if not m:
  print country + '|||'
  continue
 #print m.group()
 country = '中國(guó)'
 if m.lastindex >= 1:
  province = m.group(1)
 if m.lastindex >= 2:
  city = m.group(2)
 if m.lastindex >= 3:
  district = m.group(3)
 out = '%s|%s|%s|%s' %(country, province, city, district)
 print out

運(yùn)行截圖

示例二：

從ip138中獲取指定ip的地理位置等信息。

ip138是我們?nèi)粘Ｊ褂幂^多的ip查詢(xún)網(wǎng)站，我為了獲取每個(gè)ip對(duì)應(yīng)的isp信息，需要查詢(xún)這個(gè)頁(yè)面

我在網(wǎng)上搜索了很久，沒(méi)有找到ip138返回json之類(lèi)的接口，只能以這種方式查詢(xún)，那么我們不可避免地需要解析出上圖中紅框標(biāo)注的isp信息。如果使用DOM解析指定div標(biāo)簽之類(lèi)的常規(guī)思路恐怕不太湊效，更簡(jiǎn)捷的方式是使用中文正則匹配，直接從返回的html中得到“本站主數(shù)據(jù)：”那部分的信息。

下面是我摸索的代碼

#!/usr/bin/env python
#encoding: utf-8
#date: 2016-03-31
#note: 測(cè)試中遇到的問(wèn)題,請(qǐng)求指定的鏈接會(huì)有超時(shí)現(xiàn)象,可以多請(qǐng)求幾次
import requests, re
import sys
reload(sys)
sys.setdefaultencoding('utf8')
IP138_API = 'http://www.ip138.com/ips138.asp?ip='
PATTERN = ur'<li>本站主數(shù)據(jù)：(.*?)</li>'
def query_api(url):
 data = ''
 r = requests.get(url)
 if r.status_code == 200:
  data = r.content
 return data
def parse_ip138(html):
 #只能是unicode編碼,不能在后面再轉(zhuǎn)換為utf-8,否則無(wú)法正則匹配上.
 html = unicode(html, 'gb2312')
 #html = unicode(html, 'gb2312').encode('utf-8')
 #print html
 pattern = re.compile(PATTERN)
 m = pattern.search(html)
 if m:
  print m.group(1)
 else:
  print 'regex match failed'
if __name__ == '__main__':
 url = IP138_API + '14.192.60.0'
 resp = query_api(url)
 if not resp:
  print 'no content'
 parse_ip138(resp)

下面是截圖