




版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
3.3.3案例實(shí)施3.3.3案例實(shí)施LTP是基于C++開發(fā)的,但是也提供了Python的封裝包——Pyltp。Pyltp的安裝直接使用pip進(jìn)行安裝,在命令行輸入:pipinstallpyltp。如果安裝失敗,可以使用wheel文件進(jìn)行安裝,具體安裝過(guò)程如下:首先查看當(dāng)前環(huán)境下Python的版本,在命令行輸入:python-V,根據(jù)Python的不同版本下載相應(yīng)的wheel文件,例如Python為3.6版本,則下載pyltp-0.2.1-cp36-cp36m-win_amd64.whl,然后使用cd命令跳轉(zhuǎn)到wheel文件所在目錄,使用pipinstallwheel文件名進(jìn)行安裝。(一)LTP的安裝3.33.3.3案例實(shí)施在安裝成功之后,需要下載相關(guān)的模型文件。哈工大提供了LTP所需的基本模型,模型下載地址:http://ltp.ai/download.html,選擇其中最新版本的模型文件進(jìn)行下載,如圖3-1所示。例如,當(dāng)前最新模型為3.4.0,則下載ltp_data_v3.4.0.zip。3(一)LTP的安裝圖3-1模型下載3.3.3案例實(shí)施將下載的壓縮包解壓到項(xiàng)目文件夾下,得到LTP的基本模型,如圖3-2所示。3(一)LTP的安裝圖3-2LTP的基本模型3.3.3案例實(shí)施LTP的主要模型:SentenceSplitter:分句模型,將一個(gè)段落通過(guò)“。”、“?”、“!”等形式分開。Segmentor:分詞模型,支持用戶使用自定義詞典。分詞外部詞典本身是一個(gè)文本文件,每行指定一個(gè)詞,編碼須為UTF-8。Postagger:詞性標(biāo)注模型,顯示每個(gè)詞的詞性,輸入可以為一個(gè)詞,也可以為多個(gè)詞組成的列表。LTP中采用了863詞性標(biāo)注集,各個(gè)詞性含義見表3-2。3(二)LTP的主要模型3.3.3案例實(shí)施表3-2LTP詞性標(biāo)注規(guī)范表3(二)LTP的主要模型3.3.3案例實(shí)施表3-3命名實(shí)體標(biāo)記3(二)LTP的主要模型NamedEntityRecognizer:實(shí)體命名模型,ltp命名實(shí)體類型為:人名(Nh),地名(NS),機(jī)構(gòu)名(Ni)。LTP采用BIESO標(biāo)注體系,其命名實(shí)體標(biāo)記見表3-3。3.3.3案例實(shí)施表3-3命名實(shí)體標(biāo)記3(二)LTP的主要模型NamedEntityRecognizer:實(shí)體命名模型,ltp命名實(shí)體類型為:人名(Nh),地名(NS),機(jī)構(gòu)名(Ni)。LTP采用BIESO標(biāo)注體系,其命名實(shí)體標(biāo)記見表3-3。3.3.3案例實(shí)施3(二)LTP的主要模型Parser:依存句法分析模型。加載模型:frompyltpimportSegmentor,Postagger,Parser,NamedEntityRecognizer#加載分詞模型segmentor=Segmentor()segmentor.load("ltp_data_v3.4.0\cws.model")
#加載命名實(shí)體識(shí)別模型recognizer=NamedEntityRecognizer()recognizer.load("ltp_data_v3.4.0\ner.model")3.3.3案例實(shí)施3(三)Parser:依存句法分析模型加載模型:#加載依存語(yǔ)法分析模型parser=Parser()parser.load("ltp_data_v3.4.0\parser.model")
#加載詞性標(biāo)注模型postagger=Postagger()postagger.load("ltp_data_v3.4.0\pos.model")3.3.3案例實(shí)施3(三)Parser:依存句法分析模型分句:frompyltpimportSentenceSplittercontent='句號(hào)。問(wèn)號(hào)?嘆號(hào)!“雙引號(hào)。”漢語(yǔ)省略號(hào)……'sents=SentenceSplitter.split(content)forsentinsents:print(sent)輸出結(jié)果如下:句號(hào)。問(wèn)號(hào)?嘆號(hào)!“雙引號(hào)。”漢語(yǔ)省略號(hào)……這里需要注意的是LTP是用于中文處理的,因此盡量不要將LTP用于處理其它語(yǔ)言。3.3.3案例實(shí)施3(三)Parser:依存句法分析模型分詞:frompyltpimportSegmentorsegmentor=Segmentor()#初始化實(shí)例segmentor.load("ltp_data_v3.4.0\cws.model")#加載模型words=segmentor.segment('貝拉克·侯賽因·奧巴馬的身世復(fù)雜,1961年8月4日出生在美國(guó)夏威夷州檀香山市,父親是來(lái)自肯尼亞的留學(xué)生,母親是堪薩斯州白人。他們二人在就讀夏威夷大學(xué)期間相識(shí)。')forwordinwords:print(word,end='\\')segmentor.release()輸出結(jié)果如下:貝拉克·侯賽因·奧巴馬\的\身世\復(fù)雜\,\1961年\8月\4日\(chéng)出生\在\美國(guó)\夏威夷州\檀香山市\(zhòng),\父親\是\來(lái)自\肯尼亞\的\留學(xué)生\,\母親\是\
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 邏輯思維與項(xiàng)目管理的結(jié)合試題及答案
- 2025成都市天府體育中心安全圍欄建設(shè)合同
- 成本管理理論探討試題及答案
- 計(jì)算機(jī)二級(jí)MySQL備考建議試題及答案
- 財(cái)務(wù)成本管理歷史發(fā)展探討題及答案
- Delphi模塊化設(shè)計(jì)原理試題及答案
- 心血管內(nèi)科基礎(chǔ)知識(shí):綜合考試題庫(kù)
- 財(cái)務(wù)成本管理中邏輯推理技能的實(shí)踐與試題及答案
- 追溯歷史的2025年文學(xué)概論試題及答案
- 備考2025年計(jì)算機(jī)二級(jí)Delphi試題及答案策略
- 干漆膜(涂層)厚度檢測(cè)報(bào)告
- 國(guó)內(nèi)外液壓機(jī)技術(shù)現(xiàn)狀及發(fā)展趨勢(shì)
- 指南針?biāo)较砑野娉鲎鈨r(jià)格
- 低壓電工考證培訓(xùn)教程
- 腦卒中的早期康復(fù)
- 文學(xué)理論·第九章文學(xué)活動(dòng)的發(fā)生和發(fā)展-課件
- 個(gè)人不擔(dān)當(dāng)不作為問(wèn)題清單及整改措施
- 第五章?商務(wù)談判的法律規(guī)定
- 2023-2024年整形外科學(xué)(副高)考試參考題庫(kù)(真題考點(diǎn)版)帶答案解析
- 廣東省中山市八年級(jí)下學(xué)期期末考試語(yǔ)文試題
- 2024年賈玲張小斐《上學(xué)那些事》(手稿)臺(tái)詞劇本完整版
評(píng)論
0/150
提交評(píng)論