中文文檔中學(xué)術(shù)活動事務(wù)信息的提取.pdf

1、學(xué)術(shù)關(guān)系網(wǎng)絡(luò)屬于社會關(guān)系網(wǎng)絡(luò)中的一種，而學(xué)術(shù)關(guān)系蘊含在豐富的學(xué)術(shù)活動事務(wù)信息中，隨著我國科學(xué)技術(shù)評價的發(fā)展，如何從大量的學(xué)術(shù)活動事務(wù)信息中挖掘隱含的學(xué)術(shù)關(guān)系，建立學(xué)術(shù)關(guān)系網(wǎng)絡(luò)成為了重要的研究課題。因此，有效的提取這些學(xué)術(shù)活動事務(wù)信息成為了建立學(xué)術(shù)關(guān)系網(wǎng)絡(luò)的首要條件。然而學(xué)術(shù)活動事務(wù)信息一般都是以文本的形式存在的，所以本文提出了一種基于條件隨機(jī)場的在中文文檔中提取學(xué)術(shù)活動事務(wù)信息的方法。
　　根據(jù)學(xué)術(shù)活動事務(wù)信息描述時具有的長距離依

2、賴關(guān)系的特點，采用條件隨機(jī)場(Conditional Random Fields，Crfs)的方法對其進(jìn)行狀態(tài)序列預(yù)測。由于我們采用的是crf++作為序列預(yù)測的算法工具，因此根據(jù)它對輸入數(shù)據(jù)的要求，進(jìn)行了訓(xùn)練數(shù)據(jù)和測試數(shù)據(jù)的準(zhǔn)備工作，并且重點研究了在進(jìn)行特征模板設(shè)計時的準(zhǔn)則及方法，實現(xiàn)了學(xué)術(shù)活動事務(wù)信息的自動標(biāo)注。同時，在文本預(yù)處理的過程中，采用了正則匹配的方法對分詞不準(zhǔn)確的詞語進(jìn)行了適當(dāng)?shù)奶幚?。并且根?jù)實驗結(jié)果選擇了最優(yōu)模板的組合模板

3、，使學(xué)術(shù)活動事務(wù)信息的標(biāo)注取得了較為滿意的結(jié)果。
　　由于在一般的條件隨機(jī)場的訓(xùn)練過程中都是采用手工收集訓(xùn)練數(shù)據(jù)，既費時耗力，又不能完全代表所有申請書的語句格式，所以本文采用了一種基于KNN的半監(jiān)督學(xué)習(xí)方法將訓(xùn)練數(shù)據(jù)的收集過程進(jìn)行了改進(jìn)。該方法是根據(jù)較少的訓(xùn)練數(shù)據(jù)訓(xùn)練得到Crfs模型，用驗證數(shù)據(jù)中的標(biāo)注結(jié)果進(jìn)行KNN分類器的訓(xùn)練，再用得到的分類規(guī)則在測試數(shù)據(jù)的標(biāo)注結(jié)果中選擇出有意義的未標(biāo)注數(shù)據(jù)，補充到訓(xùn)練數(shù)據(jù)中，從而提高訓(xùn)練數(shù)據(jù)的