自然語言處理中的概率語法

自然語言處理中的概率語法

上下文無關語法在處理句法歧義時遇到了困難,概率上下文無關語法和概率詞匯化上下文無關語法為解決句法歧義問題提供了有力的手段.概率語法給一個句子或者單詞的符號串指派一個概率,從而捕捉比一般的上下文無關語法更加細致的句法信息.概率上下文無關語法也是一種上下文無關語法,其中的每一個規則都標上選擇該規則的概率,處理每一個上下文無關規則時,都假定它們在條件上是獨立的,一個句子的概率使用剖析該句子時每一個規則的概率的乘積來計算.CYK算法是一種自底向上的動態規劃剖析算法,經過概率上下文無關語法增強之后,概率CYK算法就可以計算在剖析一個句子時的剖析概率.概率上下文無關語法的概率可以通過統計已經剖析好的語料庫(樹庫)中的規則而得到,也可以通過直接剖析尚未加工過的語料庫而得到.當剖析的句子有歧義的時候,可以使用向內向外算法來處理.概率詞匯化上下文無關語法要考慮每一個規則的詞匯中心語,規則的概率要以詞匯中心語和鄰近的中心語作為它的條件,這樣就進一步增強了規則的功能.

作 者： 馮志偉 Feng,Zhiwei   作者單位： 韓國科學技術院  刊 名： 當代語言學  PKU CSSCI 英文刊名： CONTEMPORARY LINGUISTICS  年，卷(期)： 2005 7(2)  分類號： H0  關鍵詞： 上下文無關語法   概率上下文無關語法   概率CYK算法   概率詞匯化上下文無關語法  

【自然語言處理中的概率語法】相關文章：

心理測驗中的趨中回歸與超常分數重現概率04-26

概率統計方法在企業風險管理中的應用04-27

淺談英語教學中的趣味語法04-26

淺談城市中垃圾的處理04-26

速分技術在中水處理中的應用04-26

曝氣生物濾池在中水處理中的應用04-25

幾種中水處理技術簡介04-26

Excel中VBA處理數據的優勢04-27

電絮凝在水處理中的應用04-27

人工濕地在水處理中的應用04-25