NLP分析技術的三個層面

NLP分析技術的三個層面     NLP分析技術大致分為三個層面：詞法分析、句法分析和語義分析。
1）詞法分析     詞法分析包括分詞、詞性標註、具名實體識別和詞義消歧。     分詞和詞性標註好理解。     具名實體識別的任務是識別句子中的人名、地名和機構名稱等等具名實體。每一個具名實體都是由一個或多個詞語構成的。     詞義消歧是要根據句子上下文語境來判斷出每一個或某些詞語的真實意思。
2）句法分析     句法分析是將輸入句子從序列形式變成樹狀結構，從而可以捕捉到句子內部詞語之間的搭配或者修飾關係，這一步是NLP中關鍵的一步。     目前研究界存在兩種主流的句法分析方法：短語結構句法體系，依存結構句法體系。其中依存關係句法體系現在已經成為研究句法分析的熱點。     依存文法表示形式簡潔，易於理解和標註，其可以很容易的表示詞語之間的語義關係，比如句子成分之間可以構成施事，受事，時間等關係。這種語義關係可以很方便的應用魚語義分析和資訊抽取等方面。依存關係還可以更高效的實現解碼演算法。     句法分析得到的句法結構可以協助上層的語義分析，以及一些應用，例如機器翻譯、問答、文本挖掘、資訊檢索等。
3）語義分析 語義分析的最終目的是理解句子表達的真實語義。當時用什麼形式來表示語義一直沒有能夠很好的解決。語義角色標註是比較成熟的淺層語義分析技術。給定句子中的一個謂詞，語義角色標註的任務就是從句子中標註出這個謂詞的施事、受事、時間、地點等參數。語義角色標註一般都在句法分析的基礎上完成，句法結構對於語義角色標註的效能至關重要。