語言模型是根據(jù)語言客觀事實(shí)而進(jìn)行的語言抽象數(shù)學(xué)建模,是一種對(duì)應(yīng)關(guān)系。語言模型與語言客觀事實(shí)之間的關(guān)系,如同數(shù)學(xué)上的抽象直線與具體直線之間的關(guān)系。

中文名

語言模型

外文名

language model

定義

事實(shí)而進(jìn)行的語言抽象數(shù)學(xué)建模

類型

生成性模型

特點(diǎn)

一個(gè)單純的、統(tǒng)一的、抽象的形式

定義

語言模型是一個(gè)單純的、統(tǒng)一的、抽象的形式系統(tǒng),語言客觀事實(shí)經(jīng)過語言模型的描述,比較適合于電子計(jì)算機(jī)進(jìn)行自動(dòng)處理,因而語言模型對(duì)于自然語言的信息處理具有重大的意義。

主要類型

語言模型主要有三種類型:①生成性模型,②分析性模型,③辨識(shí)性模型。

生成性模型從一個(gè)形式語言系統(tǒng)出發(fā),生成語言的某一集合,如N.喬姆斯基的形式語言理論和轉(zhuǎn)換語法。

分析性模型從語言的某一集合開始,根據(jù)對(duì)這個(gè)集合中各個(gè)元素的性質(zhì)的分析,闡明這些元素之間的關(guān)系,并在此基礎(chǔ)上用演繹的方法建立語言的規(guī)則系統(tǒng),如蘇聯(lián)數(shù)學(xué)家O.C.庫拉金娜和羅馬尼亞數(shù)學(xué)家S.馬爾庫斯用集合論方法提出的語言模型。

在生成性模型和分析性模型的基礎(chǔ)上,把二者結(jié)合起來,便產(chǎn)生了一種很有實(shí)用價(jià)值的模型,即辨識(shí)性模型。辨識(shí)性模型可以從語言元素的某一集合及規(guī)則系統(tǒng)出發(fā),通過有限步驟的運(yùn)算,確定這些元素是一堆亂七八糟的詞還是語言中合格的句子。如Y.巴爾-希列爾用數(shù)理邏輯方法提出的句法類型演算模型。