中文信息處理概述

1、 一 個(gè) 詞 的詞 性 , 。 為 了 計(jì)算 每 個(gè) 可 能 的 標(biāo) 記 串 的 概 率 就 需 要 從 訓(xùn) 練 語 料 中統(tǒng) 計(jì) 每 個(gè) 長 度 為 , , 的標(biāo) ” , 記 串 的 出現(xiàn) 次 數(shù) 例 如 時(shí) 要 統(tǒng) 計(jì)任 意兩 個(gè) 標(biāo) 記 的 同 現(xiàn) 次數(shù) , , , , 。 可 以 把 長度 為 , “ 的 標(biāo) 記 串的概率 。 看成 是 對(duì) 語 言 知 識(shí) 的一 種 描 述 跟 規(guī) 則 形 式 的 描述 相 比 具 有 以 下 優(yōu) 點(diǎn) 可 自動(dòng)獲取 無 需 人 工 干 預(yù) 反 映 小 顆 粒 度 知 識(shí) 這 種 知 識(shí) 在 人 寫 規(guī)則 時(shí) 常 常被 忽 略 , 能 標(biāo) 注 其他 語

2、料 時(shí) 正 確率 通 常 會(huì) 降低 。 這兩種 基 本 方 法 如 何 結(jié) 合 是 中 文 信 息 處 理 要 研 究 的一 個(gè) 重 大基 礎(chǔ) 理 論 問 題 參考 文 獻(xiàn) 夏 瑩 常新 功 馬 少 平 等 利 用 上 下 文 相 關(guān) 信 息 的 漢 字 文 本 識(shí) 別 【 陳 【 永彬 王 仁 華 語 言信 號(hào) 處理 中文 信 息 學(xué)報(bào) 哭 中 國 科 學(xué)技 術(shù) 大 學(xué) 出 版社 施 水 才 肖詩斌 王 弘 蔚 等 月 會(huì) 議 清華 大 學(xué) 出 版 社 輝 中文 文 本 信 息 檢 索技 術(shù) 的 發(fā) 展 煌 二 十 年 以 中 國 中文 信 息 學(xué)會(huì) 二 十 周 年 學(xué) 術(shù) 馮 語 志 偉

3、自然 語 言 機(jī) 器 翻 譯 新 論 仁 文 出 版 社 孫 茂松 漢 語 自動(dòng) 分 詞 研 究 評(píng) 述 當(dāng) 代 語 言 學(xué) 溫 鎖 林 中 文 文 本 兼 類 詞 的 標(biāo) 注 技 術(shù)【 中文 信 息 處 理 國 際 會(huì) 議 論 文 集 清 華 大 學(xué) 出 版社 周 軟 強(qiáng) 黃 昌 寧 基 于 局 部 優(yōu) 先 的 漢 語 句 法 分 析 方 法【 件 學(xué)報(bào) 黃 昌 寧 關(guān) 于 處 理 大 規(guī)模 真 實(shí)文 本 的 談話 語 言 文 字 應(yīng) 用 黃 昌 寧 統(tǒng) 計(jì) 語 言 模 型 能做 什 么 語 言 文 字應(yīng) 用 馮 【 志 偉 漢 字 和 漢 語 的 計(jì) 算機(jī) 處 理 當(dāng) 代 語 言 學(xué) 責(zé)任 編 輯 謝 秉 洪 巴沈 刊 ” 份 粥 刀 灰 加 司 抽 記 卿 段加 , “ 兀 舊 , 羅 二 聯(lián) , 嗯 , 叩 洲 舉 ,