廈門大學(xué)第四屆機(jī)器翻譯研討會(huì)評(píng)測(cè)系統(tǒng)描述

1、陳毅東 史曉東 周昌樂ydchen, mandel, 2008年11月 北京1提綱概述機(jī)器翻譯系統(tǒng)概要系統(tǒng)融合方法概要測(cè)評(píng)數(shù)據(jù)與結(jié)果小結(jié)2提綱概述機(jī)器翻譯系統(tǒng)概要系統(tǒng)融合方法概要測(cè)評(píng)數(shù)據(jù)與結(jié)果小結(jié)3概述廈門大學(xué)參加了漢英新聞?lì)I(lǐng)域機(jī)器翻譯（開放）漢英新聞?lì)I(lǐng)域系統(tǒng)融合英漢新聞?lì)I(lǐng)域機(jī)器翻譯（受限）英漢科技領(lǐng)域機(jī)器翻譯（受限）使用的模型漢英機(jī)器翻譯：短語，短語+規(guī)則英漢機(jī)器翻譯：短語+規(guī)則、規(guī)則使用的融合方法和系統(tǒng)融合評(píng)測(cè)中使用的相同4提綱概述機(jī)器翻譯系統(tǒng)概要系統(tǒng)融合方法概要測(cè)評(píng)數(shù)據(jù)與結(jié)果小結(jié)5機(jī)器翻譯系統(tǒng)概要（1）統(tǒng)計(jì)翻譯系統(tǒng)短語模型對(duì)數(shù)線性模型融合特征：短語翻譯概率（正向/反向）、詞匯化短語翻譯概

2、率（正向/反向）、語言模型、長(zhǎng)度懲罰因子、短語懲罰因子單調(diào)解碼，動(dòng)態(tài)規(guī)劃方法漢英機(jī)器翻譯評(píng)測(cè)中，我們的短語翻譯系統(tǒng)則結(jié)合了基于組塊的詞語調(diào)序模型 6機(jī)器翻譯系統(tǒng)概要（2）規(guī)則翻譯系統(tǒng)基本模塊：詞法分析句法分析詞義消歧譯文生成采用依存文法描述英語和漢語，文法由程序來描述 詞典條目大約10萬結(jié)合了部分TM技術(shù)沒有專門針對(duì)這次評(píng)測(cè)進(jìn)行調(diào)整7提綱概述機(jī)器翻譯系統(tǒng)概要系統(tǒng)融合方法概要測(cè)評(píng)數(shù)據(jù)與結(jié)果小結(jié)8系統(tǒng)融合方法概要（1）早在1994年就有研究者研究多引擎翻譯系統(tǒng)。多引擎系統(tǒng)的研究可以粗略地分成兩類：簡(jiǎn)單地在各系統(tǒng)的輸出中選出一個(gè)最佳的結(jié)果。從各系統(tǒng)的輸出中各選取最佳片段并構(gòu)成新的結(jié)果。由于融合粒度更

3、細(xì)，第二類方法常?？梢垣@得更好的融合效果。第二類系統(tǒng)融合技術(shù)需要解決的兩個(gè)問題：必須從候選翻譯中抽取出與原文相對(duì)應(yīng)的翻譯片段。必須在這些可用的翻譯片段中篩選并組合成新的翻譯結(jié)果。 9系統(tǒng)融合方法概要（2）參考文獻(xiàn)Chen Yu, Andreas Eisele, Christian Federmann, Eva Hasler, Michael Jellinghaus, and Silke Theison. 2007. Multi-Engine Machine Translaiton with an Open-Source Decoder for Statistical Machine Trans

4、laiton. In: Proceedings of the Second Workshop on Statistical Machine Translation, Prague, 193-196. 平行語料庫(kù)候選翻譯原文新句對(duì)短語表短語模型訓(xùn)練模塊單語語料庫(kù)語言模型語言模型訓(xùn)練模塊短語翻譯解碼模塊譯文10提綱概述機(jī)器翻譯系統(tǒng)概要系統(tǒng)融合方法概要測(cè)評(píng)數(shù)據(jù)與結(jié)果小結(jié)11評(píng)測(cè)數(shù)據(jù)與結(jié)果（1）使用的外部工具GIZA+工具包對(duì)雙語語料進(jìn)行詞對(duì)齊，訓(xùn)練模式是15H53545使用SRI語言模型工具包來訓(xùn)練語言模型使用CRF+工具包來訓(xùn)練組塊分析器（漢英測(cè)評(píng)中）。12評(píng)測(cè)數(shù)據(jù)與結(jié)果（2）漢英新聞機(jī)器翻譯評(píng)測(cè)

5、數(shù)據(jù)結(jié)果系統(tǒng)BLEU4NIST5時(shí)間(s)xmu-constrast-memt（統(tǒng)計(jì)+規(guī)則）0.24127.50826935.44xmu-primary-pumpkin（統(tǒng)計(jì)）0.23907.84015341.2513評(píng)測(cè)數(shù)據(jù)與結(jié)果（3）漢英新聞系統(tǒng)融合評(píng)測(cè) 根據(jù)諸系統(tǒng)在ssmt2007測(cè)試集上的成績(jī)僅挑選了前4名的系統(tǒng)參與融合采用的數(shù)據(jù)情況同漢英新聞機(jī)器翻譯評(píng)測(cè)結(jié)果constrast系統(tǒng)使用和漢英新聞機(jī)器翻譯評(píng)測(cè)相同的參數(shù)，primary系統(tǒng)則將長(zhǎng)度懲罰因子參數(shù)增加到原來的兩倍。 系統(tǒng)BLEU4NIST5時(shí)間(s)xmu-primary-memt10.27217.440815043.03xm

6、u-constrast-memt20.23215.195515108.8814評(píng)測(cè)數(shù)據(jù)與結(jié)果（4）英漢新聞機(jī)器翻譯評(píng)測(cè)數(shù)據(jù)情況結(jié)果系統(tǒng)BLEU5NIST6時(shí)間(s)xmu-primary-memt（統(tǒng)計(jì)+規(guī)則）0.23697.96243262.44xmu-constrast-neon（規(guī)則）0.22638.319936.45pbtm（統(tǒng)計(jì)）0.2020-15評(píng)測(cè)數(shù)據(jù)與結(jié)果（5）英漢科技機(jī)器翻譯評(píng)測(cè)數(shù)據(jù)情況結(jié)果xmu-constrast-memt2系統(tǒng)僅使用科技語料 系統(tǒng)BLEU5NIST6時(shí)間(s)xmu-primary-memt1 (統(tǒng)計(jì)+規(guī)則)0.402610.32473362.61xmu-constrast-memt2 (統(tǒng)計(jì)+規(guī)則)0.400410.27293091.70 xmu-constrast-neon (規(guī)則)0.28169.140058.2316提綱概述機(jī)器翻譯系統(tǒng)