并行翻譯的技術(shù)難點(diǎn)是如何組成連貫語(yǔ)句
,在WMT2021國(guó)際機(jī)器翻譯大賽上,字節(jié)跳動(dòng)火山翻譯團(tuán)隊(duì)以并行翻譯系統(tǒng)參賽,獲得德語(yǔ)到英語(yǔ)方向機(jī)器翻譯比賽自動(dòng)評(píng)估第一名并行翻譯在國(guó)際大賽首次亮相,就成功擊敗了從左向右逐詞翻譯的自回歸模型技術(shù),打破后者在機(jī)器翻譯領(lǐng)域的絕對(duì)統(tǒng)治地位

根據(jù)消息顯示,WMT2021是由國(guó)際計(jì)算語(yǔ)言學(xué)協(xié)會(huì)ACL舉辦的世界頂級(jí)機(jī)器翻譯比賽,德英語(yǔ)向是該賽事競(jìng)爭(zhēng)最激烈的大語(yǔ)種項(xiàng)目之一。
火山翻譯團(tuán)隊(duì)負(fù)責(zé)人介紹說(shuō),自回歸模型更接近人類(lèi)閱讀習(xí)慣,逐詞按順序生成翻譯,每一個(gè)輸出的詞都依賴(lài)于之前的詞,當(dāng)輸出文本較長(zhǎng)或者模型比較復(fù)雜時(shí),機(jī)器翻譯的速度很慢,并行翻譯則是由機(jī)器同步輸出所有的詞,可以充分利用并行計(jì)算,將翻譯速度提高數(shù)十倍句子越長(zhǎng),速度提升越明顯
并行翻譯的技術(shù)難點(diǎn)是如何組成連貫語(yǔ)句對(duì)此,火山翻譯團(tuán)隊(duì)采用了一項(xiàng)創(chuàng)新的漸進(jìn)學(xué)習(xí)方式,由簡(jiǎn)單到復(fù)雜,由片段到整句訓(xùn)練并行翻譯模型在保持極高翻譯速度的同時(shí),并行翻譯的質(zhì)量顯著提升
火山翻譯團(tuán)隊(duì)負(fù)責(zé)人坦言,在訓(xùn)練數(shù)據(jù)量小的場(chǎng)景下,并行翻譯的質(zhì)量相比傳統(tǒng)技術(shù)處于劣勢(shì)但是當(dāng)訓(xùn)練數(shù)據(jù)規(guī)模變大后,并行翻譯會(huì)逐漸縮小差距,甚至反超傳統(tǒng)技術(shù)目前并行翻譯技術(shù)已應(yīng)用在火山翻譯產(chǎn)品中,用以支持字節(jié)跳動(dòng)的部分業(yè)務(wù)
在去年的WMT2020比賽中,火山翻譯獲得中英,德英,德法等5個(gè)語(yǔ)向翻譯冠軍,今年以全新技術(shù)奪魁更是一次重要的突破據(jù)介紹,火山翻譯已支持50多個(gè)語(yǔ)種,近3000個(gè)語(yǔ)向的翻譯,不僅應(yīng)用在飛書(shū),今日頭條等字節(jié)跳動(dòng)旗下產(chǎn)品,也通過(guò)火山引擎向企業(yè)客戶(hù)提供技術(shù)服務(wù)
聲明:本網(wǎng)轉(zhuǎn)發(fā)此文章,旨在為讀者提供更多信息資訊,所涉內(nèi)容不構(gòu)成投資、消費(fèi)建議。文章事實(shí)如有疑問(wèn),請(qǐng)與有關(guān)方核實(shí),文章觀點(diǎn)非本網(wǎng)觀點(diǎn),僅供讀者參考。
最新文章
- 支架手術(shù)后恢復(fù)吃什么好?初元口服液是不錯(cuò)
- ST威龍:股東青島鑫誠(chéng)洪泰智造完成增持計(jì)
- 4萬(wàn)股民嗨了!5000億巨頭又出手引發(fā)市
- 多樣且成分復(fù)雜的塑料制品影響回收率的提高
- 截至今年一季度末鼎誠(chéng)人壽核心及綜合償付能
- 全國(guó)碳排放權(quán)市場(chǎng)開(kāi)張首日開(kāi)門(mén)紅 收盤(pán)上
- Discover是美國(guó)領(lǐng)先的幾大信用卡信
- 今年以來(lái)重慶啤酒在高端化和產(chǎn)品創(chuàng)新方面動(dòng)
- 加之四季度兩次大促活動(dòng)將助力石頭科技四季
- Windows11Build22489帳
熱門(mén)文章
- 中方將按照DEPA相關(guān)程序與其他成員開(kāi)展
- 各地多措并舉保障秋冬“菜籃子”供給
- 對(duì)華裔的歧視和迫害不再是新聞是美國(guó)經(jīng)濟(jì)社
- 中方正式提出申請(qǐng)加入《數(shù)字經(jīng)濟(jì)伙伴關(guān)系協(xié)
- 中化國(guó)際公布了2021年第三季度報(bào)告
- 誠(chéng)志股份于去年第三季度開(kāi)始持續(xù)發(fā)力單季凈
- 10月28日華為技術(shù)有限公司向歐洲知識(shí)產(chǎn)
- 山東省中小學(xué)課后服務(wù)發(fā)展率已達(dá)98.59
- 1.5億美元!諾和諾德在津第8次增資增資
- 益庫(kù)布齊已建成百萬(wàn)千瓦級(jí)光伏治沙工程