機器學習服務文本翻譯能力升級,中文直譯模型讓譯文表達更地道!

来源:https://www.cnblogs.com/hmscore/archive/2022/08/22/16611781.html
-Advertisement-
Play Games

HMS Core機器學習服務文本翻譯能力提供多種語言和多種應用場景的翻譯服務,比如,在出國旅游的場景中,用戶可以藉助應用的語音翻譯播報功能在打車、酒店入住等場景中無障礙溝通,也可以通過拍照翻譯功能讀懂餐廳菜單、路牌信息等。 中文直譯模型讓文本翻譯能力升級 當前主流的翻譯模式大都以語料資源較為豐富的英 ...


HMS Core機器學習服務文本翻譯能力提供多種語言和多種應用場景的翻譯服務,比如,在出國旅游的場景中,用戶可以藉助應用的語音翻譯播報功能在打車、酒店入住等場景中無障礙溝通,也可以通過拍照翻譯功能讀懂餐廳菜單、路牌信息等。

中文直譯模型讓文本翻譯能力升級

當前主流的翻譯模式大都以語料資源較為豐富的英文作為中間語言進行“橋接”翻譯,但是經英文轉移後翻譯精度有所損失,且計算資源加倍執行效果降低。為了響應“一帶一路”倡議,助力多元開放的全球化進程,國內出海應用語種翻譯需求明確且要求系統本地化部署,對部分語言方向如中日、中俄等翻譯質量要求較高,同時希望這些語言方向的翻譯效果持續提升。

基於此,HMS Core機器學習服務文本翻譯能力進行升級,中日、德、法、俄四國語言的中文直譯模型已在新版本中上線。相較於英文橋接翻譯,中文直譯模型可實現每秒併發300字元,端到端翻譯速度小於150ms,翻譯時延降低100%,翻譯速度更快;針對中文特色詞、俚語的翻譯結果更地道,翻譯質量更優。升級後的文本翻譯能力可以滿足中企出海或外企入華等對翻譯要求更高場景的需求。

中文直譯模型方案還參加了WMT2021國際機器翻譯大賽子任務(Shared Task: Triangular MT: Using English to improve Russian-to-Chinese machine translation),並以顯著的優勢在該任務中獲得了第一名。

中文直譯和橋接翻譯效果對比

法譯中

【原文】Smart Launcher est un lanceur pour d’applications Android qui substitue l'interface classique de votre téléphone avec une autre qui est un peu plus simple et qui vous permettra d'accéder à toutes vos applications plus rapidement et plus confortablement.

【英文橋接】智能啟動器是一款Android應用程式的啟動器,它可以用一個簡單一點的界面取代手機的經典界面,讓你更快、更舒適地訪問所有應用程式。

【中文直譯】Smart Launcher是一款Android應用程式啟動器,它用另一個更簡單的界面取代了手機的經典界面,這將讓您更快、更舒適地訪問所有應用程式。

俄譯中

【原文】О, да ладно, когда кто-то грубит тебе в коридоре является, без сомнений, самой меньшей из тех проблем, с которыми ты сталкиваешься в старших классах.

【英文橋接】哦,拜托,在走廊里有人對你無禮,毫無疑問,是你高中時面臨的最不重要的問題。

【中文直譯】哦,拜托,當有人在走廊里對你無禮無疑是你在高中時遇到的最小的問題。

德譯中

【原文】Dieser von klassischen Laufschuhen inspirierte Herren-Sneaker zeichnet sich durch einen Materialmix aus Wildleder und verschiedenen Gewebearten aus und präsentiert sich in der Cruise 2020 Kollektion mit einer neuen Mid-Top-Silhouette, die genau bis zum Knöchel reicht.

【英文橋接】這款男式運動鞋的靈感來自經典跑鞋,採用麂皮和不同面料的混合,並採用全新的中幫輪廓,在2020年郵輪系列中一直延伸到腳踝。

【中文直譯】這款男士運動鞋的靈感來自經典跑鞋,採用麂皮和不同面料的混合材質,在2020年郵輪系列中呈現出全新的中幫輪廓,完全延伸到腳踝。

中文直譯模型的技術優勢

中文直譯模型藉助了華為在機器翻譯方面的最新研究成果,通過利用俄英、英中語料進行知識蒸餾,在少量或沒有俄中語料的情況下,結合顯式課程學習訓練策略可以得到質量不錯的俄中翻譯模型,解決了英文橋接翻譯系統的低資源以及冷啟動的問題。

中文直譯系統

技術點一:多語言增強策略(Multi-lingual Encoder Decoder Enhancement)

以俄中翻譯任務為例,通過多語言模型,引入英中語料並結合知識蒸餾,加強譯文側decoder層的解碼能力;引入俄英語料加強原文側encoder層編碼能力。從而極大程度上解決冷啟動問題。

技術點二:課程學習策略(Explicit Curriculum Learning for Denoising)

在訓練過程,結合顯式的課程學習技巧,根據噪音量劃分三階段增量式訓練方案。在第一階段,使用全量的帶噪語料進行訓練,使得模型快速收斂;第二階段使用雙語對齊工具去噪後進行增量訓練;第三階段使用增強後的降噪雙語數據進行增量訓練,完成模型最終收斂。

技術點三:基於組合解碼策略的數據增強方案(FTST For Data Augmentation)

FTST全稱Forward Translation and Sampling Backward Translation,該技術在Backward Model中使用sampling的方式進行數據增強;在Forward Model中使用beam search的方式進行數據均衡。在對比實驗中,取得了最好效果。

除了現有的四種語言以外,機器學習服務文本翻譯能力計劃今年會陸續上線日、法、德、俄、韓、葡、西、土、泰、阿拉伯、馬來、義大利、波蘭、荷蘭、越南語共計15國的中文直譯模型,基本覆蓋中國、亞非拉、歐洲、南美洲等全球主要國家和地區。

瞭解更多詳情>>

訪問華為開發者聯盟官網
獲取開髮指導文檔
華為移動服務開源倉庫地址:GitHubGitee

關註我們,第一時間瞭解 HMS Core 最新技術資訊~


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 1.模里西斯ICTA啟用6 GHz頻段! 2022年8月4日,模里西斯信息和通信技術管理局 (ICTA) 發佈了《關於在 5945-6425 MHz頻率範圍內為寬頻無線接入服務分配額外頻譜的決定》,允許5945-6425 MHz頻段可用於以下設備: • 僅限室內使用的室內低功率 (ILP) 設備。不 ...
  • Camera Raw是Photoshop和其他 Creative Suite應用程式的有用插件,可以訪問由各種專業和中檔數位相機生成的“原始”圖像格式。通過 Camera Raw,您可以對來自各種不同相機的原始圖像進行增強,以及將圖像導入至各個應用程式。 詳情:Camera Raw 功能介紹 一步式 ...
  • 當然,目前 StoneDB 的社區建設還正處於初啟階段,我們堅信,開源項目的成長,最終還是要靠社區用戶一起來共創,因此,StoneDB 開源社區非常重視社區用戶的聲音,在 7 月份,我們從各個渠道里收集到了用戶的反饋,這裡做一個彙總,同步給各位關註 StoneDB 的開發者們,無論您是在校學生還是公 ...
  • 一、直播介紹 前幾期,我們為大家分享了Taier基本介紹、控制台、Web前端架構及數據開發介紹,本期我們為大家分享Taier任務調度介紹。 本次直播我們將從Taier的任務調度實例生成、調度及提交等方面為大家進行介紹,通過本次分享,希望大家能對Taier有更進一步的瞭解。 二、直播主題 Taier任 ...
  • 本文屬於基礎知識的回顧,在日常技術交流和日常工作中經常發現有些同事瞭解關於資料庫事務的基本知識,會看SQL語句的執行計劃,也知道資料庫有X鎖、U鎖和S鎖等各種鎖,但是對於這些鎖在資料庫事務執行期間是如何工作?為何這樣配合才能完成資料庫事務?資料庫是如何對於各種資源加鎖的?等等這類的問題不太瞭解,那麼... ...
  • StoneDB與MySQL的相容性如何? StoneDB高度相容MySQL 5.6、5.7協議和MySQL生態等重要特性,支持MySQL常用的功能及語法。 由於StoneDB本身的一些特性,部分操作和功能尚未得到支持,如不支持創建索引、不支持刪除數據等。 StoneDB有自己的優化器嗎? Stone ...
  • 開心一刻 今天,朋友氣衝衝的走到我面前 朋友:我不是談了個女朋友,談了三個月嘛,昨天我偷看她手機,你猜她給我備註什麼 我:備註什麼? 朋友:舔狗 2 號! 我一聽,氣就上來了,說道:走,找她去,這婆娘確實該罵,臭不要臉的 朋友拉住我,勸到:哎哎,不是去罵她,是找她理論,叫她改成舔狗1號,是我先來的! ...
  • 請點贊關註,你的支持對我意義重大。 🔥 Hi,我是小彭。本文已收錄到 GitHub · AndroidFamily 中。這裡有 Android 進階成長知識體系,有志同道合的朋友,關註公眾號 [彭旭銳] 帶你建立核心競爭力。 前言 LeakCanary 是我們非常熟悉記憶體泄漏檢測工具,它能夠幫助開 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...