META:在元宇宙里怎么交朋友？Meta發布跨語種交流語音模型 支持128種語言無障礙對話_逸尚聯合投資元宇宙

改名 Meta 之后，Facebook 的元宇宙愿景正在一點點實現。這一次，Facebook 把目光投在了元宇宙社交上。

Meta 發布語音處理模型 XLS-R

近日，Meta 正式發布 XLS-R——一套用于各類語音任務的新型自監督模型。據悉，XLS-R 由海量公共數據訓練而成(數據量是過去的十倍)，能夠將傳統多語言模型的語言支持量增加兩倍以上。目前，XLS-R 共支持 128 種語言。

Meta 認為，語音交流是人們最自然的一種交互形式。“隨著語音技術的發展，我們已經能夠通過對話同自己的設備及未來的虛擬世界直接互動，由此將虛擬體驗與現實世界融為一體。”

汽車品牌日產申請4個新的Web3商標，并在元宇宙中試銷:3月13日消息，日本汽車品牌日產近日在美國提交了四個與Web3相關的新商標，而其日本子公司正在元宇宙中試驗汽車銷售。

根據日產3月7日向美國專利商標局(USPTO)提交的商標申請，新申請涵蓋了其英菲尼迪（INFINITI）、Nismo和日產品牌，范圍涵蓋虛擬服+汽車、虛擬商品商店+NFT、NFT市場+交易+鑄造、元宇宙廣告服務等。

上周，3月8日，日產日本公司宣布將對其虛擬商店“日產Hype實驗室”進行為期三個月的“示范實驗”，以在元宇宙中“研究、咨詢、試駕和購買日產汽車”。 該實驗將于6月30日截止。顧客可以通過個人電腦或智能手機“一天24小時”訪問虛擬店面。客戶可以創建自己定制的虛擬形象，在特定的時間內，甚至可以與虛擬銷售人員互動。根據公告，客戶可以通過虛擬銷售辦公室訂購汽車并敲定購買合同。（Cointelegraph）[2023/3/13 13:00:14]

這與扎克伯格此前宣稱的“公司業務將以元宇宙優先”不謀而合。此前，扎克伯格曾概述了他建立“元世界”的計劃：一個建立在我們自己的數字世界之上的數字世界，包括虛擬現實和增強現實。“我們相信元宇宙將會接替移動互聯網”。

日本科技巨頭索尼：公司有能力在元宇宙中發揮主導作用:5月18日消息，日本科技巨頭索尼集團公司表示，其有能力在虛擬世界（元宇宙）或沉浸式虛擬世界中發揮主導作用。索尼首席執行官吉田賢一郎戰略簡報會上表示：“元宇宙兼具社交空間和實時網絡空間，游戲、音樂、電影和動漫等在這里交匯，我們的目標是將移動空間變成一個新的娛樂空間，我們相信移動將成為下一個大趨勢。”

據此前消息，今年2月份，索尼與曼城達成合作，著手創建全球首個元宇宙足球場。此外，索尼參與了致力于元宇宙發展的游戲巨頭Epic Games的20億美元融資。（鳳凰網科技）[2022/5/18 3:24:48]

而 XLS-R 作為元宇宙社交中必不可少的一環，可以幫助母語不同的人在元宇宙無障礙對話。

值得一提的是，為了通過單一模型實現對多種語言的廣泛語音理解能力，Meta 對 XLS-R 進行了微調，使其獲得語音識別、語音翻譯及語言識別等功能。據介紹，XLS-R 在 BABEL、CommonVoice 以及 VoxPopuli 語音識別基準測試，CoVoST-2 的外語到英文翻譯基準測試，以及 VoxLingua107 語言識別基準測試中都取得了不錯的成績。

Inditex集團旗下服飾品牌Stradivariu在元宇宙平臺發布數字時尚服飾:4月18日消息，繼Zara和PullBear后，世界四大時裝連鎖品牌機構之一Inditex集團旗下服飾品牌Stradivarius也于日前在元宇宙平臺Zepeto APP上發布首個膠囊系列“Digital Fashion：wear the future now”，涵蓋連衣裙、緊身胸衣等，該系列服飾會限時免費上架供用戶體驗，原價1.9歐元至5.99歐元之間，用戶可以上傳自己的照片試穿想要的產品，購買后可下載照片在社交媒體上分享。據悉，Stradivarius成立于1994年，目前在全球64個國家擁有900多家門店。（Fashionnetwork）[2022/4/18 14:30:56]

為了盡可能降低功能訪問門檻，目前，Meta 與 Hugging Face 聯手發布了模型本體，并通過 fairseq GitHub repo 全面開放。

花點時間推出虛擬代言人，在元宇宙開設第一家品牌花店:金色財經報道，花點時間宣布虛擬偶像阿喜Angie為品牌2022年度虛擬代言人，并在元宇宙開設第一家品牌花店。

據介紹，花點時間希望通過阿喜這一來自多元宇宙的IP人物，打破虛擬空間與現實世界的界限，不斷向Z世代年輕圈層滲透，借助虛擬IP創造更多營銷可能。（36氪）[2022/4/13 14:22:22]

試用地址：https://huggingface.co/spaces/facebook/XLS-R-2B-22-16

XLS-R 工作原理

據介紹，XLS-R 在 wav2vec 2.0 訓練集上接受了超過 43 萬 6 千小時的公開語音錄音訓練，從而實現了對語音表達的自監督學習方法。這樣的訓練量已經達到去年發布的當時最強的模型 XLSR-53 的 10 倍。利用從會議記錄到有聲讀物的多種語音數據來源，XLS-R 的語言支持范圍擴展到 128 種，涵蓋的語種量達到前代模型的近 2.5 倍。

作為 Meta 打造的有史以來最大模型，XLS-R 中包含超過 20 億個參數，性能遠高于其他同類模型。Meta 表示，事實證明，更多參數能夠更充分地體現、數據集中的各類語種。此外，Meta 還發現，規模更大的模型在單一語言預訓練方面的性能也同樣優于其他較小模型。

Meta 在四種主要多語言語音識別測試中對 XLS-R 做出評估，發現它在 37 種語言上獲得了超越以往模型的效能。具體測試場景為：BABEL 中選取 5 種語言，CommonVoice 中選取 10 種語言，MLS 中選取 8 種語言，以及 VoxPopuli 上選取 14 種語言。

BABEL 上的單詞錯誤率基準測試結果。XLS-R 較前代模型實現了顯著改進。

此外，Meta 還評估了語音翻譯模型，即將錄音資料直接翻譯成另一種語言。為了打造一套能夠執行多種任務的模型， Meta 同時在 CoVoST-2 基準測試的數個不同翻譯方向上對 XLS-R 進行了微調，使其能夠在英語與多達 21 種語言之間實現內容互譯。

在使用 XLS-R 對英語以外的其他語言進行編碼時，獲得了顯著的效能提升，這也是多語言語音表達領域的一次重大突破。據 Meta 介紹，XLS-R 在低資源語言學習中實現了顯著改進，例如印尼語到英語的翻譯，其中 BLEU 準確率平均翻了一番。BLEU 指標的提升是指模型給出的自動翻譯結果與處理同一內容的人工翻譯結果間重合度更高，代表著模型在改進口語翻譯能力方面邁出了一大步。

以 BLEU 指標衡量的自動語音翻譯準確率，其中較高值表示 XLS-R 從高資源語言(例如法語、德語)、中資源語言(例如俄語、葡萄牙語)或低資源語言(例如泰米爾語、土耳其語)語音記錄翻譯至英語時的準確率。

Meta 認為，XLS-R 證明擴大跨語言預訓練規模可以進一步提高低資源語言的理解性能。它不僅提高了語音識別率，同時也將由外語到英語的語音翻譯準確率提高了一倍以上。

“XLS-R 是我們朝著以單一模型理解多種不同語言(語音)目標邁出的重要一步，也代表著我們在利用公共數據推進多語言預訓練方面做出的最大努力。我們堅信這是一條正確的探索方向，將讓機器學習應用更好地理解所有人類語音、并促進后續研究，大大降低語音技術在全球范圍內、特別是服務匱乏社群中的使用門檻。我們將不斷開發新方法，通過低監督學習拓展模型的語言理解能力、逐步使其覆蓋全球 7000 多種語言，實現算法的持續更新。”Meta 提到。

https://ai.facebook.com/blog/xls-r-self-supervised-speech-processing-for-128-languages/

Tags：XLS元宇宙ETAMETAPIXLS幣逸尚聯合投資元宇宙metamaskMeta Space 2045

POL幣最新價格