首页 > Ai资讯 > Ai知识库 > 精通百种语言的翻译AI来了!Meta推出,免费、开源!

精通百种语言的翻译AI来了!Meta推出,免费、开源!

发布时间:2024年06月06日

你是否曾经遇到过这样的困境:想要和外国朋友聊天,却发现自己的英语水平不够?

想要阅读一篇精彩的外文文章,却被生僻的单词和复杂的语法难住?想要听一首动听的外语歌曲,却不知道歌词的意思?

如果你有这样的需求,那么你一定会对Meta公司最近发布的最新AI翻译模型SeamlessM4T感兴趣。

IMG_256

这个模型可以实现近101种语言之间的文本、音频、视频等多种形式的翻译,而且只需要一个模型就可以完成所有任务。

IMG_257

这是怎么做到的呢?让我们一起来看看吧。

项目地址见文末。

SeamlessM4T是什么?

SeamlessM4TMeta公司在2023822日公开发布的一个多模态AI翻译模型。它是基于Meta公司之前开发的两个模型:M2M-100Universal Speech Translator

,时长02:29

M2M-100是一个文本到文本的机器翻译模型,可以支持100种语言之间的双向翻译。

Universal Speech Translator是一个直接从音频到音频的语音翻译系统,可以支持36种语言之间的双向翻译。

IMG_258

SeamlessM4T将这两个模型结合起来,并且增加了音频到文本、文本到音频、视频到文本、视频到音频等多种翻译任务。它可以自动识别输入和输出的语言类型,无需额外的语言标识模型。它还可以根据输入和输出的媒体形式,自动调整翻译质量和速度。

,时长00:56

SeamlessM4T有以下几个优势:

多功能:SeamlessM4T可以实现多种形式和多种语言之间的翻译,无需切换不同的模型或工具。无论你想要阅读、听取、观看或者说出任何语言的内容,SeamlessM4T都可以帮你实现。

高效SeamlessM4T只需要一个模型就可以完成所有任务,这样可以减少错误和延迟,提高翻译过程的效率和质量。而且,SeamlessM4T使用了最先进的AI技术,可以在几秒钟内完成翻译。

开源Meta公司将SeamlessM4T以及它所使用的训练数据集SeamlessAlign都开源了。这意味着任何人都可以免费使用、修改或者改进这个模型。这也有利于促进AI领域的创新和发展。

SeamlessM4T如何使用?

SeamlessM4T目前已经集成在Meta公司旗下的一些产品和服务中,例如FacebookInstagramWhatsAppMessenger等。你只需要在设置中选择你想要使用的语言,就可以享受SeamlessM4T带来的便利。

如果你想要更多地了解和使用SeamlessM4T,你也可以访问Meta公司的官方网站,或者下载Meta公司的AI研究应用Meta AI Research。在这里,你可以找到SeamlessM4T的详细介绍、使用说明、示例、评估报告等信息。你也可以自己尝试输入不同的语言和媒体形式,看看SeamlessM4T的翻译效果如何。

展示下官方demo试玩

首先是开始录音

IMG_259

选择三种要翻译的语言,点击翻译

IMG_260

这时候会有三个结果,可以点击你想要的播放

IMG_261

是不是很神奇,快去体验吧

官方demo试玩:

https://seamless.metademolab.com/demo

代码地址:

https://github.com/facebookresearch/seamless_communication

论文地址:

https://ai.meta.com/research/publications/seamless-m4t/

结语

SeamlessM4TMeta公司的最新AI翻译神器,它可以实现近100种语言之间的多种形式的翻译,而且只需要一个模型就可以完成所有任务。它有多功能、高效、开源等优势,已经集成在Meta公司旗下的一些产品和服务中。它对于促进全球人们的沟通和联系,以及推动AI领域的创新和发展,都有着重要的意义。

如果你对SeamlessM4T感兴趣,不妨自己去试试看吧。也许你会发现一个全新的世界,也许你会遇到一个意想不到的朋友。无论如何,SeamlessM4T都会为你带来惊喜和乐趣。

出自:https://mp.weixin.qq.com/s/Y87wMiI8iAzUxTZXftqg3w