字数 1428，阅读大约需 8 分钟
计划详情：多方协作，丰富语言资源
近日，科技巨头Meta[1]宣布启动语言技术合作伙伴计划。此次计划Meta与联合国教科文组织（UNESCO）展开深度合作，旨在广泛收集语音录音及转录文本，助力未来开放可用的人工智能发展。
该计划积极寻求各类合作伙伴，期望其能够贡献超过10小时带有转录文本的语音录音、大量书面文本，以及多种“不同语言”的翻译句集。Meta方面表示，合作伙伴将与公司的AI团队紧密合作，把这些语言融入到AI语音识别与翻译模型之中。待模型最终完成后，将以开源形式发布，供全球开发者使用与改进。
目前，加拿大北部人口稀少的努纳武特地区政府已加入其中。努纳武特的部分居民使用因纽特语（Intuit languages，统称Inuktut），这一独特语言资源的加入，将为AI模型的语言多样性提供有力支持。
Meta在相关博客文章中提到，“我们的工作特别聚焦于服务不足的语言，以此支持联合国教科文组织的工作。我们的最终目标是创建能够理解并响应复杂人类需求的智能系统，无论语言或文化背景如何。” 这一表述明确了计划的公益性质与长远目标。
配套举措：开源基准测试，提升模型性能
为了更好地评估语言翻译模型的性能，Meta同步发布了一个开源机器翻译基准。该基准由语言学家精心编制的句子构成，目前支持七种语言，开发者可在AI开发平台Hugging Face上访问并贡献内容。
这一基准的发布，对整个AI语言翻译领域意义重大。一方面，它为开发者提供了统一且权威的评估标准，有助于提升不同模型之间的可比性。此前，在缺乏统一标准的情况下，不同研究机构开发的翻译模型性能评估结果差异较大，难以进行准确比较，而Meta发布的这一开源基准有望改变这一局面。另一方面，通过Hugging Face平台的开放性，能吸引全球开发者共同参与，不断完善基准测试内容，从而推动整个语言翻译模型性能的提升。
Meta的动机与潜在收益
虽然Meta将语言技术合作伙伴计划与开源机器翻译基准发布定位为慈善性质，但公司自身也将从中受益。
从产品角度看，Meta持续扩大其AI驱动的助手Meta AI所支持的语言数量，并推出如创作者自动翻译等试点功能。例如，2024年9月，Meta宣布开始测试一项用于Instagram Reels的语音翻译工具，该工具允许创作者为自己的语音配音并实现自动唇形同步。此次新计划的实施，将为这些产品功能的优化提供助力。
从市场反馈看，Meta在其平台上对非英语内容的处理饱受批评。有报告指出，Facebook对近70%的意大利语和西班牙语新冠错误信息未进行标记，而英语同类错误信息的未标记比例仅为29%。此外，公司泄露的文件显示，阿拉伯语帖子经常被错误标记为仇恨言论。这些问题严重影响了Meta平台在多语言用户群体中的口碑。通过此次新计划，Meta有望提升其翻译和审核技术，改善用户体验，挽回市场声誉。
行业内相似案例对比
在AI语音与翻译领域，其他科技公司也有类似行动。
谷歌长期致力于语言相关的AI研究与开发。谷歌翻译作为全球使用广泛的翻译工具，不断通过各种方式提升其翻译质量和覆盖语言范围。谷歌利用庞大的用户数据优化翻译模型，每天处理超过1400亿个单词的翻译请求，基于这些海量数据调整模型参数，提升翻译准确性。
微软同样在语言AI领域投入巨大。微软翻译不仅支持多种语言，还不断拓展应用场景，如在办公软件中集成翻译功能，方便用户在文档处理过程中进行实时翻译。微软还通过与学术机构合作，开展语言研究项目，提升其AI在语言理解和生成方面的能力。
与谷歌、微软相比，Meta此次的计划具有自身特点。一方面，Meta选择与联合国教科文组织合作，更强调对服务不足语言的关注，填补了行业空白。另一方面，通过开源模型和基准测试，Meta有望吸引更多开发者参与，形成更加开放和活跃的AI语言生态系统。
