Stability AI与Arm合作:开启移动设备音频生成新时代

AI快讯5小时前发布 freeAI
0

字数 2155,阅读大约需 11 分钟

Stability AI与Arm合作:开启移动设备音频生成新时代
Stability AI是一家专注于生成性人工智能技术的公司,以其热门图像生成模型Stable Diffusion而闻名。致力于为专业创意人士和企业提供强大的AI工具,推动生产流程创新和效率提升。

Stability AI 与 Arm 合作,将音频生成模型引入移动设备

合作背景

专注于生成性人工智能的初创公司 Stability AI 近日宣布与芯片制造商 Arm 达成战略合作。此次合作旨在优化并引入 Stability AI 的音频生成模型 Stable Audio Open 到搭载 Arm 芯片的移动设备上。这一举措标志着生成性 AI 技术在移动端应用方面取得了重要进展。

模型特点

Stable Audio Open 是一款强大的 AI 模型,能够根据文本描述生成各种音频,包括音效和音乐片段。与目前市场上大多数依赖云端处理的音频生成应用(如 Suno 和 Udio)不同,Stable Audio Open 经过专门优化,可在移动设备上实现离线运行。这一特点为用户提供了更大的灵活性和便利性,尤其是在网络连接不稳定或无法访问云端资源的情况下。

版权问题

在音频生成领域,版权问题一直备受关注。许多音频生成模型在训练过程中使用了受版权保护的内容,这可能导致知识产权纠纷和法律风险。然而,Stability AI 表示,Stable Audio Open 的训练集完全由免版税的音频和歌曲组成,从而有效避免了这一问题。这一做法不仅符合版权法规的要求,也为用户提供了更可靠的内容生成服务。

性能优化

为了在移动设备上实现高效的音频生成,Stability AI 与 Arm 合作对 Stable Audio Open 进行了深度优化和“蒸馏”处理。通过这些优化措施,模型的生成时间被缩短了 30 倍。具体而言,在搭载 Armv9 CPU 的设备上,生成一个 11 秒的音频样本仅需约 8 秒。这一显著的性能提升使得 Stable Audio Open 能够在移动设备上实现实时或近实时的音频生成,为用户提供了更流畅和高效的使用体验。

展示与未来计划

优化后的 Stable Audio Open 模型将在本周于巴塞罗那举行的移动世界大会(Mobile World Congress)上进行公开演示。虽然目前该模型尚未可供公众下载,但 Stability AI 首席执行官 Prem Akkaraju 暗示,未来公司将致力于将包括 Stable Audio Open 在内的模型引入到消费类应用和设备中。Akkaraju 表示:“随着越来越多的专业创意人士和企业采用生成性 AI 来推动其生产流程,确保我们的模型和工作流程能够在各种平台上为开发者和创作者提供服务变得至关重要。我们很高兴能与 Arm 合作,共同实现这一目标。”

Stability AI 与 Arm 的合作不仅展示了生成性 AI 技术在移动端应用的巨大潜力,也为行业内其他公司提供了有益的借鉴。根据市场研究机构 Gartner 的报告,到 2025 年,全球移动设备出货量预计将达到 22 亿部。随着移动设备的普及和性能的提升,越来越多的 AI 应用将从云端迁移到移动端,以提供更快速、更个性化的服务。Stability AI 与 Arm 的合作正是顺应了这一趋势,为移动端 AI 应用的发展注入了新的动力。

此外,Stability AI 在去年成功筹集了新的资金,投资者包括前谷歌 CEO Eric Schmidt 和 Napster 创始人 Sean Parker。这些资金的注入为 Stability AI 提供了更多的资源和支持,帮助公司克服了此前面临的财务困境和管理挑战。在最近几个月里,Stability AI 任命了新的 CEO,并邀请了《泰坦尼克号》导演 James Cameron 加入其董事会。同时,公司还发布了几款新的图像生成模型,进一步巩固了其在生成性 AI 领域的领先地位。

© 版权声明

相关文章

暂无评论

暂无评论...