AI语音独角兽ElevenLabs:B轮融资8000万美元,半年估值涨10倍,未来三大产品开发方向
小爬 • 发表于2024-01-29 16:02:44 • 47706次阅读
人工智能语音公司ElevenLabs 日前宣布已筹集 8000 万美元完成B轮融资。这使得ElevenLabs 的融资总额达到 1.01 亿美元,公司估值超过 10 亿美元(去年 6 月约为 1 亿美元),成为新兴的人工智能应用独角兽公司。我们此前曾报道过ElevenLabs (相关阅读:ElevenLabs:让AI有目的、有感情地吟诵更长的片段)。随着它完成新一轮的融资,可以看到规划中的AI配音等三大产品将迎来更大的变化。ElevenLabs 此轮融资由Andreessen Horowitz、Nat Friedman、Daniel Gross共同领投,Sequoia Capital、SV Angel、Smash Capital、BroadLight Capital 和 Credo Ventures 跟投。ElevenLabs 首席执行官 Mati Staniszewski 表示,新资金将用于产品开发、扩大 ElevenLabs 的基础设施和团队、人工智能研究以及“加强安全措施,以确保人工智能技术负责任且合乎道德的发展”。自成立以来,ElevenLabs 的用户已经生成了时长相当于 100 多年的音频,而公司员工也从 5 名增加到 40 名。如今,41% 的财富 500 强公司的员工正在使用 ElevenLabs 技术。ElevenLabs 的技术已被众多垂直行业采用。它使创作者能够通过画外音和AI配音来增强观众体验,扩大教育机会,并在有声读物出版、娱乐和个人使用方面提供创新解决方案,包括提高可访问性。2023 年,ElevenLabs 还扩大了其在多个领域的业务,包括出版、游戏、媒体和对话垂直领域,并与主要媒体公司建立了 B2B 合作伙伴关系,其中包括:
出版:Storytel、华盛顿邮报、莱茵邮报、Curio
对话式AI:FlowGPT、SimpleTalk AI、Ollang、VoiceDrop、Vana、Infinitus AI
媒体与娱乐:Wondershare Filmora、Futuri Media、TheSoul Publishing
游戏:Paradox Interactive、网易、Inworld AI
后续,ElevenLabs既会进行已发布产品的维护与发展,也将进行三个方向新产品的开发。该公司去年推出了人工智能语音分类器: 一个可以验证音频样本是否包含 ElevenLabs 生成内容的工具。今年,该公司将致力于增强分类器的能力,以覆盖更多语音人工智能模型,并与其他分销商合作以实现更广泛应用。今年,ElevenLabs计划改进检测工具,以标记来自其他语音生成人工智能模型的音频,并与不知名的“分销商”合作,使该工具在第三方平台上可用。该公司还将很快将目前提供英语版本的 Turbo 和 Speech to Speech 模型扩展到更广泛的语言。
未来几周的路线图是一个新的配音工作室工作流程,其中包括生成和编辑转录本和翻译的工具,以及一个基于订阅的移动应用程序,该应用程序使用ElevenLabs的声音讲述网页和文本。新配音室工作流程:使用户能够为一整部电影配音,并能够生成和编辑其转录本、翻译本和时间码,从而提供对内容制作的额外控制。这些功能补充了现有的 AI 配音功能,可实现跨 29 种语言的(自动化、端到端)视频本地化。语音库市场:将为用户提供一个安全的平台,让他们可以从自己的语音的AI版本中获利。用户可以创建自己的专业AI语音副本,进行验证,并通过语音库进行分享。当其他人使用这些经过验证的声音时,原创者就会获得补偿。用户始终保留对其语音可用性和补偿条款的控制权。该市场已经为一小部分前期用户带来了收入。移动应用程序阅读器的早期预览版:可将文本和 URL 即时转换为音频,使用户在移动时更轻松地访问其他媒体中的内容。作为介绍性试用,该应用程序将在前三个月免费提供,用户将能够通过等候名单注册以提前访问。
ElevenLabs眼下面临着很多AI语音应用带来的争议。比如用户们能够在Elevenlabs的产品中生成知名公众人物的声音样本,并利用这些样本来传播仇恨言论;能够在几秒钟内利用 ElevenLabs恶意克隆声音,甚至能够生成一个足以骗过银行身份验证系统的克隆音频。ElevenLabs还面临配音演员的批评,他们声称该公司在未经许可的情况下使用他们的声音样本,这些样本可能被用来推广他们不认可的内容或传播虚假信息。在近期的一篇文章中,受害者讲述了ElevenLabs是如何被用于针对他们的骚扰活动的,其中一个例子是使用克隆的声音分享演员的私人信息——他们的家庭住址。作为回应,ElevenLabs封禁了多次违反其禁止滥用的服务条款的用户,并推出了一种检测其平台创建的语音的工具。Staniszewski表示,今年,ElevenLabs计划改进检测工具,以标记来自其他AI语音生成模型的音频,并与不知名的“分销商”合作,使该工具在第三方平台上可用。据外媒报道,配音演员越来越多地被要求签署他们声音的版权,以便客户可以使用AI合成版本,最终取代配音演员本身——有时他们甚至没有相应的报酬。令人担忧的是,配音工作——尤其是廉价的入门级工作——最终将被AI生成的人声所取代,演员将没有追索权。ElevenLabs的解决方案是语音市场。该市场目前处于早期测试阶段,并将在未来几周内变得更加广泛应用。该市场允许用户创建、验证和共享语音。Staniszewski说,当其他人使用语音时,原作者将获得补偿。
他补充道:“用户始终保留对其语音可用性和补偿条款的控制权。”“该市场旨在将人工智能的进步与既定的行业实践相协调,同时为ElevenLabs的平台带来多样化的声音。”