ElevenLabs 推出 Eleven Realtime Translation 实时语音翻译模型
ElevenLabs 发布实时语音翻译模型 Eleven Realtime Translation,目前以 alpha 形式面向 ElevenAPI 企业客户开放。该模型默认使用低延迟语音模型 Eleven v4 Turbo,支持 90 多种语言并自动检测语言,可从 17500 多个声音中选声或使用 Instant、Professional Voice Clone。
ElevenLabs 发布实时语音翻译模型 Eleven Realtime Translation,目前以 alpha 形式面向 ElevenAPI 企业客户开放。该模型默认使用低延迟语音模型 Eleven v4 Turbo,支持 90 多种语言并自动检测语言,可从 17500 多个声音中选声或使用 Instant、Professional Voice Clone。
ElevenLabs 发布播客转写分步指南,流程为导出音频、选择方式、上传配置、审校、导出五步。其 Scribe v2 支持 90 多种语言、单文件最多 32 位说话人,网页端单文件上限 3GB、标准模式最长 10 小时。指南建议 AI 转写后人工审校,SRT 与 VTT 适合播客应用字幕,纯文本或 HTML 适合网站博客。
ElevenLabs 发布 Eleven Realtime 系列语音到语音模型,包含面向低成本自然对话的 v1 Mini 和面向复杂任务、多步工作流的 v1 Max,两者支持 90 多种语言并可调用 ElevenLabs 库中 17,000 多个声音。Artificial Analysis 的独立评测显示。
ElevenLabs 发布面向内容创作者的语音转文字工作流指南,用于生成视频字幕、播客节目笔记并将音频内容转为博客等文字形式。其 Caption Generator 可生成词级和字符级时间戳,字幕可导出为 SRT 和 VTT 文件。Scribe v2 模型默认逐字转写。
ElevenLabs 发文解析音频深度伪造检测的两类技术路线:传统工具用统计分析给出样本为 AI 生成的概率分数,水印则由合成器在音频中嵌入人耳听不到的数学签名,检测器可给出确定的是或否。ElevenLabs 的 Audio Detector 能高准确率识别自家产品生成的水印,但无法识别其他公司的水印,因此水印只应作为大规模检测体系中的一环。
ElevenLabs 发布访谈转写指南,其 ElevenCreative Speech to Text 基于 Scribe v2 模型,在 ElevenLabs Playground 和 ElevenAPI 中同时支持逐字与干净两种转写风格,逐字为默认。多通道转写可为每位说话人单独分配麦克风与标签,避免串话时的标注错误;音频事件默认打标签,可用关键术语提示纠正人名与行业术语拼写。
ElevenLabs 官方发布 Eleven v4 和低延迟变体 Eleven v4 Turbo,介绍自然语言表演指令、音频标签、多说话人对话及跨语言音色保持能力。文章称两者支持90多种语言,并已通过 ElevenAgents、ElevenCreative 和 ElevenAPI 提供,适用方向包括旁白、有声书、角色台词和本地化配音。 官方榜单、偏好测试及延迟数字未由本站复核,不计作本站排名或实测。声音克隆能力不代表取得任意声音的使用授权;套餐、声音授权和输出商用条件需单独核验。
推荐理由:多语言配音、对话和表演控制属于声音制作;公布与修改时间分别保留。 官方声明,未由本站实测。
Comfy 回顾与 MiniMax 合作的 H3 音画同步挑战,介绍同次生成中声音与动作结合的作品及评审流程。该活动已经结束;获奖结果属于主办方评审,不作为本站工具质量排名。
Comfy 曾发起 H3 音画同步创作挑战,要求声音与视频来自同次生成,并允许按说明使用参考音频。该项为已结束活动的历史记录,不能当作当前报名入口;参赛素材的权利需由创作者确认。
Comfy 的集成说明介绍 MiniMax Music 3:使用歌词与声音描述生成完整歌曲,并说明模型结构与立体声输出。时长、采样规格及连贯性为官方说明;音乐、声音、歌词及商用许可需单独核验。