前端进阶之旅前端进阶之旅
基础篇
进阶篇
高频篇
精选篇
手写篇
面经篇
AI 篇
原理篇
每日一题
小程序题库
知识卡片
  • 场景篇按分类整理的大前端场景考点
  • 历年面经按年份追踪真实考点
  • 算法题库NEW在线编码即时判题
  • 专项自测100 题快速查漏
  • 前端基础
    • HTTP从报文一路讲到 HTTPS
    • 浏览器渲染、事件循环、进程
    • 计算机基础Linux、网络、操作系统
  • 进阶专项
    • 设计模式23 种模式怎么用
    • 前端系统进阶学习大型项目工程化
    • 前端综合文章长期沉淀的实践文
  • 工程与工具
    • Node学习指南从环境搭建到服务端
    • NPM工作流script、依赖与发布
    • Docker容器化部署上手
    • Canvas图形与动画实战
  • 路线与导图
    • 思维导图知识点全景图
    • 学习路线按图索骥不跑偏
  • 动态
    • 公众号动态公众号历史文章
    • 博客动态站长的技术博客
    • 开发者导航常用工具与文档站
  • AI 助手随时提问,即时解析
  • AI 模拟面试模拟真实面试 + 报告
  • AI 知识地图串起全站知识点
  • AI 定制路线按你的简历现排
AI 热点
旧版
基础篇
进阶篇
高频篇
精选篇
手写篇
面经篇
AI 篇
原理篇
每日一题
小程序题库
知识卡片
  • 场景篇按分类整理的大前端场景考点
  • 历年面经按年份追踪真实考点
  • 算法题库NEW在线编码即时判题
  • 专项自测100 题快速查漏
  • 前端基础
    • HTTP从报文一路讲到 HTTPS
    • 浏览器渲染、事件循环、进程
    • 计算机基础Linux、网络、操作系统
  • 进阶专项
    • 设计模式23 种模式怎么用
    • 前端系统进阶学习大型项目工程化
    • 前端综合文章长期沉淀的实践文
  • 工程与工具
    • Node学习指南从环境搭建到服务端
    • NPM工作流script、依赖与发布
    • Docker容器化部署上手
    • Canvas图形与动画实战
  • 路线与导图
    • 思维导图知识点全景图
    • 学习路线按图索骥不跑偏
  • 动态
    • 公众号动态公众号历史文章
    • 博客动态站长的技术博客
    • 开发者导航常用工具与文档站
  • AI 助手随时提问,即时解析
  • AI 模拟面试模拟真实面试 + 报告
  • AI 知识地图串起全站知识点
  • AI 定制路线按你的简历现排
AI 热点
旧版
返回 AI 情报前线
All News · 全部资讯9865
  • Qwen-Image-2.1开源:7B参数兼顾生图与编辑
  • 阿里开源 Qwen-Image-2.1:7B 参数兼顾透明图生成与多图编辑
  • 免费模型Trace不能支持的五个评估主张
  • AI重构前的副作用冻结术:先录 Ledger 再动格式
  • Agent能改Oracle则Green Build不足为信:独立检查三原则
  • AI编程导致代码质量下降?根子在质量管理
  • AI连接数据库必须先脱敏:PII保护实战指南
  • Anthropic与埃森哲20亿美元共建AI安全评估体系
  • Copilot CLI恢复检查点导致1GB未跟踪文件被删
  • AI代码审查升级:结果直发PR评论,淘汰复制粘贴
  • Higgsfield:开源万亿参数模型分布式训练框架
  • LlamaIndex多Agent工作流:事件驱动共享状态编排
  • 用AI从45条Ruff PR评论中挖掘团队隐式代码规范
  • LLM Agent工具授权最佳实践:五步检查清单
  • Agent补丁评分应只看其未写的断言
  • 2026年9月 Ollama 编程模型实测推荐
  • 国产大模型价格实测:GPT-5 三到八倍溢价
  • Codex-X:OpenAI Codex桌面端可视化综合管理工具
  • Docling:支持复杂PDF结构的文档解析库,集成主流AI框架
  • NVIDIA PAIR:开源本地多Agent推理路由,支持Ollama/LM Studio
  • 阿里Qwen发布Qwen3.8-LiveTranslate:60语言实时翻译,延迟仅2.3秒
  • Supermemory:AI记忆与上下文引擎开源实现
  • OpenSpec:AI编程时代的规格驱动开发框架
  • MCP Agent工具集成测试实战指南
  • Claude Code 在 Zed 中的 ACP 协议传输机制实测
  • Mubayyin:基于结构化知识库做 AI 发布决策的智能体
  • 阶跃发布 Step 5 Preview:开源模型前三,单任务成本仅 Claude Opus 5 的 1/8
  • OpenClaw 2026.9.5:原子更新、插件热重载、对话分享与GPT Live扩展
  • Jev:返回类型化校准决策的System One模型
  • Gemini越狱事件:测试中入侵三家公司,Google隐瞒四月
  • Qwen3.8-Omni-Flash:匹敌Gemini多模态能力,价格更低
  • SpaceX 工程师月均 2000 条 PR 背后的验证工程实践
  • Unity发布官方插件:让Claude Code和OpenAI Codex使用最新教程
  • AI机器人安全基准:GPT-6和Claude让机械臂变杀手
  • Qwen 3.8发布:270亿参数模型快速交付网页前端
  • Google Dream-RSI:AI Agent 通过梦境回溯优化搜索策略
  • Gemini 在安全测试中突破隔离环境闯入三家真实公司
  • AI 幻觉差点让美军误登中国船只:核武情报全靠聊天生成
  • Meta发布Mac版Muse:首款覆盖本地文件、邮件、日历的个人AI Agent
  • 2026 年大模型格式对比:GGUF/GPTQ/AWQ/EXL2 实战指南
  • AI工作流延迟优化:模型路由、缓存、并行执行的实战经验总结
  • OpenAI用自家LLM设计Jalapeño芯片
  • Claude Code 现在优先读取 AGENTS.md 文件
  • Copilot 代码审查新增时间线视图和自动 commit 消息生成
  • Claude Code 新增 AGENTS.md 支持,无 CLAUDE.md 时自动读取
  • Anthropic 发布 Claude Opus 5,性能与安全性双提升
  • Ternary Bonsai 2 27B:5.9GB 轻量模型保留 98% Qwen3.8 性能
  • 研究人员用Claude在72小时内攻破OpenAI内部系统
  • BrowserSkill:让AI Agent共享你的真实浏览器登录态
  • Coder:自托管云开发环境与AI编程Agent平台
  • Anthropic开源11款知识工作者Claude插件
  • 已加载 51 / 9865
8.0
热点
AI SCORE
模型发布2026-09-20 14:46

阿里Qwen发布Qwen3.8-LiveTranslate:60语言实时翻译,延迟仅2.3秒

MarkTechPost#Qwen#实时翻译#开源模型
Editor brief · 编辑速览

基于Interleave架构的同声传译模型,支持60语言理解和29语言输出,通过WebSocket API提供服务,可用于国际化应用。

文章思维导图
Knowledge map
拖拽缩放
Full translation

完整中文译文

Qwen(通义千问)发布了 Qwen3.8-LiveTranslate,下一代实时同声传译模型。它能够监听直播语音(可选视频帧),在说话人还在讲话时就返回翻译文本和语音。其核心改进在于全新的 Interleave(交错)架构。Qwen 报告在忠实度、流畅度和简洁性上均有提升,平均延迟(LAAL)从 2.8 秒降至 2.3 秒。此次发布还新增了实时说话人身份标注、双语同步显示,以及长上下文消歧功能。

是否支持部署?支持,以托管 API 的形式提供。在阿里云 Model Studio 和 QwenCloud 上线,模型 ID 为 qwen3.8-livetranslate-flash-realtime,通过 WebSocket 访问。

核心技术变化

同声传译本质上是一个取舍问题:等待时间越长,模型获得的上下文越丰富;说话越早,听众的延迟就越低。Qwen3.8-LiveTranslate 用 Interleave 架构重新构建了这一循环。

这里的延迟指标是 LAAL(Length-Adaptive Average Lagging,长度自适应平均延迟)。它衡量翻译在平均意义上落后于源语音的距离,同时避免对过度生成的系统进行奖励。从 2.8 秒降至 2.3 秒,意味着平均延迟约削减了 18%。

QwenCloud 团队将该模型描述为 Qwen3.8-LiveTranslate-Flash 的实时版本。它构建在 Qwen-Omni 技术栈之上,结合大规模多模态数据、跨语言与跨模态对齐,以及视觉增强能力。Flash 模型还支持离线音视频翻译。

三项新能力

实时说话人身份标注(Speaker Diarization):模型能够在多方语音中区分不同说话人,并通过更稳定的语音克隆保留每位说话人的音色。API 提供了克隆模式选项,包括 always 模式——在每次响应前重新克隆,适用于多人对话场景。

双语同步显示:源文本和翻译同步呈现。在 API 中,源语言转写作为独立事件流,与翻译流并行输出。

长上下文消歧:模型利用对话历史来解析姓名和术语。例如,会议早期出现的姓名,在后续翻译中会保持一致。

语言、输入与视觉

该模型支持 60 种语言的理解,其中 29 种支持语音输出(返回音频和文本),其余 31 种仅返回文本。语音输出涵盖中文、英文、阿拉伯文、德文、法文、西班牙文、日文、韩文、印地文等。

输入为音频和可选图片;输出为文本和音频。唇动、手势、屏幕文字等视觉线索有助于在嘈杂环境和词义模糊时提升准确性。文档建议每秒发送不超过 2 张图片。

团队还可以配置热词(Hotword),将源语言术语映射到固定的目标翻译。文档建议配置不超过 1000 个热词。

API、定价与限制

开发者通过 WebSocket Realtime API 连接,模型 ID 为 qwen3.8-livetranslate-flash-realtime。默认的轮次检测类型为 speaker_detection。客户端持续流式传输音频,接收服务端生成的响应。

默认音频格式为输入 16 kHz PCM、输出 24 kHz PCM。默认音色为 Tina。设置 session.output_modalities 可选择仅文本,或文本加音频。关闭连接前务必发送 session.finish,否则最后一个片段会丢失。

新加坡区域按每 100 万 token 计费:

类型 价格(USD)
文本输入 $7.537
文本输出 $0.621
音频输入 $18.844
音频输出 $30.151

北京区域定价更低,为 $5.653、$0.466、$14.133 和 $22.613。音频输入每秒消耗 7 tokens,音频输出每秒消耗 12.5 tokens。一小时语音输入加输出的费用,在新加坡约为 $1.54(未计入文本和图片 token)。

上下文窗口为 53,248 tokens,其中输入 49,152 tokens、输出 4,096 tokens。默认速率限制为每分钟 10 次请求和 100,000 tokens。Model Studio 标注了函数调用、结构化输出、批量推理和微调为不支持功能。

  • Qwen3.8-LiveTranslate 将平均延迟(LAAL)从 2.8s 降至 2.3s
  • 全新的 Interleave 架构提升了忠实度、流畅度和简洁性
  • 新增说话人身份标注、双语显示和长上下文消歧功能
  • 支持 60 种语言理解,29 种语言语音输出
  • 仅通过阿里云 Model Studio 和 QwenCloud 提供 API 访问
Original source

本文由 AI 翻译整理自 MarkTechPost,原文版权归原作者所有。

阅读英文原文
上一篇
NVIDIA PAIR:开源本地多Agent推理路由,支持Ollama/LM Studio
下一篇
Supermemory:AI记忆与上下文引擎开源实现