一条命令跑起实时同传:Qwen3.5 LiveTranslate 浏览器 Demo 开源了

简介: 通义千问Qwen3.5 LiveTranslate浏览器端开源Demo,30秒体验超低延迟(2.5s首字)实时同传:支持60语种识别、29语种音色克隆语音输出、热词增强、视觉消歧,开箱即用。含完整WebSocket协议实现,助力快速集成。

你有没有遇到过这样的场景:老板丢来一个实时翻译 API 的文档链接,让你"接一下试试"——然后你发现,光是把麦克风采样、PCM 编码、WebSocket 子协议、流式音频回放这一整条链路跑通,就已经搭进去了两三天。

现在不需要了。

我们把 Qwen3.5 LiveTranslate 的完整浏览器端 Demo 开源了

克隆仓库,装依赖,一条 uvicorn 命令启动,打开浏览器就能体验实时同声传译——从麦克风输入到翻译文本和音频输出,全链路开箱即用。

GitHub 地址:https://github.com/modelstudioai/LiveTranslate-Demo/tree/main

为什么做这个 Demo
Qwen3.5 LiveTranslate(模型 ID:qwen3.5-livetranslate-flash-realtime)是通义千问语音团队推出的新一代实时同声传译模型。它已经通过阿里云百炼 / Model Studio 开放了 API,但如果你只看协议文档,很难直观感受到"实时"到底有多快、"音色克隆"到底像不像、"视觉消歧"到底怎么用。

这个 Demo 就是为了让你 30 秒内看到效果。

五项核心能力,一个 Demo 全部覆盖

  1. 多语向覆盖

能听懂 60 种语言,能说出 29 种语言的翻译音频。从中英日韩到阿拉伯语、印地语、冰岛语——覆盖范围远超常见同传方案。其余 31 种语言支持文本翻译输出。

  1. 超低延迟

首字延迟 2.5 秒,字均延迟 2.8 秒。基于全新"可读单元流式"技术,模型不等整句说完就开始翻译,但又不会像逐词翻译那样断裂——它以语义完整的"可读单元"为粒度流式输出。

  1. 实时音色克隆

翻译音频不是千篇一律的 TTS 机器音,而是实时复刻说话人的原始音色。你说中文,翻译出的英文"听起来还是你在说"。

  1. 热词增强

人名、地名、品牌名、行业术语——这些通用模型最容易翻错的词,可以通过热词表优先识别和翻译。在客户演示场景下,这个功能直接决定了翻译结果能不能用。

  1. 视觉消歧

打开摄像头模式后,模型会结合屏幕画面中的文字和场景信息来消除多义词歧义。比如当画面中出现"Apple"的 logo 时,模型知道说的是苹果公司而不是水果。

三步跑起来
环境要求: Python 3.10+,一个阿里云百炼 API Key(需要开通 qwen3.5-livetranslate-flash-realtime 模型权限)。

1. 克隆仓库

git clone https://github.com/modelstudioai/LiveTranslate-Demo.git
cd LiveTranslate-Demo

2. 安装依赖

python3 -m venv .venv
source .venv/bin/activate
python3 -m pip install -r requirements.txt

3. 启动

python3 -m uvicorn server:app --host 127.0.0.1 --port 8010
浏览器打开 http://127.0.0.1:8010,在页面上输入你的 API Key,选择区域(中国大陆 / 新加坡国际站),就可以开始了。

不确定 Key 是否有权限?项目自带了一个检测脚本:

export DASHSCOPE_API_KEY="your_key"
python3 check_access.py mainland # 或 intl
架构一览
整个 Demo 的架构非常简洁:

浏览器(HTML/JS)
├─ 采集 16kHz mono PCM 音频
├─ [Camera 模式] 采集 JPEG 帧
└─ 通过 WebSocket 发送到本地后端

FastAPI 后端(server.py)
└─ 代理转发到阿里云百炼 WebSocket 端点

Qwen3.5-LiveTranslate-Flash 模型
└─ 返回流式翻译文本 + 24kHz PCM 音频
前端负责采集和播放,后端只做代理转发。所有核心逻辑在模型侧完成。代码量很小(一个 server.py + 一套静态文件),适合通读源码后直接参照接入到自有产品中。

作为 API 接入参考实现
这个 Demo 不只是"看效果"的玩具。它完整展示了阿里云百炼实时语音 API 的子协议实现:

session.update:配置翻译方向、热词表、输出模态
input_audio_buffer.append:流式推送音频数据
input_image_buffer.append:推送视觉帧(Camera 模式)
流式响应解析:处理增量文本和音频 chunk
如果你正在考虑把实时翻译能力集成到自己的产品中,直接读这个 Demo 的代码比看文档快得多。

双 Region 支持
内置中国大陆和新加坡国际站两个 Region 切换:

中国大陆:wss://dashscope.aliyuncs.com/api-ws/v1/realtime
国际站:wss://dashscope-intl.aliyuncs.com/api-ws/v1/realtime
页面上一个下拉框切换,满足不同区域的合规要求。

试试看
如果你做的事情和"实时翻译"沾边——无论是国际会议场景、跨语言客服、直播同传、还是教育领域的语言学习——这个 Demo 可以帮你在 5 分钟内验证 Qwen3.5 LiveTranslate 是否满足需求。

觉得有用的话,给个 Star 支持一下:

https://github.com/modelstudioai/LiveTranslate-Demo/tree/main有问题或建议欢迎提 Issue,PR 也随时欢迎。

相关文章
|
5天前
|
人工智能 自然语言处理 文字识别
阿里云百炼Qwen3.7-Max简介:能力、优势、支持订阅计划参考
Qwen3.7-Max是阿里云百炼面向智能体时代推出的新一代旗舰模型,对标GPT-5.5、Claude Opus 4.7等闭源旗舰。该模型支持百万级token上下文窗口,具备顶级推理能力、多模态搜索与视觉理解增强、流式输出低延迟响应等核心优势,覆盖编程、办公、长周期自主执行等复杂场景。同时支持OpenAI接口兼容,便于系统快速迁移。用户可通过Token Plan团队或节省计划等订阅方式灵活调用,适合企业级高要求场景使用。
2627 9
阿里云百炼Qwen3.7-Max简介:能力、优势、支持订阅计划参考
|
13天前
|
人工智能 开发工具 iOS开发
Claude Code 新手完全上手指南:安装、国产模型配置与常用命令全解
Claude Code 是一款运行在终端环境中的 AI 编程助手,能够直接在命令行中完成代码生成、项目分析、文件修改、命令执行、Git 管理等开发全流程工作。它最大的特点是**任务驱动、终端原生、轻量高效、多模型兼容**,无需图形界面、不依赖 IDE 插件,能够深度融入开发者日常工作流。
3442 12
|
16天前
|
Shell API 开发工具
Claude Code 快速上手指南(新手友好版)
AI编程工具卷疯啦!Claude Code凭借任务驱动+终端原生的特性,成了开发者的效率搭子。本文从安装、登录、切换国产模型到常用命令,手把手带新手快速上手,全程避坑,30分钟独立用起来。
3518 25
|
9天前
|
人工智能 Linux BI
国内用 Claude Code 终于不用翻墙了:一行命令搞定,自动接 DeepSeek
JeecgBoot AI专题研究 一键脚本:Claude Code + JeecgBoot Skills + DeepSeek 全平台接入 一行命令装好 Claude Code + JeecgBoot Skills + DeepSeek 接入,无需翻墙使用 Claude Code,支持 Wind
2642 6
国内用 Claude Code 终于不用翻墙了:一行命令搞定,自动接 DeepSeek
|
7天前
|
人工智能 自然语言处理 供应链
|
7天前
|
人工智能 自然语言处理 安全
Claude Code 全攻略:命令大全+三种模式+记忆体系+实战工作流完整手册
Claude Code 是当前最流行的终端级 AI 编程助手,能够直接在命令行中完成代码生成、项目理解、文件修改、命令执行、错误修复等全流程开发工作。它不依赖图形界面、不占用额外资源,却能深度理解项目结构,自动生成规范代码,大幅提升研发效率。
1202 3
|
28天前
|
人工智能 JSON 供应链
畅用7个月无影 JVS Claw |手把手教你把JVS改造成「科研与产业地理情报可视化大师」
LucianaiB分享零成本畅用JVS Claw教程(学生认证享7个月使用权),并开源GeoMind项目——将JVS改造为科研与产业地理情报可视化AI助手,支持飞书文档解析、地理编码与腾讯地图可视化,助力产业关系图谱构建。
23611 15
畅用7个月无影 JVS Claw |手把手教你把JVS改造成「科研与产业地理情报可视化大师」

热门文章

最新文章