Qwen4-Max 视频输入接入实测:7 秒出 8 行验收清单,帧率和输出预算是两个坑

简介: 本文介绍如何用通义千问Qwen4-Max模型,将巡检视频自动转为结构化验收清单。支持base64内联或命令行传视频,7秒输出8行精准结果(位置/结论/严重度),准确率100%;强调输出预算需设为清单长度×3,避免空响应;明确模型不编造、不越界,适用于门店验房、设备巡检等轻量闭环场景。(239字)

一段视频换一份清单,这条链路今天能用

验收环节最耗人的部分集中在写清单上。现场走一圈拍回几十段画面,回来还要逐条敲位置、问题、级别,再翻上次的整改记录核对哪些没落实。千问4-Max 的目录里写明输入支持文本、图片和视频,视频这一路正好把那段人工抄写接过来。

我做的验证很朴素:用画图脚本生成 8 页现场画面,每页左上角是位置、中间是情况文字、底部一行判定参考,再用 ffmpeg 拼成 16 秒、每秒 2 帧的小视频。素材虚构,判定是实的,每页该出什么结论我提前写好对照表,模型回的每行都对着核。

结果是 7 秒回 8 行,位置、结论、严重度与对照表逐页一致,一处不差。服务端记到输入 9,274 个 token、输出 239 个,思考占 151 个。8 页覆盖问题与正常两类结论、高中低三级严重度,召回和分级都没有偏差。

视频怎么递:内联 base64 与命令行 --video

接入方第一个要定的是投递方式。这次两条路都通,而且回的是同一份答案。

接口面走 compatible-mode 的消息体,视频读成 base64 内联进 video_url 字段。好处是素材不必先挂到可公开访问的地址再等对面来拉,请求自包含;要注意的是请求体跟着素材体积涨,我那版 16 秒文件本身 64,077 字节。

{
   
  "model": "qwen4-max",
  "messages": [
    {
   
      "role": "user",
      "content": [
        {
   "type": "video_url", "video_url": {
   "url": "data:video/mp4;base64,XXXX..."}},
        {
   "type": "text", "text": "逐页输出:页码|位置|结论|严重度"}
      ]
    }
  ]
}

命令行面是 bl vision describe 加 --video 直接指本地文件,--model 指到 qwen4-max 也收。同一段视频 9 秒回 8 行,与接口面那一次逐行相同。

bl vision describe --video ./patrol.mp4 --model qwen4-max --prompt "逐页输出:页码|位置|结论|严重度"

两条通道给出同一份清单,这件事比单次准确率更有用:抽样和解读在这一档素材上是稳的,按自己的工程习惯任选一条即可。过滤条件也能直接写进提示词,追加一句只列严重度为高的页,5.8 秒回来正好三行,第 1、4、7 页,没有夹带中或低,也没有漏掉那处矛盾页,输入 9,283、输出 112、思考 80。

输出预算给小,正文直接归零

同一次交叉核对在 1,200 与 8,000 两档输出预算下的结果:前者正文为零

第二件事在交叉核对那一轮。我把一份上次的整改记录和视频一起递进去,记录里四条全写着已整改、复查通过:通道已清理、配电箱已加锁、指示灯已修复、标签已补贴,要求逐条核对,输出记录项、视频现状、判定。

第一次跑,26.4 秒,回来是空的,一个字都没有。输入 9,339 个 token,输出 1,200 个,思考正好 1,200 个。原因不复杂:这个模型默认开着深度思考,思考和正文共用一份输出预算,上限设成 1,200 时思考吃到顶,正文分不到一个 token。

把上限抬到 8,000 重跑,11 秒回来四条核对结论,输出 664 个、思考 542 个。四条全部判为记录与画面矛盾,其中指示灯那条还自己补了一句:第 7 页画面注明记录写已修复。它没有替任何一方圆场,记录和画面打架,它就把这件事写出来。

要落的规矩是:输出预算按你要的清单长度乘三去设。思考会先吃掉一大半,预算给小了不是清单变短,是清单消失。失败形态也麻烦,26 秒后返回一个空正文,不报错、不提示截断,排查时第一反应往往是以为素材没读进去。

一次能递多长的视频

16 秒素材记到 9,274 个输入 token,按这个密度外推,一分钟大约 34,800 个,模型单次上下文上限是一百万。也就是说别的参数不动,二十七八分钟就是这条链路的天花板,再长不是慢的问题,是递不进去的问题。

真要把两小时的监控录像过一遍,拆法分三层:先按时间切段,每段独立跑一次清单;再按事件抽关键帧,画面没变化的那四十分钟直接跳过;最后把各段清单合并去重。模型只干后两层的解读,第一层切分是你自己的脚本活。

还有一句要写进验收口径:清单每一行对应的是模型抽到的那些帧,不是每一帧,没抽到的地方就是没看见。出现漏检先查抽样覆盖,再怀疑模型能力。

两种情况它会拒绝给结论

素材本身不可读的时候。最早那版素材忘了给中文字体,页面上的字全是乱码色块,输入只记到 948 个 token、输出 505 个。模型没有硬编一份巡检结论,它逐页写画面为纯色块、底部文字乱码、无法巡检,并说明如需真实结论请重新上传。

视频里没有的依据。我在清单要求后追加一句:冷链柜内部温度是否超标。第 8 页画面只有柜门和外壁,没有任何温度信息。它在 8 行清单后单独回了一句视频未覆盖,整轮 8.3 秒,输入 9,298、输出 256、思考 157,清单部分仍 8 页全对。

这两条对接入方的价值是上层好写分支:异常输入下链路不会吐出一份看起来很正常的假结论,直接按这两类回复处理即可,不必再搭一套结果合理性判断。

上手三步与边界

第一步装命令行工具,入口在命令行安装页。第二步在控制台密钥页取 API Key。第三步按上面两条通道之一把视频递进去,模型 ID 写 qwen4-max,提示词里把输出格式一次说清:页码、位置、结论、严重度,只写画面里看得到的。

素材侧三条建议:关键画面在时间轴上多停留,别指望提高帧率补细节;中文字体缺失这类渲染问题在生成素材时就查掉,模型对不可读素材只会告诉你它不可读;输出预算按清单长度乘三设,长输出任务尤其要给足。

边界也要说清楚。它不是取证工具,清单每一行都来自模型对抽帧画面的理解,要逐帧可回溯的证据链,得用带时间戳归档的巡检系统。闭环最后一环仍然是人的:模型出清单,人把清单抄进整改记录,下次巡检时把上次的记录和这段视频一起递进去。适合的是门店自查、交房验房、活动场地检查、设备外观巡检这类走一圈回来要交纸的场景。

相关文章
|
3天前
|
弹性计算 人工智能 API
Codex超详细入门指南(下载·安装·登录·上手,全版本覆盖,2026最新版)
建议收藏本教程,2026 全年各版本更新随时回来查阅。如果你在搭建过程中遇到任何问题,欢迎结合 阿里云工单系统 提交技术支持请求,或在 阿里云开发者社区 搜索 Codex 相关话题交流。 祝你编码愉快,效率翻倍!
1604 1
|
6天前
|
JSON 前端开发 API
阿里云最新Qwen4-Max大模型介绍:模型定位、特征、能力、适用场景解析
2026 年 11 月 11 日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问 AI 平台 Token Plan,并同步接入千问办公、Qoder 等入口。该版本聚焦知识理解、世界感知、编程与 Agentic 四项升级,主打复杂编程、专业办公、前端设计与专业软件操作。预览期至 11 月 25 日 24:00,到期后模型标识下线;限时 2 折、新用户再享 5 折,最低 1 折可体验。
|
6天前
|
人工智能 前端开发 API
阿里云Qwen4-Max 大模型详解:定位、特征、能力、适用场景与相对Qwen3-Max差异解析
2026年11月11日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问AI平台Token Plan并接入千问办公、Qoder等入口。该版本聚焦知识理解、世界感知、编程与Agentic四项升级,主打复杂编程、专业办公、前端设计与专业软件操作等真实任务。预览期为11月11日10:00至11月25日24:00,仅支持Token Plan调用,到期后模型标识下线;限时2折、新用户再享5折,最低1折可体验。
|
3天前
|
Linux Go 开发工具
手机上跑 DeepSeek 智能体:开源安卓客户端 DSH Go 安装与使用指南
DSH Go 是一款开源安卓客户端,将 DeepSeek Harness 智能体引擎装进手机:免 Root、免 Termux,一键安装即用;支持本机运行(内置 Ubuntu+Node.js)或远程接管电脑会话;具备插话打断、过程折叠、屏幕操控、端到端加密分享等特色功能,真正实现智能体“口袋化”。
2717 0
|
18天前
|
Linux 开发工具 iOS开发
Codex保姆级教程(下载+安装+登录+使用,含所有版本,2026最新)
Codex是OpenAI推出的开源AI编程智能体,本地运行,可理解整个代码库,支持自然语言指令改代码、执行命令、跑测试、修Bug,兼容Win/macOS/Linux。(239字)
8320 58
|
13天前
|
Linux 开发工具 iOS开发
2026最新codex下载安装保姆级使用教程(下载+安装+登录+使用,含所有历史版本)
本文详解OpenAI Codex国内快速上手指南:提供Win/macOS/Linux全平台免安装包、npm/Homebrew等多方式安装、账号/API Key双登录、简体中文切换,覆盖下载、安装、汉化、使用及高频避坑(如微软商店失败、npm超时等),10分钟即可跑通。
2997 9
|
19天前
|
JavaScript API iOS开发
DeepSeek Harness下载、安装、配置一篇搞定(2026整理,送常用插件)
DeepSeek Harness(DSH)是DeepSeek于2026年开源的MIT协议AI Agent框架,支持插件化组装模型、工具、沙箱与UI,兼容主流大模型。本文提供免Node.js的桌面端安装包(Win/macOS),含详细图文教程及热门插件推荐。
5764 69
|
7天前
|
云安全 人工智能 安全
|
11天前
|
人工智能 安全 API
DeepSeek Harness下载、安装、配置一篇搞定(2026整理,送常用插件)
DeepSeek Harness(dsh)是DeepSeek AI于2026年开源的轻量级Agent运行框架,基于Cordis内核,践行“一切皆插件”理念。支持Web/桌面双端,开箱即用;内置多模型接入、丰富插件生态(超3.5万),适配编程、办公、创作等场景。(239字)
1901 1

热门文章

最新文章