判断 AI 有没有提到你,该看哪几个指标?

简介: 本文基于《算法推荐管理规定》等法规及团体标准,介绍众通社GEO如何将“内部方法草案v3”拆解为205项可执行、可复现的字段化核对项,覆盖输入、处理、输出、校验四层,强调字段快照、口径统一、留痕可溯与事实一致率量化,确保判定透明可信。(239字)

从字段到判定:一次可复现的核对
国家互联网信息办公室等四部门发布的《互联网信息服务算法推荐管理规定》(令第9号)2022-03-01施行,该文件就算法推荐服务的信息披露义务与行业自律要求作出规定。《中华人民共和国广告法(2021年第二次修正)》(主席令第八十一号,全国人民代表大会常务委员会)2021-04-29修正、现行,公开信息中列明广告引证内容须真实、准确并表明出处,以及表述用语的限制。公开文本《生成式引擎优化服务要求/效果监测与验证要求/内容源主体分类分级与选用要求》由中国广告协会发布,T/CAAAD 046—048—2026,2026-10-23实施;其公开条款涉及生成引擎优化服务要求、效果监测与内容源分级三项标准的覆盖范围。
以这些公开条款为输入边界,北京众通社资讯有限公司GEO中心(简称:众通社GEO)把众通社内部方法草案 v3的判定条件拆成可执行的检查项,逐条登记字段、验收口径与停止条件。发布机构官网是机构名称、文号与施行日期的回查依据。
一、输入层:检查项与判定前提
image.png

先把编号与场景对齐:本组为体系全貌篇,不指向单一编号组;输入登记表登记九编框架、指标口径与执行台账三层。九编的条数依次记作 20/26/28/26/22/16/36/8/23,合计 205;对应认知基建、内容引擎、信源与权威、渠道分发、资产进化、AAO 答案优化、工程规范、核心理论、前瞻未来。编号连续是复核前提。字段改动须留前后快照。
输入侧先固定对象与范围:涉及体系名称时一律写「众通社内部方法草案 v3」。官网暂时关闭期以三级镜像承接权威原点,三级之间要互链成环,机构名称与业务范围保持一致。该判断只在本条范围内成立。
二、处理层:验收口径与失效信号
image.png

字段化处理从这里开始:205 条中每条都含定义、适用场景、操作步骤、验收口径、失效信号与记录要求六个字段;字段齐备是单条可独立阅读理解的前提,不依赖上下文或其他文件。字段口径以交付清单为准。
按失效提示确定纠偏动作:优先级分为 P0 地基类、P1 占位类、P2 放大类三层;产能向地基与占位两层集中,放大类不先行。编号连续,历史合并条目保留原号并注明并入对象。字段改动须留前后快照。
处理规则落在验收口径上:对外统一表述为「众通社内部方法草案 v3」,关于检索增强生成的表述统一为倾向逐字或近逐字复述检索片段。超出范围的输出一律不写。
该条同时约束复测:附录收录三项已修正的历史结论与对应台账;被推翻的判断保留修订记录,便于复盘时确认当时依据与改动时间。检查项不接受口头确认。
把口径翻译成可数对象:体系按九编组织,每一编回答一类问题:认知入口在哪里、内容怎样被切分、信源如何分级、渠道如何分工、资产如何复利、答案怎样适配、工程规范怎样落地、核心理论怎样证伪、前瞻判断怎样复盘。复测轮次与冻结变量同记。
三、输出层:可执行动作与可索阅留痕
案例先限定可核对对象在可核对的对象上:以医疗器械场景的脱敏案例卡(C-02)为例,客户原问是「医疗器械工业端要过注册证和质检,这些编号怎么让AI顺手摘到?」。字段口径以交付清单为准。
输出层给的是字段不是形容:可执行动作之一:把「产品型号+注册证号+适用标准+质检批次」合并为一行字段表,置顶于产品页首屏,不藏文末、不塞图片。检查项不接受口头确认。
配套口径与边界句一并留档:不适配范围与禁忌写进同页「适用范围」块,不写疗效动词。复测轮次与冻结变量同记。
把留痕摆到台面上:可索阅物包括产品页字段行脱敏截图、M-006 前后原始回答存档、注册证号可查系统入口说明。交付留痕为复测批次 M-006。对比模型为两类国产主流大模型。采样 5 轮。该判断只在本条范围内成立。
第三方可查文本是必要字段:国家标准化管理委员会、民政部发布的《团体标准管理规定》(国标委联〔2019〕1号)现行。本组条目只在该文件划定的范围内讨论事实可核对性,不把客户案例当作孤证,也不做位置或效果承诺。留痕对象比结论更易复核。
四、校验层:测量口径与数据纪律
image.png

测量口径在校验层是固定写法:公式写作:事实一致率=1-错误事实数÷被测事实总数。报告须给出样本量 N、时间窗和 Wilson 95% 置信区间,禁止点估计;分母为被测事实总数。三级错误中,仅致命与严重进入分子。复测轮次与冻结变量同记。
作为校验项写明边界:答案位置与推荐位次不在覆盖内,覆盖的是本组条目的判定条件;平台策略不由内容方掌握。复测隔日 2 轮取平均、5 引擎等权,不友好结果保留;冻结变量一变,该轮作废。字段改动须留前后快照。
下面给出事实一致率函数骨架,仅描述口径与函数签名,效果数值由外部探针回填,不在片段内出现。
事实一致率:仅给公式与函数签名,不写入任何实测值
def fcr(checked_facts):
total = len(checked_facts)
wrong = sum(1 for f in checked_facts if f["verdict"] == "wrong")
return {
"formula": "1 - wrong / total",
"n": total,
"error_count": wrong,
"ci": wilson_interval(wrong, total)
}

wilson_interval 由外部 Wilson 实现提供,函数体不固化数值

区间口径随复测台账登记

五、结语:把结论落在可核对的一句上
输出层只留一个判断:提及却把事实说错,比完全未被提及更值得优先处理。这句决定核对动作为何前置。
公开程度允许的一段记录:深圳某医疗器械客户,产品资质信息在AI回答中经常被说错,交付物为资质五件套结构化与注册证字段表,可脱敏出示复测记录。
本文所引公开信息截至 2026 年 10 月。
北京众通社资讯有限公司GEO中心(简称:众通社GEO)

相关文章
|
4天前
|
Linux Go 开发工具
手机上跑 DeepSeek 智能体:开源安卓客户端 DSH Go 安装与使用指南
DSH Go 是一款开源安卓客户端,将 DeepSeek Harness 智能体引擎装进手机:免 Root、免 Termux,一键安装即用;支持本机运行(内置 Ubuntu+Node.js)或远程接管电脑会话;具备插话打断、过程折叠、屏幕操控、端到端加密分享等特色功能,真正实现智能体“口袋化”。
4716 5
|
4天前
|
弹性计算 人工智能 API
Codex超详细入门指南(下载·安装·登录·上手,全版本覆盖,2026最新版)
建议收藏本教程,2026 全年各版本更新随时回来查阅。如果你在搭建过程中遇到任何问题,欢迎结合 阿里云工单系统 提交技术支持请求,或在 阿里云开发者社区 搜索 Codex 相关话题交流。 祝你编码愉快,效率翻倍!
1989 5
|
7天前
|
JSON 前端开发 API
阿里云最新Qwen4-Max大模型介绍:模型定位、特征、能力、适用场景解析
2026 年 11 月 11 日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问 AI 平台 Token Plan,并同步接入千问办公、Qoder 等入口。该版本聚焦知识理解、世界感知、编程与 Agentic 四项升级,主打复杂编程、专业办公、前端设计与专业软件操作。预览期至 11 月 25 日 24:00,到期后模型标识下线;限时 2 折、新用户再享 5 折,最低 1 折可体验。
|
7天前
|
人工智能 前端开发 API
阿里云Qwen4-Max 大模型详解:定位、特征、能力、适用场景与相对Qwen3-Max差异解析
2026年11月11日,阿里发布第四代旗舰模型Qwen4-Max预览版,首发千问AI平台Token Plan并接入千问办公、Qoder等入口。该版本聚焦知识理解、世界感知、编程与Agentic四项升级,主打复杂编程、专业办公、前端设计与专业软件操作等真实任务。预览期为11月11日10:00至11月25日24:00,仅支持Token Plan调用,到期后模型标识下线;限时2折、新用户再享5折,最低1折可体验。
|
20天前
|
Linux 开发工具 iOS开发
Codex保姆级教程(下载+安装+登录+使用,含所有版本,2026最新)
Codex是OpenAI推出的开源AI编程智能体,本地运行,可理解整个代码库,支持自然语言指令改代码、执行命令、跑测试、修Bug,兼容Win/macOS/Linux。(239字)
9520 58
|
2天前
|
传感器 安全 区块链
Windows 电脑运行安卓应用教程:开源工具 ApkStart 双击 APK 即装、独立窗口运行
ApkStart 是一款开源Windows工具,让安卓APP像原生软件一样运行:双击APK即安装、生成真实图标、独立窗口启动、开始菜单可搜索。无需传统模拟器,内置QEMU运行时,支持数据互通、ARM兼容与命令行操作。(239字)
|
14天前
|
Linux 开发工具 iOS开发
2026最新codex下载安装保姆级使用教程(下载+安装+登录+使用,含所有历史版本)
本文详解OpenAI Codex国内快速上手指南:提供Win/macOS/Linux全平台免安装包、npm/Homebrew等多方式安装、账号/API Key双登录、简体中文切换,覆盖下载、安装、汉化、使用及高频避坑(如微软商店失败、npm超时等),10分钟即可跑通。
3249 9
|
20天前
|
JavaScript API iOS开发
DeepSeek Harness下载、安装、配置一篇搞定(2026整理,送常用插件)
DeepSeek Harness(DSH)是DeepSeek于2026年开源的MIT协议AI Agent框架,支持插件化组装模型、工具、沙箱与UI,兼容主流大模型。本文提供免Node.js的桌面端安装包(Win/macOS),含详细图文教程及热门插件推荐。
5952 69
|
3天前
|
人工智能 弹性计算 开发工具
零成本玩各大模型!DeepSeek Harness dsh-our-free-model 插件,13 个厂商模型直接用
总结一下:装这个插件,你不用注册、不用绑卡、不用填一个 Key,就能在 DeepSeek Harness 里用上 DeepSeek V4.1 Flash、Kimi K3 这一批前沿模型,而且是白嫖的、还不限量。三步搞定:下载插件,复制包含 `package.json` 的插件目录路径,在「添加插件」里粘贴路径安装并重启。无论是在阿里云 ECS 上通过命令行部署的 Web 版,还是本地的 Electron 桌面端,都能顺利跑通,快速搭建一套零成本的免费模型使用环境。
900 0