Share of Model 试点月测
1某品牌监测一个月度采样批次:共 100 条购买意图 prompt,其中 40 条回答里点名了该品牌;全部回答共点名 80 条品牌提及。同一批观测、同一品牌,在《SoM 试点》定义的三种分母构造下,会分别得出几个不同数字。以下哪组「构造 → 数值」对应关系正确
- A. 存在率 17、品类提及份额 40、位次加权显著度 50
- B. 存在率 40、品类提及份额 50、位次加权显著度 17
- C. 存在率 50、品类提及份额 40、位次加权显著度 17
- D. 存在率 40、品类提及份额 17、位次加权显著度 50
查看答案与解析
答案:B
2《SoM 试点》对合规红线的判决是「消费者面 vs API 面」的分裂——一面明禁自动化,一面分层放行。在 OpenAI / Anthropic / Google Gemini / Perplexity 四个引擎中,哪个是唯一被官方条款明确视为 PERMITTED-API(网站 ToS 明确排除 API)的
- A. OpenAI
- B. Anthropic
- C. Google Gemini
- D. Perplexity
查看答案与解析
答案:D
3Hermes 补算的 Wilson 95% 区间在 p=50% 时,随采样数 n 变化。以下哪个是对应 n=30 圈约 ±16.8 个百分点的正确解读与后续动作
- A. n=30 已足以分辨 10 个百分点级的变化,「3 次」就是合格的统计下限
- B. n=30 只能分辨量级级变化;要做月度环比(波动带本就有 40-59%),须提到 ≥100,否则改回「3 次」
- C. n=30 只能分辨量级级变化;要做月度环比(波动带本就有 40-59%),须提到 ≥100
- D. n=30 与 n=100 精度完全相同,「3 次」即可,无需收敛预实验
查看答案与解析
答案:C
4三种分母同批数据会出 17 / 40 / 50 三个数,定义同一问题答案不同。为什么《SoM 试点》裁定选存在率 (a) 作 headline KPI,而不是品类提及份额 (b) 或位次加权显著度 (c)
查看答案与解析
答案:—
(任意 2-3 点即满分): ① 控制权:分母是我们自己冻结的 prompt 库,引擎改版也缩不掉、改权重不了 ② 最少可博弈面:唯一可动的是分子,且被引擎非确定性限住 ③ 可外部对标:(a) 是 Alhena / Widesight 的共同约定口径 ④ 干净切开「提及≠推荐」:(a) 只报「出不出现」,位次/语境作为永远并列上报的次级维度 (注意区分:b 的分母归模型——哪些回答没点名任何品牌由模型决定;c 的位次也由模型给)
5回写条目(GEO:§3.2 / 附录 A.6)把原来写死的「N=8-12 次/词」和「3 次即第一份真读数」都改掉了。请说明:为什么「N=8-12」和「3 次」都不能当作统计功效下限,正确姿势是什么
查看答案与解析
答案:—
(任意 2-3 点即满分): 「N=8-12」是自一致性研究针对答题准确性的样本量,不是提及率稳定性的 N;「3 次」是节奏主张,不是统计下限(§4.1 明确拒绝) 理论依据:Tier-3 全量普查审计(arXiv:2608.07069)发现跨期相似度 ≈ 同日重跑 → 不存在干净的「收敛 N」,churn 主要来自采样随机性 正确姿势:先做收敛预实验,落到每 prompt ≥30 次并报 Wilson 区间(要月度环比则 ≥100),不拍脑袋选 N
6场景:一个只有 20 页内容、月自然流量约 3,000 的垂直品类站,想在自家站上先上 SoM 监测,正在纠结「要不要买月费工具」「分子分母怎么定」。请用今晚的《SoM 试点》决策给出具体行动方案(至少 3 点,说清依据)。
查看答案与解析
答案:—
(任意 3-4 点即满分): 先别买工具,先做 $0 季度人工审计:本站月自然流量 3,000 < kill criteria ④ 的「约 5,000」,落到变现卡片的「本站量级先做 $0 人工审计」档,月费工具($29-$499)为非必要支出 分母定「存在率 (a)」:含品牌提及的回答数 ÷ 意图 prompt 总数 ×100,分母握在自己手里(不是品类提及份额、不是位次加权) 先收敛预实验定 N,别直接选 N:落 ≥30 次/prompt 并报 Wilson 区间;若要做月度环比(波动带 40-59%)需 ≥100 采样最小集 + 走 API 面:3-5 个核心词但四层都覆盖(购买/信息/品牌/竞品),冻结 prompt 库记 hash;必须走 API 面,禁自动化消费者界面,逐行记 engine / model_version / surface / login 首跑只算 baseline,环比先比波动带:不得从第 1 次判输赢,小于波动带(40-59%)的变化不可行动;同时人工标注「语境极性 + 竞品共现」两列(零边际成本) -- 分数:固定 3×10 + 2×20 + 1×30 = 100 分 通过线:≥ 80 分