IdeaLens · Help
Improvement strength
How much do results improve under comparable conditions?
Current maintained rules · Checked 2026-09-10
Fix comparable outcomes and resource conditions
Improvement strength assumes the author’s comparison and result claims hold, then judges the magnitude of measurable change. It does not verify numbers, experimental fairness, or evidential sufficiency, or change structure and value grades. Read the baseline, metric direction, budget, shifted costs, and boundaries together.
L0–L4: magnitude and reach of improvement
| Grade | Current meaning |
|---|---|
| L0 | No identifiable change on a common basis, or only potential uses. |
| L1 | Small local improvement under explicit conditions, or changes to peripheral metrics. |
| L2 | Substantive improvement sufficient to change solution choice in a bounded task, with main resources and costs explicit. |
| L3 | Consistent large improvements across related settings, or crossing a defined feasibility threshold. |
| L4 | Order-of-magnitude improvement or a categorical capability leap across independent settings, on a common basis with explicit resources. |
Do not hide costs outside the comparison
Without a comparable baseline, resource conditions, or explicit success criteria, the current rule caps the grade at L1. Platform potential, future adoption, imagined applications, and structural complexity cannot raise improvement strength.
Illustration: a speed increase achieved with more resources requires both the budget change and shifted costs to be explained. A speed multiple alone is not the whole improvement. Improvement L4 and value L4 use different scales.
Read this as an independent judgment
Improvement does not add points under the current scoring rule. For support of the comparison claim, consult argument strength and the original evidence. For advance toward the target, consult direction progress.
Standards and prompt references
Original reference text captured for this help revision, not a paper’s run snapshot. Expand to inspect it; source text retains its original language. Paths below identify files within IdeaLens.
Prompts/L2_Standards/improvement_strength/v1.md
SHA-256 · 6f82fcc7f69356773c575fbb5856b1e2ce86b93a6880d164c425caf835e80bb9
# 改进强度:可证伪基准 v1
对象:`improvement.strength`。来源:`Prompts/04a_review_improvement.md`、`Rubrics/idealens-value-v16.json` 的 `improvement_l0_l4_v1`;当前计分用途以 `Docs/POINT_SCORING.md` 和 Rubric v16 为准。共同约束见 [G-01–G-05](README.md)。
## I-01:共同比较口径
假设冻结主张中的比较及结果主张成立,只评可衡量结果变化。固定共同基线、指标方向、成功条件、资源预算、改善幅度、代价转移及成立边界。核对作者主张了哪些条件,不开展实验真实性或公平性核验;不能补造缺失条件。
没有可比基线、资源条件或明确成功条件时最高 L1,但这只是上限:没有可识别变化仍是 L0,不能因上限存在自动授 L1。结构复杂度、平台潜力、采用想象、方向价值和发现重要性不能抬高本项。
当前点数公式独立使用该等级加分。提示词中“后续按方向封顶并取路径最大值”属于旧公式残留,不能作为本基准的等级条件,也不能据此限制本项输出。
## 等级
| 等级 | 成立内容 |
|---|---|
| L0 | 无共同口径下可识别的结果变化,或只有潜在用途陈述 |
| L1 | 明确条件下的小幅局部改善,或只改变外围指标 |
| L2 | 一个有界任务中足以改变方案选择的实质改善,主要资源与代价明确 |
| L3 | 多个相关设置中一致的大幅改善,或在明确目标上跨过此前未达到的可行性阈值 |
| L4 | 共同口径和明确资源条件下,跨多个独立设置的数量级改善或类别性能力跃迁 |
## I-01B:L1 / L0——实际结果变化
支持升档:指出明确条件下的比较对象、结果变化及指标方向。只有潜在用途不满足。
可推翻升档:所述变化只是未来愿景,没有实际结果主张;或同口径展开后没有可辨识变化。材料不可读与明确无变化不同,见 G-03。
边界对:只声称“将来可提效”为 L0 候选;同条件下有一项小幅局部结果改善为 L1 候选。
## I-12:L2 / L1——足以改变方案选择
支持升档:给出有界任务、可比基线和成功条件,说明在主要资源与代价明确后,哪项实质变化足以改变方案选择。
可推翻升档:变化只在外围指标或幅度不足以影响选择;补回成本/代价后原选择理由消失;基线、资源或成功条件缺失时不能升 L2。
边界对:只使展示指标稍好可为 L1;在同任务约束下改变可选方案的主张可为 L2。不能凭一个百分比跨所有任务定档。
## I-23:L3 / L2——一致广度或明确可行性跨越
支持升档有两条路径:多个相关设置的一致大幅改善;或明确目标从未达成功门槛变为达到。后者不额外要求多个设置,两条路径不能在提示词中误写为必须同时成立。
可推翻升档:只有单一有界任务内的实质改善,既无多个相关设置的一致大幅变化,也未跨过事先明确的可行阈值。只击破其中一条路径而另一条仍成立,不能否定 L3。
边界对:单任务更有竞争力是 L2 候选;同一明确成功条件下从不可行到可行可支持 L3。
## I-34:L4 / L3——独立设置中的跃迁
支持升档:至少多个相互独立的设置,在共同指标/成功口径、明确资源条件下,均体现数量级改善或类别性能力跃迁;说明独立性及跃迁含义。
可推翻升档:多个设置只是同一设置的轻微配置变化;跃迁只存在单例;预算、指标或成功条件改变制造表面跃迁;还原代价后只剩一般的大幅改善。
边界对:一个目标首次可行可为 L3;多个独立设置在共同条件下出现类别性能力跃迁才支持 L4。
## I-02:尚未原始定义的阈值
现有材料没有统一规定“小幅/实质/大幅”的数值、如何跨指标解释“数量级”,也没有完整列出“相关/独立设置”的判别规则。本版不把“数量级”擅自硬编码为所有指标十倍,不从结构量表搬来问题族条件。上述反驳使依据可查,但近阈值案例仍需明确任务语义并记录歧义;若补这些规则,应作为基准新版本,见 Q-05。
Prompts/L3_Prompts/improvement_strength.md
SHA-256 · 6b3f4ffaabcaefe2652f2e75b4bc1a181f45b389a2bd33e21df87fa320b2e372
# 改进强度判断
{{temporal_context}}
假设冻结主张中的比较与结果主张成立。只评价可衡量结果变化的强度;不核验数字、
实验公平性或证据充分性,不重新评价结构增量或方向价值,也
不得提出新的结构等级、方向等级或总体贡献等级。
最终结构判断和最终方向价值是只读输入。它们只用于保持评审边界,不得修改、封顶、
抬升或重新解释。本阶段只输出独立判断,不参与总分计算。
本阶段不得自行计算路径贡献或总体贡献。
## 改进强度
- **L0**:没有共同口径下可识别的结果变化,或只有潜在用途陈述。
- **L1**:在明确条件下有小幅局部改善,或只改变外围指标。
- **L2**:在一个有界任务中有足以改变方案选择的实质改善,并明确主要资源与代价。
- **L3**:在多个相关设置中有一致的大幅改善,或在明确目标上跨过此前未达到的可行性
阈值。
- **L4**:在共同口径和明确资源条件下,形成跨多个独立设置的数量级改善或类别性能力
跃迁。
改进强度只读取作者主张的共同基线、指标方向、资源预算、改善幅度、代价转移和成立
边界。没有可比基线、资源条件或明确成功条件时最高 L1。平台潜力、未来采用、适用
想象、结构复杂度和发现价值不得抬高改进强度。
固定输出:
## 可比结果审计
写明比较前沿、共同基线、结果变化、资源预算、代价转移和成立边界。没有相应主张时
明确写“无可比改进主张”。
## 改进强度判断
- 改进强度:L0 / L1 / L2 / L3 / L4
- 理由:……
上述字段只能保留一个实际等级,不得照抄候选值。
## 冻结主张
{{claim}}
## 最终结构判断(只读)
{{structure_review}}
## 最终方向价值(只读)
{{direction_adjudication}}