跳转至

Read this page in English

按需决策:选择性推理、迁移与持续反馈

结构化决策 / 16 个问题 · 4 篇论文

先看问题,想一想,再展开答案。这里持续积累本子主题各篇论文的问答,一篇论文也可以追加多个问题。

阅读本主题精读卡片:多篇论文对比、分析与问答

学习层次

16 个问题 · 4 篇论文

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

基础理解

Jev-DLC持续适配时需要保存整段交互历史吗?

Jev-DLC: Decision-Level Continual Learning from Typed Feedback

问答新增:2026-10-27 · The Hong Kong University of Science and Technology (Guangzhou)

展开答案与例子

答案:方法在冻结评分器上保留两个紧凑状态:保守通道的语义计数与方向,以及响应通道的当前修正方向。历史反馈被压入状态,不是把所有旧对话不断塞回上下文。

教学例子:例如用户反复纠正同类路由,系统更新计数和方向,而不无限拼接所有旧工单。

依据:背景与主要改动、双通道、PA-I与可靠性;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

核心机制

Jev-DLC为什么用更新前的通道预测评估可靠性,并只让反馈影响之后请求?

Jev-DLC: Decision-Level Continual Learning from Typed Feedback

问答新增:2026-10-27 · The Hong Kong University of Science and Technology (Guangzhou)

展开答案与例子

答案:可靠性应衡量通道在看见反馈前的决策,否则修正后再评分会把学习信息当成预测能力。保守通道积累重复语义经验,响应通道跟踪当前修正,二者通过可靠性混合。反馈只能对应已提交决策,不能伪造重放;冻结评分器上的持续状态也不能读取当前金标再预测。

教学例子:例如用户撤销一次工具选择后,系统才能更新两个通道并处理下一次请求;不能先用这次正确工具修正状态,再回填为本次成功预测。

依据:背景与主要改动、双通道、PA-I与可靠性;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

方法对比

Jev-DLC保守通道与响应通道为什么要分开?

Jev-DLC: Decision-Level Continual Learning from Typed Feedback

问答新增:2026-10-27 · The Hong Kong University of Science and Technology (Guangzhou)

展开答案与例子

答案:前者积累重复行为形成稳定先验,后者较快响应当前修正;可靠性混合允许二者在稳定与变化环境中有不同影响。单一状态难以同时表达长期习惯和近期转向。

教学例子:例如用户长期偏好A但近期临时改用B,两通道可分别保留长期与即时信号。

依据:背景与主要改动、双通道、PA-I与可靠性;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

实现细节

Jev-DLC为何拒绝伪造、重放或过期Decision的反馈?

Jev-DLC: Decision-Level Continual Learning from Typed Feedback

问答新增:2026-10-27 · The Hong Kong University of Science and Technology (Guangzhou)

展开答案与例子

答案:反馈必须针对当前实例已提交的选择,否则可把任意目标注入状态或重复累积同一经验。更新完成后释放当前公开缓存,硬安全掩码不能被适配状态覆盖。

教学例子:例如同一次撤回事件发送两遍,不能让系统把它当两次独立用户纠正。

依据:背景与主要改动、双通道、PA-I与可靠性;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

基础理解

Selective Reasoning为什么不让所有题都生成同样长的推理?

Selective Reasoning for Typed Decision Models: When to Start, Read, and Stop

问答新增:2026-10-27 · University of Electronic Science and Technology of China

展开答案与例子

答案:有些有限候选任务直接读出已足够,另一些需要额外步骤;按预期收益启动推理,并在中间读取答案,可把计算分配给仍需要它的题,而非固定长度。

教学例子:例如简单意图选择直接返回,多步算术才进入推理,并在足够确定时结束。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

核心机制

Selective Reasoning为什么区分启动推理、触发读取与接受答案,而不能只写一个置信阈值?

Selective Reasoning for Typed Decision Models: When to Start, Read, and Stop

问答新增:2026-10-27 · University of Electronic Science and Technology of China

展开答案与例子

答案:启动门判断推理是否值得,触发器决定何时从自然生成前缀发起答案读取,读取后的归一化熵才决定是否接受并取消后续生成。三者作用在不同状态。预算耗尽的强制返回必须单独标记,不能算阈值成功早停;控制器拟合也不能使用评测金标。

教学例子:例如模型值得推理但暂未到可读状态时继续生成;读取后仍不确定就再推理,直到预算结束也不确定时应标强制返回而非自信停止。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

方法对比

按自然生成状态读取与每隔固定词元盲读有何差别?

Selective Reasoning for Typed Decision Models: When to Start, Read, and Stop

问答新增:2026-10-27 · University of Electronic Science and Technology of China

展开答案与例子

答案:自然状态触发器尝试在更适合显式答案读取的位置发起查询,间隔控制只限制频率。读取是否可靠还由共享reader与熵判定决定,触发不等于已经有正确答案。

教学例子:例如刚完成一个推导小结时可能比算式写到一半更适合读取,但仍需检查候选分布。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

实现细节

候选数变化时为什么用H除以logK来算certainty?

Selective Reasoning for Typed Decision Models: When to Start, Read, and Stop

问答新增:2026-10-27 · University of Electronic Science and Technology of China

展开答案与例子

答案:不同候选数的最大熵不同,归一化后确定度阈值才有可比意义。仍需区分取消生成与预算耗尽,门控的标准化统计及权重在评测前冻结,不能用测试反馈重拟合。

教学例子:例如四选一与十选一原始熵量级不同,直接使用相同原始熵阈值会改变停止标准。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

基础理解

区域语言研究为什么同时报告准确率、校准与风险覆盖?

Does System One Transfer? Calibrated Typed-Decision Models, Label Budgets, and Translation for Indonesian Regional Languages

问答新增:2026-10-27 · Universitas Budi Luhur

展开答案与例子

答案:准确率描述整体命中,校准描述概率与频率是否一致,风险覆盖描述按置信筛选是否能留下更可靠样本。三个维度不同,共同决定是否适合低成本模型与强后端级联。

教学例子:例如总体准确率相同的两个模型,低置信样本能否集中错误可能差很多。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

核心机制

校准良好的模型为什么仍可能不适合按低置信度路由错误样本?

Does System One Transfer? Calibrated Typed-Decision Models, Label Budgets, and Translation for Indonesian Regional Languages

问答新增:2026-10-27 · Universitas Budi Luhur

展开答案与例子

答案:校准检验概率与总体正确频率是否匹配,路由则要求错误比正确样本更常出现在低置信区,两种性质并不等价。级联比例应在验证宏F1上选定并冻结,再用测试集评估;平行语言共享句子身份,统计比较需按句子聚类,不能当作独立重复样本。

教学例子:例如两组样本的平均置信与准确率吻合,但错题分散在各个置信区;此时总体校准不错,挑最低置信部分交给强模型却未必省成本。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

方法对比

区域语言级联把低置信样本交给后端,与先翻译所有样本再判断有什么不同?

Does System One Transfer? Calibrated Typed-Decision Models, Label Budgets, and Translation for Indonesian Regional Languages

问答新增:2026-10-27 · Universitas Budi Luhur

展开答案与例子

答案:级联按低成本模型的置信度选择一部分样本追加处理,翻译中转则先改变输入语言条件。二者改变的轴分别是计算分配和语言表示,不能把翻译收益直接解释成路由器找错能力。路由比例还必须在验证集选定后冻结。

教学例子:只将难例交强后端,未必翻译文本;把全部区域语言句子翻成印尼语,则对易例也改变了输入。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

实现细节

级联比例与本地温度分别允许用什么数据选择?

Does System One Transfer? Calibrated Typed-Decision Models, Label Budgets, and Translation for Indonesian Regional Languages

问答新增:2026-10-27 · Universitas Budi Luhur

展开答案与例子

答案:都只能在验证预测上选择,比例按规定网格与宏F1规则,温度按验证NLL;冻结后评测测试。温度校准是本地扩展,不能混成作者原始训练步骤。

教学例子:例如测试发现多转交一些更好,也不能回头改路由比例后继续报同一独立测试分。

依据:背景与主要改动、核心公式;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

基础理解

Jev能力论文为何属于评测而非新架构?

Specialized Decision Models vs. General-Purpose LLMs: Benchmarking Jev Across Knowledge, Reasoning, and Multilingual Tasks

问答新增:2026-10-27 · Dalian Maritime University

展开答案与例子

答案:它在有限候选接口下测知识、推理和多语言表现,贡献在协议与能力边界证据,没有提出新的训练目标。实现评测器不表示已经实现或提升被测模型。

教学例子:例如把公开题规范成四选一并统计表现,是测量工具,而不是新的推理模块。

依据:背景与主要改动、数据与评测契约;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

核心机制

Jev能力评测为什么不能把供应商分数与本地实测直接拼成统一排名?

Specialized Decision Models vs. General-Purpose LLMs: Benchmarking Jev Across Knowledge, Reasoning, and Multilingual Tasks

问答新增:2026-10-27 · Dalian Maritime University

展开答案与例子

答案:提示、后端和数据协议不一致会让数值差异混入非能力因素。有限候选评测应固定公开问题、候选与一次决策协议,答案只在评分端汇合,同时记录任务语言和缺失覆盖。该论文是能力审计而非新训练算法,某类任务表现也不能外推为所有推理场景。

教学例子:例如供应商用另一版提示得到数学分数,本地用固定候选接口得到知识分数;两者可以分别记录,不能据不同协议的数字判定模型整体胜负。

依据:背景与主要改动、数据与评测契约;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

方法对比

知识题强与数学题弱能直接推出模型完全没有推理能力吗?

Specialized Decision Models vs. General-Purpose LLMs: Benchmarking Jev Across Knowledge, Reasoning, and Multilingual Tasks

问答新增:2026-10-27 · Dalian Maritime University

展开答案与例子

答案:不能。观察只约束所测任务、提示与候选接口,还可能受语言和数据覆盖影响。应分别报告任务结果与缺失范围,不把一个维度的差异扩成所有场景的断言。

教学例子:例如某种算术题失败,尚不足以判断工具规划或其他数学形式也全部失败。

依据:背景与主要改动、数据与评测契约;例子用于解释机制。

结构化决策 / 按需决策:选择性推理、迁移与持续反馈

实现细节

Jev能力评测的预测输入为什么只提交问题与候选一次?

Specialized Decision Models vs. General-Purpose LLMs: Benchmarking Jev Across Knowledge, Reasoning, and Multilingual Tasks

问答新增:2026-10-27 · Dalian Maritime University

展开答案与例子

答案:固定一次公开决策可避免用答案或重试策略额外帮助模型。金标在预测后由评分端读取,不同供应商协议的数字分别记录;漏测项也应明示,而非从总体分母悄悄删除。

教学例子:例如题库记录含答案字段,构造预测请求时必须先剔除,再由另一评分流程核对。

依据:背景与主要改动、数据与评测契约;例子用于解释机制。

主题导读与阅读路线

先想一个问题

哪些请求值得追加推理,哪些反馈应该影响下一次选择?

记住这一点

Selective Reasoning 把是否启动推理、何时读取答案、何时接受并停止分成三个控制动作,以共享 reader 读取空前缀和推理中途的候选分布。Jev-DLC 在冻结 scorer 之上保留有界的动作记忆与修正方向,把 accept/revoke 反馈作用于之后的请求。迁移评测还要检验换语言和标签预算后是否仍成立。

一个例子

用户把上次的工具 A 改成 B,可作为后续相似请求的反馈,却不能在收到修正后回头把上次报成成功。另一个难题若需要推理,可中途读取候选分布并按预先确定的停止规则结束;“预算耗尽”应另记,不能冒充有把握的早停。

什么时候要小心

低熵只表示模型集中,并不等于答案正确,门控与阈值必须在评测前冻结。反馈序列要保持时间顺序;迁移和持续适配不能用未来标签。当前本地包含原测量统计复算或随机输入上的接口诊断,高成本完整模型链路未复现。

先读这几篇

先读 Selective Reasoning 的启动/读取/停止分工,理解单个请求内的预算;再读 Jev-DLC 的有界反馈状态与时间协议,理解请求之间的适配。然后看公共能力与跨语言迁移的边界。

  1. Selective Reasoning for Typed Decision Models: When to Start, Read, and Stop · 原论文
  2. Jev-DLC: Decision-Level Continual Learning from Typed Feedback · 原论文

自测一下

某题得到正确答案反馈后立刻更新并重答,能算持续学习带来的线上成功吗?

展开参考答案

不能。它已观察当前目标,不再是该题独立预测。应先记录本次原始选择和反馈,再只用更新后的状态评价之后尚未揭晓的请求,并与无反馈或固定策略作同序列比较。

跨主题搜索全部问答 · 最近新增