Fisher宽度:统计流形上的一种几何复杂度度量
Fisher宽度是统计流形的高斯宽度类比,保留关键性质并捕捉各向异性,用于泛化界。
人工神经网络中冲击波理论与对称约化随机梯度下降之间的联系
揭示冲击波与对称约化SGD的数学联系,导出商流形粘性HJB和Burgers方程,适用于多种网络。
SAGE:保留感知的最终遗忘向量事后净化
SAGE通过事后修正最终遗忘向量,利用保留激活几何抑制保留方向,缓解遗忘与保留权衡,不依赖具体遗忘方法。
打破求解器瓶颈:在可学习前沿训练任务生成器
PROPEL框架用探针预测求解率,高效生成可学习前沿任务,显著提升数学、代码、软件工程任务通过率。
高斯混合注意力:通过概率潜在路由的线性时间序列混合
提出高斯混合注意力(GMA),以K个高斯组件路由替代点积,实现线性复杂度O(NK),长上下文分类性能竞争且可解释。
CODEBLOCK:学习以正确的粒度监督代码
CodeBlock通过结构感知的稀疏监督选择代码块,仅用1.9%的响应token即超越全token微调。
归因引导与覆盖率最大化的结构化MoE压缩剪枝
提出归因引导与覆盖率最大化的结构化剪枝,在50%剪枝+4-bit量化下保持精度,内存减少5.27倍。
DRIFT:通过在线策略数据归因优化指令数据
DRIFT使用在线策略影响函数归因数据,克服标准方法偏差,提升大模型微调能力上限。
TRIDENT:打破混合-安全-物理耦合以实现可证明安全的多智能体强化学习
TRIDENT框架通过三种协同设计消除偏差,实现安全多智能体强化学习,收敛到约束纳什均衡并大幅降低训练违规。
Artemis:解剖学分辨的干预方法用于消除多模态神经影像中的混杂因素
提出Artemis区域级因果框架,通过学习区域特定混杂表示进行干预,消除年龄性别等混杂因素,提升GNN性能。
基于K跳高斯扩散的增强图神经网络
提出K跳高斯扩散核,平衡局部与全局传播,在噪声复杂图上显著优于传统GNN。
土壤湿度回归与分类的数据驱动模型综述
综述土壤湿度数据驱动模型,涵盖五大类AI方法,利用多源数据进行回归与分类。
时间序列基础模型基准是否隐藏了状态依赖的失效?来自交通速度预测的证据
标准基准聚合指标掩盖交通状态转换时的严重预测失败,建议采用状态分层评估。
SAE干预不可靠:干预后抑制行为的恢复
SAE干预后,受抑制行为可通过优化恢复,安全场景恢复率达95.8%,显示特征控制不等于行为控制。
ASTRA:一种可扩展的下一代空中交通管制员训练模拟器,配备自主模拟飞行员
ASTRA通过本地化语音模型将航空语音识别错误率降至23.45%,并集成AI评估框架,实现标准化ATCO训练与评估。
用于类别不平衡故障诊断的重整化群神经网络实现
提出RGNet,用重整化群粗粒化特征空间,处理类别不平衡,实验证明其通用、可解释且有效。
为什么SWAVE可能不是你所需要的全部:复值循环语言模型的概念演化回顾
复值循环语言模型SWave三阶段演化,发现余弦主导坍塌故障,提炼六项工程原则与稳定性方法,最终模型最佳困惑度22.0。
Self-CTRL:基于强化学习的自一致性训练
Self-CTRL用强化学习对齐模型自解释与行为,提升透明度与安全性。
千世界:潜在宜居系外行星气候模拟基准
千世界基准数据集包含1800个多模型气候模拟,用于低数据多模拟器参数-场回归,GP方法表现最佳。
幽灵吸引子网络:用于闭环序列生成的盆地结构动力学解码器
提出盆地结构动态解码器,实现高效闭环生成,参数少延迟低,机器人动作成功率95.7%。
P$^2$CE:与模型无关的合理帕累托最优反事实解释
提出P²CE算法,生成合理且帕累托最优的反事实解释,高效且与模型无关。
单张图像3D网格质量的跨模型VLM评判协议(以及为何廉价代理方法不足)
提出VLM评判协议,两评审族高度一致,揭示几何/CLIP代理不可靠,推荐此协议。
从稀疏特征到可信代理:认证基于SAE的可解释性
提出SAE可解释性的认证框架,用四量上界判断忠实性,实验显示深层更易认证,特征分解可诊断可靠性。
SCOPE-FL:一种防策略的、基于链的最优帕累托高效联邦学习系统
提出SCOPE-FL框架,通过TTC算法实现帕累托最优与防策略性,用区块链保障执行,提升联邦学习效率与奖励公平性。
LLMZero:利用LLM智能体发现强化学习后训练的自适应训练策略
LLMZero通过树搜索发现自适应后训练策略,揭示参数动态规律,性能提升9%-140%。
MOLAR:从噪声标签中学习多模态分子表示
MOLAR框架分离噪声标签与干净属性,利用图文本模态证据,提升分子表示学习鲁棒性。
签名过滤:大型语言模型中统计水印检测的轻量级增强
通过去除不可靠令牌,将弱信号下LLM水印检测率从8-31%提升至78-99%,且假阳性可控。
测量噪声限制非线性模型在生物医学预测中相对于线性模型的优势
测量噪声抹去非线性结构,导致其优势消失,改善测量而非增加数据或模型复杂度才是关键。
超越预测:面向尾延迟的LLM推理调度
提出无预测的分布感知调度框架,减少LLM推理尾延迟35-50%,同时降低平均响应时间。
TMR-GGNN:基于时间感知多关系引导图神经网络的信用卡欺诈检测
提出TMR-GGNN框架,结合时间感知异构图注意力与对比学习,解决数据不平衡和欺诈模式演变,提升检测性能。
任务约束下的循环权重空间对称性
通过Schur坐标分析,循环网络权重冗余因任务而异,部分耦合可删减而不影响功能,其他则必要。
Veriphi:基于攻击引导的神经网络验证与数据集依赖训练方法
Veriphi验证系统表明:训练方法有效性取决于数据集,对抗训练在复杂数据上优于认证训练。
PSyGenTAB:基于约束优化的隐私保护合成临床表格数据生成框架
PSyGenTAB通过约束优化平衡隐私与效用,生成的临床表格数据性能媲美真实数据,并有效抵御隐私攻击。
基于局部线性嵌入与自适应特征融合的结构化表示学习
受神经科学启发,提出利用局部线性嵌入与注意力机制融合特征的强化学习框架,提升学习效率与性能。
改进的幻象:信用评分中的拒绝推断策略
拒绝推断存幻象:准确率升,拒绝质量降;2-5%探索率即可诊断,标准指标误导。
Grokking 中权重范数控制什么?交叉熵下的对数几率尺度中介作用
Grokking延迟由对数几率尺度主导,权重范数仅间接上游,交叉熵下解释力达97%。
SFT过训练通过熵崩溃预测RLVR下的排名反转
SFT过训练导致熵崩溃引发GRPO排名反转,预RL熵可预警风险并早停。
量子退火增强强化学习用于精确剩余使用寿命预测
量子退火增强Q学习框架,通过退火采样优化动作选择,显著提升剩余寿命预测精度。
超越AHI:面向互联健康中睡眠恢复的可解释因果发现引导框架
提出可解释因果发现框架,从多模态PSG构建睡眠恢复评分,比AHI与感知恢复关联强2.5倍,支撑互联健康。
概念调制模型:可识别性与外推的统一框架
提出概念调制模型,用属性势统一可识别性与外推的证明,并恢复现有结论。
稀疏性诅咒:从模型合并理解RLVR模型参数空间
RLVR模型参数更新稀疏但分散,导致合并失效,提出SAR-Merging方法解决冲突并保留推理路径。
稀疏性与叠加对简单自编码器损失的影响
分析了稀疏性和叠加对简单自编码器损失的影响,给出了幂激活函数下L2重建损失的紧界,并验证了叠加的最优性。
PACT:在任务向量中保留锚定核心以进行模型合并
识别预训练权重的承重墙维度,提出PACT保留锚定核心,提升模型合并性能并达到SOTA。
入乡随俗:从异质智能体中学习通用行为
提出GRID方法,从异质示范中解耦通用奖励,训练通用智能体,提升下游任务微调效率与稳定性。
循环Transformer的残差缩放:稳定性与可迁移性
循环Transformer残差缩放需ε=1/N,因子化参数化实现超参数迁移。
基于域分解的分层注意力
提出基于两层Schwarz域分解的分层注意力,用于算子学习,相比全局低秩注意力训练更快、精度更高、参数更少。
使用Wasserstein对抗学习纠正传感器引起的分布漂移
提出Wasserstein-GAN无监督推断校准参数,将传感器漂移映射回参考分布,在探测器模拟中验证有效性。
TS-Fault: 面向结构性故障的时间序列预测模型基准测试
TS-Fault基准测试揭示:纯净数据准确度与鲁棒性负相关,基础模型在机制级故障下最脆弱。
通过遗忘学习实现公平的认知障碍检测
多模态融合与遗忘学习框架减少人口统计偏差,提升MCI检测公平性,缩小子群性能差距。