12089 条条目 · 106 个活跃源
2026年5月25日
04:00
arXiv cs.LG

FIRMA:用于隐私保护联邦学习的斐波那契环模型聚合

提出FIRMA系列协议,通过斐波那契加权环聚合与永久私有分类头,解决联邦学习三难困境,性能优于FedAvg。

04:00
arXiv cs.LG

逐点指标误导:多模态逆问题的评估协议

逐点指标在多模态逆问题中误导评估,压缩边际谱特征。新协议用CRPS、频谱保真度和覆盖校准,决定科学结论。

04:00
arXiv cs.LG

Transcoders 揭示视觉语言模型中的视觉定位与幻觉

采用Transcoders函数中心框架,揭示视觉定位机制,并通过电路图特征预测幻觉,AUC达0.68。

04:00
arXiv cs.LG

构建面向移动设备的隐私保护联邦推荐系统

两阶段联邦推荐:云端协同过滤生成候选,设备端利用敏感数据重排序,仅交换模型更新,保护隐私。

04:00
arXiv cs.LG

MARGIN:面向多智能体基础模型协同的运行时置信度校准

MARGIN在线校准方法无需重训练,将校准误差降低3-6倍,多智能体选择配对分辨率从低于随机提升至70-89%。

04:00
arXiv cs.LG

以人为中心的学习力学:熵调节表示学习的动力学框架

提出HCLM框架,指出熵正则化有效需产生非退化信息力,几何熵代理(尤其对数行列式协方差)更优。

04:00
arXiv cs.LG

FederatedRSF:面向部分重叠医疗数据的联邦随机生存森林

提出联邦随机生存森林,处理部分重叠特征,隐私保护下性能与集中训练相当。

04:00
arXiv cs.LG

最小过参数化下,从示例中认证电路和Transformer的困难性

最小过参数化使电路和Transformer的示例认证指数级困难,近似认证亦需指数级证明。

04:00
arXiv cs.LG

PACE:小型语言模型代理的双时间尺度自演化

PACE框架实现冻结小语言模型自演化,双时间尺度协调提示与控制逻辑更新,无需权重更新或依赖强模型,显著提升性能。

04:00
arXiv cs.LG

RADAR:表征间的相对角度散度

提出RADAR几何指标,通过分析层间表征演化估计跨域迁移性,在视觉和文本基准上表现优异。

04:00
arXiv cs.LG

世界机器:面向时间序列的生成式世界建模

提出World Machine,一种基于transformer的生成式世界模型,利用潜在状态适应上下文,克服了传统模型二次复杂度局限。

04:00
arXiv cs.LG

基于稀疏查询特征的梯度优化引导生成

利用稀疏自编码器分解查询激活,梯度优化对齐目标原型,实现逻辑与风格的可解释控制。

04:00
arXiv cs.LG

用于多相输运与热系统数据驱动建模的开放多模态数据集与开源软件

公开多模态热流体数据集与开源软件,提出S+TD框架,包含SeqReg等工具,促进可复现AI研究。

04:00
arXiv cs.LG

发掘深层中间表示的潜在能力

揭示深层表示中任务信息非单调分布,提出LOES和GeoReg几何优化,显著提升迁移性能,模型越深收益越大。

04:00
arXiv cs.LG

比随机更差:无监督特征选择中基线的重要性

实证表明许多最新无监督特征选择方法在性能效率上不如随机选择,需将其作为基线确保改进。

04:00
arXiv cs.LG

A mathematical theory of balancing relational generalization and memorization

04:00
arXiv cs.LG

测试时训练削弱安全护栏

测试时训练让模型在推理时自适应,却能被攻击者利用绕过安全过滤器,攻击成功率显著提升,亟需动态对齐防御。

04:00
arXiv cs.LG

离散分类任务的近似Γ校准的平滑诱导复杂度

本文首次为离散性质(如众数、排序)提供近似校准结果,通过Lipschitz连续性质中介降低复杂度。

04:00
arXiv cs.LG

当行列式不够时:私有稀切换

Codex提出基于广义瑞利商的稀切换规则,解决私有化后行列式单调性失效,保持对数策略更新。

04:00
arXiv cs.LG

归因契约:生成式语言模型的特征归因

提出归因契约规范,明确五要素,解决生成式语言模型归因歧义,强调以方法-契约对评估。

04:00
arXiv cs.LG

深度的隐式偏差:从神经坍缩到Softmax编码

深度无正则化UFM中,深度诱导低秩偏差使神经坍缩转向softmax编码,宽度增加则偏向高秩解。

04:00
arXiv cs.LG

Decomposing and Measuring Evaluation Awareness

04:00
arXiv cs.LG

ModeSwitch-LLM:一种轻量级阶段感知控制器,用于单GPU上的跨模式大语言模型推理

通过请求感知路由选择最优推理模式,实现2.1倍加速、51.7%节能,准确率近FP16。

04:00
arXiv cs.LG

GEMQ:面向MoE大语言模型的全局专家级混合精度量化

提出GEMQ,通过全局线性规划分配精度和路由器微调,实现极低比特量化,减少内存并加速推理。

04:00
arXiv cs.LG

梯度惩罚潜在动力学实现平滑梦境与高效采样

提出GPLD正则化,对DreamerV3潜在动态施加梯度惩罚,提升样本效率和长时程学习稳定性。

04:00
arXiv cs.LG

鲁棒OT引导的生成式残差域适应:面向时间域偏移下的共享单车需求预测

提出Gen-ROTDA框架,利用鲁棒最优传输和残差生成,有效预测时间域偏移下共享单车需求,对异常数据更稳定。

04:00
arXiv cs.LG

基于无调度谱优化的随时训练

SF-NorMuon无调度谱优化器,单超参媲美调优AdamW,实现随时高质量训练。

04:00
arXiv cs.LG

ThriftAttention:长上下文FP4注意力中的选择性混合精度

仅用5% FP16计算,恢复89.1%性能差距,实现FP4效率下接近FP16的长上下文质量。

04:00
arXiv cs.LG

理解和改进指令微调中的噪声嵌入技术

提出对称噪声嵌入SymNoise,在LLaMA-2-7B上得分从29.79%升至69.04%,超越NEFTune,性能显著提升。

04:00
arXiv cs.LG

基于半监督伪标签的标签高效数据集剪枝

提出SemiPrune框架,仅用少量标注数据通过半监督生成伪标签,估计难度并剪枝,在多种数据集上达最优性能。

04:00
arXiv cs.LG

基于泰勒模式自动微分的阿基米德连接函数推断

提出JAX框架acopula,用泰勒模式自动微分实现任意阿基米德生成器的精确嵌套连接函数推断,支持高维删失与神经生成器,大幅提升效率。

04:00
arXiv cs.LG

CALAD:面向多元时间序列异常检测的通道感知对比学习

提出CALAD,利用通道相关性构建对比样本,结合对比学习和重构,有效检测多元时间序列异常。

04:00
arXiv cs.LG

下贝叶斯强化学习智能体在最坏情况鲁棒性方面超越经典强化学习

下贝叶斯强化学习通过最坏情况评估处理不确定性,在最坏情况鲁棒性上优于经典方法。

04:00
arXiv cs.LG

任意维度不变普适性

提出系统方法证任意维度模型普适性,利用极限空间与对称性,指出现有架构不足并修正。

04:00
arXiv cs.LG

经验贝叶斯共形预测在视觉与语言模型中的应用

利用r值将分数变异性转化为不确定性非一致性分数,减少高方差假阳性,保持覆盖并提升排序稳定性。

04:00
arXiv cs.LG

多扩展少收缩:塑造有效秩动态以实现推荐系统的密集扩展

RankElastor通过参数化全混合和GLU改进P-FFN缓解嵌入坍塌,提升推荐性能与可扩展性。

04:00
arXiv cs.LG

基于Bandit反馈的强化学习中寻找良好策略的纯探索

研究强化学习中识别“足够好”策略(GPI)问题,提出BEE-GPI算法,其样本复杂度与(最优值-阈值)平方成反比,不依赖状态空间大小。

04:00
arXiv cs.LG

Scalable Heterogeneous Graph Foundation Models for Data-Driven Optimal Power Flow in Smart Grids

04:00
arXiv cs.LG

FastKernels: 生产环境下GPU核生成的基准测试

FastKernels基准和框架揭示生产与基准脱节,最强核代理加速仅0.94倍。

04:00
arXiv cs.LG

通过机器学习加速可分割负载处理:面向大规模工作负载的实用框架

首次用ML框架预测可分割负载最优时间,精度97-99%,速度快10-100倍,泛化良好。

04:00
arXiv cs.LG

自适应质量分段的KV压缩用于长上下文推理

AMS KV压缩从token级竞争转向区域感知配额,防止推理块被擦除,提升长上下文推理性能。

04:00
arXiv cs.LG

凸优化低资源口音鲁棒语言检测

提出凸优化语言检测框架,多GPU ADMM高效训练,低资源口音检测准确率达97-98%。

04:00
arXiv cs.LG

WMAttack:面向世界模型智能体对抗评估的自动化攻击搜索

WMAttack提出自纠正攻击搜索与表征引导检索,在有限预算下发现更强攻击,显著提升评估准确性和效率。

04:00
arXiv cs.LG

PaP-NF: 基于前缀提示重编程和归一化流的概率性长期时间序列预测

PaP-NF用前缀提示对齐时间序列与LLM,归一化流解码,实现长期概率预测,捕获多模态不确定性。

04:00
arXiv cs.LG

基于移动模式评估预测模型的公平性

提出基于移动模式评估预测模型公平性的新方法,利用多分辨率空间分区和扫描统计,有效检测新型不公平。

04:00
arXiv cs.LG

RelPrism:面向关系数据库的多方面自生成任务预训练框架

RelPrism通过多粒度聚类生成多方面伪任务,显著提升关系数据库下游预测性能(分类AUC+4.15%,回归MAE-10.75%)。

04:00
arXiv cs.LG

图神经网络的自我监督对抗净化

提出GPR-GAE自监督净化器,通过多步净化防御结构攻击,实现鲁棒性。

04:00
arXiv cs.LG

单GPU上的对齐与偏好学习的凸优化

首次将凸优化用于LLM偏好微调,单GPU高效训练,计算成本降低至DPO的17.6%。

04:00
arXiv cs.LG

一种改进基于驱逐的KV缓存压缩的简单插件

VECTOR通过三重路由结合重要性与可重建性信号,在严格预算下显著改善质量-内存权衡。

04:00
arXiv cs.LG

通过精炼与校准提升深度神经网络可靠性

提出RefCal框架联合优化校准、精炼和准确性,显著提升深度神经网络可靠性。