UOTIP:用于非配对逆问题的不平衡最优传输映射
提出UOTIP求解器,基于不平衡最优传输,松弛边际约束,实现非配对图像逆问题的鲁棒重建,性能最优。
面向不确定性感知的可解释人工智能统一框架:以电能质量扰动分类为例
提出解释分布与不确定性感知归因算子,在电能质量扰动分类中提升定位并揭示不确定性模式。
Robust Personalized Recommendation under Hidden Confounding in MNAR
在现代深度时间序列预测中复兴误差修正
提出UEC-STD误差修正模型,分解趋势与季节分量,无需重训练,提升深度时间序列长期预测精度与鲁棒性。
理解序列分类中的自我预训练
自我预训练通过学习邻近注意力模式提升序列分类,弥补监督训练盲点。
HORST:组合优化器几何结构用于稀疏Transformer训练
提出HORST优化器,融合自适应稳定性与L1稀疏偏差,显著提升稀疏Transformer训练效果。
通过重要性平滑高效学习深度状态空间模型
提出平行变分蒙特卡洛方法,桥接两种训练范式,实现判别与生成任务,训练速度快10倍。
通过自收缩改进约束在线凸优化的保证
强凸损失下同时实现O(log T)遗憾和约束违反,凸损失下约束违反降至O(√T),使用自收缩几何结果。
面向联邦学习的类型化张量语言
提出类型化张量语言形式化联邦学习,区分联邦/共享张量,通过共享状态分解实现固定维度通信,支持可微学习。
维度平衡提升大规模时空预测性能
基于熵匹配诊断,提出维度平衡框架,压缩空间维度并延长时间窗口,提升多领域时空预测精度。
全循环Transformer:简单稳定循环机制
提出全循环架构与注意力注入,解决梯度振荡和残差爆炸,训练稳定至12次循环,下游性能提升13.2%。
面向Transformer模型压缩的鲁棒B样条解耦
提出鲁棒B样条解耦算法压缩Transformer模型,大幅减少参数且保持精度。
HELLoRA:面向混合专家模型的热门专家层级低秩适配
仅对高频激活专家附加LoRA,减少参数与计算,提升性能,在多个MoE模型上优于基线。
UCCI:面向成本最优大语言模型级联路由的校准不确定性
UCCI通过校准不确定性实现成本最优路由,降低推理成本31%,ECE从0.12降至0.03。
ReCrit:面向科学批判推理的转变感知强化学习
ReCrit用转变感知强化学习分解批评交互为四个象限,奖励修正与鲁棒性,惩罚谄媚,显著提升科学推理批评准确率。
D-PACE:用于并行推测性草稿的动态位置感知交叉熵
提出D-PACE损失,动态调整权重提升推测解码接受长度与速度,仅增2.3%训练开销。
基于非参数生存分析的快速变点检测器准确评估
提出KM-ARL和KM-ADD非参数估计器,通过生存分析评估变点检测,证明渐近无偏,增强对有限序列的鲁棒性。
基于平坦度的理论最优量化
提出基于平坦度的理论最优量化方法BDQ,有效分散异常值,在低精度量化中性能优越。
PROWL:基于优先遗憾驱动的世界模型学习优化
KL约束对抗训练暴露模型高错误轨迹,优先缓冲区聚焦未解决故障,提升世界模型鲁棒性。
基于块的双解码器
提出双因果块注意掩码架构,兼具全监督训练与高效推理,KV缓存和计算减少2/3。
面向前向-前向学习的自适应多尺度优度聚合
提出AMSGA改进前向-前向学习,通过多尺度优度聚合等策略,MNIST和Fashion-MNIST准确率分别提升1.45%和1.50%。
指令微调大语言模型中的组合文学原语:跨架构SAE特征用于自我、风格与情感
在指令微调LLM中通过稀疏自编码器发现四类文学原语特征,实现27种情感的覆盖,并揭示跨架构不对称性。
稳定多智能体策略学习的度量梯度投影法
HPML通过Hodge投影将联合更新场转化为度量梯度流,提升多智能体学习的稳定性和归一化回报。
混合LoRA:桥接全微调与低秩适配的后训练方法
提出Hybrid-LoRA框架,用10%全微调模块搭配LoRA,性能接近全微调,平均提升4.36%。
PASC:面向多阶段NLP与LLM管道的管道感知共形预测及联合覆盖保证
PASC将多阶段联合覆盖简化为单标量共形预测,提供无分布保证,效率更高且覆盖稳定。
扩散世界模型中记忆专家的组合
提出扩散世界模型记忆专家组合,通过对比乘积集成三类专家,实现长程一致性与导航性能提升,避免二次成本。
DynaTrain:面向弹性大语言模型训练的快速在线并行度切换
DynaTrain通过虚拟参数空间抽象实现亚秒级在线并行度切换,性能提升三个数量级。
基于轨迹的数据归属有多可信?错误来源、补救措施和实践指南
系统分析轨迹数据归属的三个级别误差,提出AdamW-影响方法及数据选择实践指南。
现实世界中的对称性:等变性在神经流体代理模型中的作用
等变性在强对齐气动数据中有害,但在血流动力学等缺乏数据规律的问题中可靠提升神经流体代理泛化。
前沿叠加的涌现:莫比乌斯吸引子与级联监督
揭示莫比乌斯吸引子与级联监督机制,证明二者共同驱动Transformer前沿叠加推理的涌现,实验验证衰减律。
高效条件化:伪观测批处理贝叶斯优化为何有效又为何失效
揭示高效条件化是伪观测批处理贝叶斯优化有效性的关键,统一模型并解释失效条件
多Token残差预测
利用相邻去噪步骤logit分布相似性预测残差,单次前向传播多token去噪,实现最高1.42倍无损加速。
量子对抗机器学习:从经典适应到量子原生方法
综述量子对抗机器学习,研究脆弱性、攻击与防御,探讨理论趋势与挑战。
面向域可泛化的数据集蒸馏的谱梯度手术
针对蒸馏数据分布外泛化难题,提出谱梯度手术解缠类别与域特征,显著提升泛化能力。
In-Context Learning Operates as Concept Subspace Learning
基于卡尔曼滤波、克里金与过程噪声的精度跟踪Transformer
BFT模型通过精度加权克里金、卡尔曼更新和REML估计处理不确定性,在序列推荐和LLM微调中显著提升性能。
面向基础模型全面评估的细粒度基准生成
提出自动基准生成框架,基于教材生成问题,错误率低于MMLU,可揭示模型细微性能差异。
使用知识图谱嵌入的自动化大数据质量评估
利用知识图谱嵌入预测质量规则,实现上下文感知的自动化大数据质量评估。
城市交叉口多行人安全预警:数字孪生应用案例
数字孪生驱动城市交叉口多行人安全预警,融合多传感器与边缘计算,实现高精度低延迟实时警报。
并非所有令牌都值得缓存:为LLM前缀缓存学习语义感知驱逐策略
语义自适应驱逐策略通过多队列和在线学习,实现LLM前缀缓存TTFT提升1.4-2.7倍。
无损抗蒸馏采样
LADS通过语义和查询次数决定随机种子,使蒸馏数据相关,恶化蒸馏模型性能,同时保证用户无损。
StampFormer:一种物理引导的材料-几何耦合多模态模型,用于快速预测板材冲压中的物理场
提出StampFormer,融合几何与材料属性,亚秒级高精度预测冲压物理场,平均误差低于8.5%。
注意力机制的路由与过滤结构
分解注意力矩阵为路由低秩与过滤对称,解耦后路由形成谱级联,低层可线性简化,节省47-65%参数。
从累积约束到非平稳强化学习的自适应运行时安全控制
CPSS将累积安全预算转为自适应阈值,在线调整,显著减少违规并提升安全裕度。
TEMPO:通过模式分离策略优化实现可信大语言模型回测的时间强制
TEMPO以双模式奖励与GRPO训练强制时间纪律,将回测泄露从2-13%降至0.6-3.7%,性能提升6-13%。
翻译中的得与失:神经码本通道的变分诊断
提出K_{e→d}诊断及伯努利KL证书,量化编码器-解码器不匹配,并证明传统诊断无法检测。
图驱动跨行业实时反洗钱监测框架:面向融合出行-能源供应链网络
提出图驱动跨行业实时反洗钱框架,用时序图注意力与对比学习,F1提升17.8%,降低假阳性率。
非平稳环境下基于自适应安全约束的安全连续强化学习
提出LILAC+框架,通过三种自适应安全机制,在非平稳环境中显著减少安全违规并保持任务性能。
说谎只是一个阶段:语言模型扩展中隐藏的对齐转变
研究发现推理与真实性耦合存在相变,临界规模约35亿参数,之下反相关之上协同,架构和数据可独立调节。
支持前瞻性运营决策的急诊科待床时间集成预测原型
开发多时间序列预测框架预测急诊待床时间,DLinear/NLinear模型优异,并构建MLOps原型支持部署。