面向低维结构学习的鲁棒子空间约束二次模型
提出鲁棒子空间约束二次模型,适应多种噪声分布,梯度算法优化,在鲁棒性和精度上优于现有方法。
设计导致的神经坍缩:在超球面上学习类原型
提出NTCE和NONL损失,使分类设计达到神经坍缩最优,省去线性探测,提升迁移学习。
AirfoilGen:一种天生有效且感知性能的翼型生成潜扩散模型
提出AirfoilGen潜扩散模型,圆扫表示确保有效,条件扩散控制性能,准确率98.41%。
更少数据,更快训练:通过采样偏差重复较小数据集加速学习
本文发现重复小数据集比大数据集训练更快,源于采样偏差促进层状生长,可主动用作优化归纳偏差。
WaveGraphNet:耦合逆-前向图学习实现物理一致的导波损伤定位
提出耦合逆-前向图学习框架,利用前向分支作为物理正则化,提升稀疏导波损伤定位的鲁棒性和外推能力。
Quant.npu:通过全静态量化实现设备端大语言模型的移动NPU高效推理
提出全静态量化框架Quant.npu,集成可学习参数与旋转矩阵,通过初始化与选择性优化实现高效推理,延迟降低15.1%。
协作优化中的因果遗忘:对抗贡献下的精确与近似影响逆转
HF-KCU通过Krylov子空间近似影响函数实现高效数据删除,复杂度O(kd),因果加权确保精确更新,精度接近重训练。
物理序列建模中的错误泛化机制
局部误差传播致生成轨迹物理量分布偏移,核方法可预测并干预。
谱遗忘:无需重训练的事后恢复受损能力
提出DG-Hard谱修复法,仅用检查点恢复微调损伤能力并保持性能。
基于米勒指数的潜在晶体断裂面推理与视觉语言模型
研究多模态大模型能否用米勒指数作为潜在结构推理断裂几何,实验证明其可在理想条件下可靠推理并拒绝不适用情况。
权重衰减机制在Grokking Transformer中的廉价在线诊断
权重衰减作为控制参数,通过注意头余弦相似度和熵标准差两种廉价在线诊断,区分记忆、grokking和坍缩,临界λc=0.0158,指数ν=0.757。
光谱混合:在线偏好对齐的统一框架
发现LLM通用频谱表示便于合并,离线学习偏好策略,在线混合输出或参数,高效对齐个体偏好,性能领先。
知识蒸馏中持续信息丰富的软标签温度
提出CIST方法,为教师和学生自适应温度,使软标签熵一致,提升视觉与语言蒸馏性能。
用于fMRI编码和解码任务的非局部算子学习
利用非局部算子学习,长时空窗口提升fMRI编码解码性能,潜在空间更清晰分离类别。
监督潜在重构用于植物表型组学中的小数据量子学习
提出混合工作流:压缩1280维嵌入至11维监督空间,提升分离性但暴露压缩权衡,量子核对齐仍困难。
基于分数的潜变量因果模型因果发现
本文提出基于分数的方法,识别含因果相关潜变量的因果结构,具有可识别性保证,实验验证有效。
对话式可解释人工智能能否提升用户性能?一项实验研究
对话式与问答式XAI辅助均使用户表现优于模型,但两者无显著差异,参与度一般。
分解MXFP4量化误差以用于LLM强化学习:可减偏差、可恢复死区与不可降底噪
将MXFP4量化误差分解为尺度偏差、死区截断与网格噪声,针对性校正后恢复BF16精度至0.7%和3.0%。
群代数张量:可证明最优的等变学习与物理对称性发现
提出群代数张量框架,使等变性内化为代数性质,实现可证明最优的对称保持压缩与数据驱动对称性发现。
从稀疏数据快速重建精确麦克斯韦动力学
FLASH-MAX网络嵌入麦克斯韦精确解,从稀疏数据秒级高精度重建电磁场,零残差,改善机器学习精度-速度权衡。
神经网络可达性分析的二次刻画
提出基于凸优化生成并全局验证二次不等式的方法,减少前馈网络可达性分析保守性,提升精度。
SMA-DP:面向深度学习的频谱记忆感知差分隐私
SMA-DP-SGD利用谱指数自适应记忆深度,增强DP-SGD,在CIFAR等数据集上精度更优。
LLM预训练塑造可泛化流形:跨模态迁移到时序的见解
语言预训练为时序任务构建可复用流形,微调实现低维对齐,从而完成跨模态迁移。
ZEBRA:面向LLM编排的零样本预算资源分配
ZEBRA零样本框架通过水填充搜索分配预算,恢复94.4%无约束质量,优于LLM直接分配。
基于风依赖路径转换的万年全球随机热带气旋目录(WHITS)
WHITS以风速依赖路径转换生成万年全球热带气旋目录,提升灾害风险评估。
CASCADE共形预测:面向两阶段临床决策支持的不确定性自适应预测区间
CASCADE框架利用分类不确定性动态调整预测区间,高效且稳健,区间宽度缩减38.9%。
多编码器分布外检测中表示空间扩散模型的蒂皮特最小值融合
提出蒂皮特最小融合多编码器表示空间扩散模型,无需OOD标签,AUROC达0.94以上。
通过口头反馈强化人类行为模拟
DITTO模型将口头反馈作为强化学习信号,训练LLM模拟人类行为,在SOUL基准上平均提升36%。
Training Language Agents to Learn from Experience
通过子空间追寻公理化神经网络
提出子空间追寻(PoS)公理框架,几何统一解释深度网络表示、计算与泛化。
TriForces:增强原子级图神经网络以实现可迁移表示
TriForces用三流框架分离组成与结构信息,结合自监督学习,在少量数据下能量MAE降低57%。
OpenSeisML:面向生成式AI的大规模开放真实地震与测井数据集
提供公开真实地震与测井数据集,自动化整理,用于生成模型捕捉地下分布及地震反演不确定性量化。
潜过程生成器匹配
提出潜过程生成器匹配框架,将观测状态视为可处理马尔可夫过程的映射像,学习具有相同边际分布的生成器。
在LLM后训练中通过logit平均互补强化学习与SFT
提出logit平均法,融合冻结SFT与可训练策略于GRPO,免KL正则,提升数学推理精度。
深度学习替代模型用于模拟随机气候临界点动力学
提出TFT替代模型,模拟气候临界点,精确预测崩溃时间,计算加速465倍且保持可微。
带有损坏反馈的在线共形预测
提出滤波与主动补偿两种鲁棒在线共形预测方法,应对反馈损坏,保证校准性能。
基于二次近似的指数机制用于隐私保证的机器学习模型微调
提出基于指数机制和二次近似的微调算法,确保差分隐私,可精确采样正态分布,具理论保证并支持高维模型。
机器学习增强的非侵入性检测用于MASLD纤维化:浅深神经网络与FIB-4、表格基础模型及大语言模型的对比
浅深神经网络仅用354参数即提升MASLD纤维化检测,优于FIB-4等模型,无需新增临床数据。
Ada2MS:基于逐元素与全局二阶矩指数混合的混合优化算法
提出Ada2MS算法,通过指数插值融合AdamW与动量SGD优势,在视觉任务中取得竞争结果。
AVSD:通过平衡共识与教师特定特权信号的自适应视图自蒸馏
AVSD通过分离跨视图共识与视图特定残差信号,实现多视图自蒸馏,在数学竞赛和代码生成基准上平均提升2-3%。
套娃式概念瓶颈模型
提出MCBM模型,通过嵌套层次实现自适应概念利用,将干预成本降至对数级,保证单调性能提升。
反向Q:在线回合制强化学习中实现更快Q学习的机会
通过调整更新顺序、频率和初始化,反向Q方法显著加速回合制Q学习,性能提升达78.78%。
功能性运动中上肢EMG信号的无监督聚类与分类:一种数据驱动方法
本文通过四阶段流程对上肢肌电信号聚类分类,选5特征6手势,200ms窗口,ET和ANN最优,支持自适应假肢控制。
基于视觉着陆系统的学习保证机制可解释性
通过分解模型表示为内容与风格原子,验证预测依赖内容,实现运行时保证,满足EASA指南。
离线目标条件强化学习中的潜在类比组合式转导
提出基于潜在类比的组合式转导,泛化至未见组合,离线GCRL性能大幅超越先前方法。
动态Shapley计算
提出D-Shap动态估值框架,利用矩阵局部性实现高效更新:任务更新毫秒级,玩家更新成本降低千倍,估值质量无显著下降。
SURF:引导标量化权重以均匀遍历帕累托前沿
通过分析标量化路径遍历速度不均,提出基于弧长累计分布逆映射的权重采样法SURF,实现帕累托前沿均匀覆盖且线性收敛。
局部化方法的一般理论
提出局部化方法通用框架,基于局部核与局部均值,统一解释多种模型并构建Transformer。
相同目标,不同盆域:标注者分布的硬标签与软标签
研究硬标签在标注分歧时的优势:少量标注优于软标签,全标注时相当;硬标签收敛更平坦,多轮次默认可选。
动态TMoE:一种面向非平稳时间序列预测的漂移感知动态专家混合框架
通过MMD检测分布漂移动态调整专家池,结合时序记忆路由器实现稳定自适应预测,无需测试更新,性能SOTA。