11968 条条目 · 106 个活跃源
2026年6月9日
04:00
arXiv cs.LG

中文标题:项目反应缩放定律:一种高效且可泛化的神经缩放估计的测量理论方法

中文摘要:提出IRSL框架,整合项目反应理论,利用LM概率响应,大幅降低参数复杂度,仅需少量问题即可实现可靠缩放估计。

04:00
arXiv cs.LG

用简化数据衡量贫困与不平等:基于尼日利亚住户数据的机器学习方法

利用随机森林递归特征消除法,仅需少量数据即可准确预测贫困状态与不平等线位置,可降低调查成本并保留关键分布信息。

04:00
arXiv cs.LG

ScaleSweep:通过块缩放初始化实现大型语言模型的精确NVFP4训练后量化

提出ScaleSweep方法优化块缩放初始化,缩小扫描范围,提升NVFP4量化精度,保持93%以上全精度性能。

04:00
arXiv cs.LG

使用多臂老虎机进行深度神经网络中的结构化神经元剪枝

提出基于多臂老虎机的结构化神经元剪枝框架,UCB1与汤普森采样效果最佳,显著优于未剪枝模型和传统剪枝方法。

04:00
arXiv cs.LG

查询透镜:通过间接效应解释稀疏键值特征

提出Query Lens,联合键值特征与间接效应,更全面解释稀疏特征,优于Logit Lens,并提出子空间通道假说。

04:00
arXiv cs.LG

预测有限群可解性的图神经网络

提出GNN框架,基于图表示预测有限群可解性,探索代数结构学习能力。

04:00
arXiv cs.LG

大型语言模型应学习个性化而非聚合的人类偏好

大型语言模型应学习个性化偏好,避免聚合导致多样性丢失,通过有限个性化框架平衡个体自主与集体安全。

04:00
arXiv cs.LG

大型语言模型的序贯统计推断:表示、有效性与监控

序贯统计推断通过依赖过程建模、不确定性保证与变化检测,将LLM可信部署视为统计过程控制。

04:00
arXiv cs.LG

评估机器学习资源利用需要模型生命周期评估

评估AI系统能耗需采用生命周期评估,全面核算训练、推理及硬件全过程的资源与环境影响。

04:00
arXiv cs.LG

学习迁移:神经不变量的Kan扩展

提出基于范畴论Kan扩展的迁移差异度量,在链复形与持久模块中可精确计算,实验验证其能识别任务函子与拓扑破坏。

04:00
arXiv cs.LG

KITE:融合文本、图像与知识图谱的三模态假新闻检测框架

KITE三模态假新闻检测框架融合文本、图像和知识图谱,利用跨模态注意力机制,显著提升检测性能并具可解释性。

04:00
arXiv cs.LG

物联网环境中机器学习即服务(MLaaS)的测试时自适应组合

提出测试时自适应组合框架,通过组合性模型和服务级调整,有效降低计算时间。

04:00
arXiv cs.LG

DOG-DPO:面向安全对齐的几何动态优化

DOG-DPO将偏好对视为几何方向,分解并选择多样性子集,仅用11%数据实现高效安全对齐,无训练且快速。

04:00
arXiv cs.LG

语义缓存蒸馏:通过复用和选择性补丁实现高效状态传输

提出语义缓存蒸馏框架,通过复用低秩子空间和稀疏过渡层补丁,实现高达2.65倍TTFT加速,生成质量接近原始。

04:00
arXiv cs.LG

基于基础模型先验的主动学习:类别不平衡下的高效学习

提出利用基础模型先验的主动学习框架,应对标签噪声和类别不平衡,节省超50%标注成本。

04:00
arXiv cs.LG

监督微调中突发性失调的特征空间监测

通过激活空间线性方向监测特征漂移,低开销监控器达0.990 AUROC,有效检测突发性失调。

04:00
arXiv cs.LG

HARP:面向大语言模型微调的高效数据选择方法

提出HARP,通过层次结构与贝叶斯推断高效选择微调数据,成本降低7倍,性能提升最高8.9点。

04:00
arXiv cs.LG

如何平衡密集注意力?面向混合长上下文模型中全/GQA层的Oracle引导稀疏预填充

提出注意力top-k oracle,稀疏预填充与密集性能差<1点,蒸馏索引器实现1.7-1.9倍加速,质量损失可控。

04:00
arXiv cs.LG

知识包容的自适应物理信息神经网络用于微生物相互作用建模

提出知识包容PINN,整合文本与网络结构知识,微生物建模准确度提升23%,R²提升47%

04:00
arXiv cs.LG

DSFNet:面向城市交通系统多模态时空预测的双域谱算子学习

DSFNet通过双域谱滤波建模多模态耦合与时空异质性,引入外部门控,在五数据集上MAE降低3.21%-10.16%。

04:00
arXiv cs.LG

基于可学习Tweedie头的时空图神经网络在稀疏数据上的船舶交通流预测

提出可学习Tweedie头即插即用模块,优化单位偏差,提升稀疏船舶交通流非零事件预测精度。

04:00
arXiv cs.LG

BCG-FM:一种用于环境心脏健康感知的基础模型

首个环境机械生物信号基础模型,基于床面传感器记录BCG,预训练于近15万人275万小时数据,实现低误差生物年龄估计与健康条件区分。

04:00
arXiv cs.LG

大型语言模型中激活引导的对抗鲁棒性

首次系统评估发现激活引导对抗扰动脆弱,鲁棒性降64%,层选择偏移,结构性问题限制部署。

04:00
arXiv cs.LG

EssentialGIN:基于图同构神经网络的基因必需性预测新方法

提出EssentialGIN,整合蛋白质互作网络拓扑与多组学数据,显著提升基因必需性预测精度,尤其在人类中优于现有方法。

04:00
arXiv cs.LG

基于图神经网络的药物相互作用预测的药物基因组学知识图增强

整合PharmGKB的CYP酶知识图增强GNN,DDI类型分类F1提升至0.532,但二元检测仍受信息天花板约束。

04:00
arXiv cs.LG

EvoCSFL:基于代理辅助的进化客户端选择以实现高效鲁棒联邦学习

提出代理辅助进化客户端选择框架,将异构联邦学习的随机选择转为组合优化,加速收敛、降低能耗、提升鲁棒性。

04:00
arXiv cs.LG

Rosetta记忆:面向跨LLM智能体的自适应记忆

提出记忆中心式LLM自适应方法,解决多模型间记忆迁移问题,提升跨模型任务完成效果。

04:00
arXiv cs.LG

FunctionEvolve:基于结构引导的LLM符号回归

用表达式树引导LLM符号回归,结构感知搜索大幅提升恢复率,SA@50达82.9%。

04:00
arXiv cs.LG

刻画ReLU网络的离散几何

证明全连接ReLU网络区域连通图平均度上限为2倍输入维,直径上限与输入维无关。

04:00
arXiv cs.LG

SAW:面向大型语言模型多目标强化学习的阶段感知动态加权

SAW利用变异系数动态加权多目标奖励,解决学习异步问题,提升LLM对齐效率和性能。

04:00
arXiv cs.LG

从大脑解码自然情感动态:基于大语言模型增强的回归框架

利用LLM增强回归框架,从大脑动态功能连接解码连续情感,优于静态表示,支持心理建构主义。

04:00
arXiv cs.LG

理论极限下的注意力机制:基于数组数学框架的存储最优Transformer内核

提出数组数学框架消除中间数组,实现线性数据移动,预测2-100倍加速和2-50倍能耗降低。

04:00
arXiv cs.LG

超越准确率:解读自杀意念检测模型中的主题表征

研究发现主题增强提升了心理风险因素的清晰度和区分度,使模型内部表征更结构化、可解释。

04:00
arXiv cs.LG

WhiFlash:通过令牌级跨范式路由加速推测解码

WhiFlash跨范式推测解码,令牌级路由统一自回归与扩散,缓存优化,吞吐量提升达69.6%。

04:00
arXiv cs.LG

A Geometry-Aware Triplane Field Network for Vehicle Aerodynamic Prediction

04:00
arXiv cs.LG

使用SySRs降低LLM评估成本:一种可证明利用模型相似性的赌博机算法

SySRs算法利用模型相似性自适应分配评估预算,无超参数且性能有保证,显著降低LLM评估成本。

04:00
arXiv cs.LG

对比编码归纳偏差:在预测表示学习中将慢噪声与动态分离

跨轨迹负样本采样使对比预测目标编码慢噪声,单轨迹内采样可消除捷径,强制学习动态变量。

04:00
arXiv cs.LG

拜占庭廉价交谈:LLM协作博弈中的对抗韧性与拓扑效应

拜占庭虚假合作使非拜占庭智能体虽识破背叛却无法集体恢复协作;拓扑披露同样破坏协调。

04:00
arXiv cs.LG

牵强连贯:编码代理执行轨迹中的故障前信号

代理承认问题仍行动(牵强连贯)是故障前信号,检测器精度94%,标记轨迹失败率94%。

04:00
arXiv cs.LG

scCBGM:可解释的单细胞反事实编辑

提出scCBGM框架,实现单细胞可解释反事实编辑,在组合泛化与反事实预测上表现优异。

04:00
arXiv cs.LG

面向因果科学机器学习的仪器化数据

提出仪器化数据:每项数据附带机制模型、不确定性与反事实,支持因果干预,革新科学机器学习数据基础。

04:00
arXiv cs.LG

利用Stein稳定化缓解扩散ODE中的收缩陷阱

针对扩散ODE大步长推理的收缩陷阱,提出无需参考样本的SteinDiff稳定化框架,有效缓解伪影并提升生成质量。

04:00
arXiv cs.LG

评估与基准测试概念漂移检测方法的框架

提出含可控漂移模拟、时序感知评估和超参数优化的基准框架,在真实数据上对比14种方法,揭示优劣并建立基线。

04:00
arXiv cs.LG

打破气泡:有界权重不一致性的异步流水线并行训练

提出PACI方法,通过局部梯度累积控制版本漂移,实现无气泡异步流水线训练,效率提升至高1.69倍。

04:00
arXiv cs.LG

Still:单次前向传递中的摊销式KV缓存压缩

Still通过单次前向传递实现摊销式KV缓存压缩,在8-200倍压缩下优于基线8-22点,支持长上下文迭代应用。

04:00
arXiv cs.LG

无教师自训练放大但不复合:自由验证器领域上的Pass@$K$交叉

无教师自训练仅放大而非复合能力,通过Pass@$K$交叉证明:训练模型在低预算胜出,基础模型在高预算反超,表明概率质量集中。

04:00
arXiv cs.LG

逐层导数控制网络在不同数据体制下实现竞争性准确度和梯度稳定性

逐层导数控制网络通过梯度惩罚实现稳定泛化,在表格和NLP任务中低数据表现优异,梯度尾比可作免标签诊断。

04:00
arXiv cs.LG

部分表现性预测

提出统一内生与外源分布偏移的部分表现性预测框架,定义在线稳定性与最优性,分析重复训练等启发式的适应条件。

04:00
arXiv cs.LG

Temporal Coverage over Density: Parsimonious Training-Set Design for ML Climate Downscaling

04:00
arXiv cs.LG

CAAL:基于上下文老虎机的在线手工主动学习策略选择

提出CAAL,利用上下文奖励预测动态选择主动学习策略,优于现有基线,且批大小不影响效果。