@natolambert:很明显,如果Ant和OpenAI暂停,对开源是好事。
若Ant与OpenAI暂停,开源将从中受益。
@natolambert:完全禁止开源将导致更多反乌托邦。某些时候,我可能会认为应暂停具备特定能力的开放权重模型,但做出这一判断需要极其审慎的专业知识。
全面禁开源或加剧反乌托邦;开放模型更可能因普遍恐慌被过早禁止,暂停特定能力模型需专业审慎。
@natolambert: I would consider helping as an independent evaluator along with the non profit I’m building. Is going to be a crucial role and there aren’t many independent people with substantial technical expertise. I think I represent an important moderate camp on AI capabilities and risks.
@natolambert: Cool post training work built on Olmo 3 :)
@natolambert: What is the expectations for how long human effort will last in the center of AI research tasks if we are in the early stages of RSI?
@natolambert: Big W for people saying that distillation was mostly an SFT artifact, and how its unclear how it would become increasingly influential in an era defined by RL.
@natolambert:https://t.co/9yxgo8Oie8
该内容仅包含链接,无摘要信息可供提炼。
@natolambert:我不认为自己在 Interconnects 上事事都对,但在这样一个快速变化的时代,公开推敲自己的想法真的很有趣。它会迫使你不断改变一些看法,并培养出良好的思考直觉。我们需要更多 AI 研究者这样做。
公开推敲想法,能促使AI研究者更新观点、培养思考直觉,值得更多人参与。
@natolambert:花太多时间刷推文,于是动笔写下:为何一次辞职能把AI恐惧的余烬变成野火——更重要的是,厘清由此引发的讨论中,我认为哪些说法成立、哪些言过其实。
因读推过多,我撰文分析一次辞职如何让AI恐惧燎原,并辨析相关言论中哪些成立、哪些夸大。
@natolambert:如果你今天想寻找另一种观点——它假定AI模型会加速AI研究进程,但不会导致快速递归自我改进(RSI)和近期风险爆发:https://t.co/sLE4tuFi4t
另一种观点:AI模型会加速AI研究,但不会引发快速递归自我改进与近期风险爆发。
英伟达收购HuggingFace是一笔划算交易,因其擅长以少量资源影响AI讨论与方向。
HuggingFace能以少量资源影响AI方向,对英伟达而言是超值收购。
@natolambert:很兴奋能参与此事。
兴奋参与。近期AI政策管理难题多,但真正拥有合适人才与空间推动讨论的团体极少。
@natolambert:1. AI 进展非常快
AI发展迅速,应谨慎推广技术,世界并未走向终结。
@natolambert:不在OpenAI/Anthropic的朋友们有一个共识:这些实验室里的人带着宗教般的狂热行事(尤其是Anthropic)。这表现为非常脱离现实的互动,也延续到了此处的公开交流中(例如最近的辞职事件)。公司文化导致了这一切。
此类前沿实验室的宗教式文化导致员工与现实脱节,公开沟通亦受影响,近期辞职事件可见一斑,根源在公司文化。
@natolambert:我们有证据表明
证据显示智能体擅长改进训练软件,大模型在多领域超人类,但这不预示其会毁灭人类;我们预期的是饱和与未知突破。
@natolambert:此视频被观看约1亿次实属惊人,且我认为总体弊大于利。
该言论被观看约1亿次,虽惊人但弊大于利。重视AI安全,但缺乏支持人类灭绝风险达10%的证据,否则即为制造恐慌。
@natolambert:因婚礼休假数周,有趣的是从我的亲友圈中收到了关于AI的问题和使用案例。人们越来越好奇,但往往被大多数主流报道弄糊涂,对AI的潜在效用还只是触及表面。
作者婚礼休假期间发现,亲友对AI既好奇又困惑,主流报道易误导,AI潜在用途仅被浅层探索。
@natolambert:希望看到智能体数量的缩放定律。这对AI未来的许多讨论似乎至关重要——如果群体中智能体数量的扩展与单模型推理中思维链推理时间的扩展同等关键的话。
智能体数量扩展的缩放定律亟待研究,或与思维链扩展同等关键,深刻影响AI未来讨论。
@natolambert: 当大家因我为OpenAI/Anthropic在某特定领域的辩护而愤怒时,我们已有大量新颖、有趣且强大的开放模型,比前沿实验室的纷争更值得关注。
大家别为我维护OpenAI/Anthropic而愤怒,多得是强大有趣的开源模型,比关注前沿实验室的八卦更有价值。
@natolambert:我认为OpenAI或Anthropic的任何研究人员直接查看特定用户数据的概率为0%。科技公司对此类行为的管控严得惊人——比如我在Meta工作时,我觉得这样做(或类似行为)会立刻被解雇。
OpenAI或Anthropic的研究人员直接查看特定用户数据的可能性为零,科技公司管控严格,如在Meta会立即被解雇。
@natolambert:今年没怎么跑步,但在山里跑了22英里检查状态,依然能行。美好假期结束。
今年少跑,但山间22英里验证体能,依然在线,假期完美收官。
@natolambert: 暂时休假一阵,是时候庆祝和休息了 :)
@natolambert 暂时休假,庆祝并好好休息。
在疯狂时代提前感受RSI影响,给朋友寄实体书、办活动、与初学AI的学生交流,这些都值得做。AGI无法取代许多事,但我们容易忘记。我将多走访几所大学!
提前感受AI变革期,寄书、办活动、与学生交流皆可贵。AGI难取代人情,勿忘初心,多访大学。
@natolambert:我想这将是我指导的第一届MATS学员班!我遇见了许多优秀的MATS校友,很兴奋能做出贡献。
首次指导MATS学员班,结识众多优秀校友,期待贡献力量。
@natolambert:我认为我和@xeophon为ATOM工作设计的RAM分数是一个非常可靠的指标。若仅按我们工件策展中30天内的RAM分数排名,所有模型都相当扎实。
RAM分数是可靠指标,按30天RAM分数排名,所有模型表现都很扎实。
@natolambert:顺便说一句,如果你是个作家,却没有经常为“自己还行不行”而抓狂,那你做得不对。正是这种焦虑推动你前进。
作家若不为“才华是否尚存”而焦虑,就不算入行;这种焦虑正是前进的动力。
@natolambert:我们应当设立独立组织,获取这些训练运行的完整细节以进行监控,而非等到各种事故发生之后。
应建立独立组织,访问训练运行全程细节以监控安全,而非事后再查。
@natolambert:Claude在治愈癌症上被抢先了,没戏了
Claude在治愈癌症方面被人抢先,完蛋了。
@natolambert:个人里程碑:@interconnectsai 达成1000位铁杆粉丝!实现长期目标感觉太棒了。
个人里程碑:@interconnectsai 达成1000位铁杆粉丝,实现长期目标。作为AI独立声音,付费支持助力长远发展、扩大影响。
@natolambert:我常告诉很多人,读博对职业发展并非良策,但它在个人成长和成就感上的价值可能远高于此,这或许更值得考量。我需思考如何权衡这一点。
读博不利职业发展,但个人成长与成就感可能更珍贵,需权衡其价值。
@natolambert:英伟达对开源AI的乐观,类似Meta和谷歌投资免费互联网的逻辑——更多接入会带来好事,AI机会将大爆发。
英伟达类比Meta和谷歌投资免费互联网,相信开源AI将带来更多机会和爆发式增长。
@natolambert:开源AI的核心在于训练配方本身,它最接近Linux和开源软件。模型权重是暂时的。Nvidia公开构建模型,以便日后人人都能构建自己的模型,避免智能垄断。
开源AI核心在训练配方而非模型权重;Nvidia公开构建模型,使人人可自建,避免智能垄断。
中文标题
OLMo 1-3对科学贡献仍被低估,希望构建时能更多宣传其价值。
@natolambert: 荒地 https://t.co/0gjqcZB2LO
分享关于“荒地”的推特内容及链接。
@natolambert:这事发生在12个月前……
此事发生于一年前。
已修复。感谢@huggingface团队!
已修复问题,感谢Hugging Face团队支持。
NVIDIA发布MOPD专家模型,推动研究更易获取,但模型体量庞大。
NVIDIA发布MOPD专家模型,降低研究门槛,但模型庞大。
@natolambert: 在@xeophon的敦促下,我补充了一个关键细节。中国数据产业狂飙。
经@xeophon敦促补充关键细节:近期群聊多次讨论中国数据产业,较四月访问时变化巨大。
@natolambert: GLM 5.3 笔记,以及为什么我们不应再对中国这些极强模型感到惊讶(这多半是在说服我自己——是的,这些模型货真价实)
作者承认对GLM 5.3等中国模型的强大曾存否认,如今认为它们真实可靠,无需再惊讶。
告别西雅图!这是我人生和职业生涯中美妙的阶段。开启新冒险(和山峦)。
告别西雅图,人生与职业的美妙阶段结束,开启新冒险与山野之旅。
中文标题
Z ai“刷榜”争议:真相复杂多元,既为营销重视公开基准,也未过度牺牲实用性。