Ilya Sutskever – 我们正从“扩展规模的时代”迈向“研究的时代”
Ilya与我探讨了SSI的战略、预训练存在的问题、如何提升AI模型的泛化能力,以及如何确保AGI顺利发展。
𝐄𝐏𝐈𝐒𝐎𝐃𝐄 𝐋𝐈𝐍𝐊𝐒(节目链接)
* 文字稿:https://www.dwarkesh.com/p/ilya-sutskever-2
* Apple播客:https://podcasts.apple.com/us/podcast/dwarkesh-podcast/id1516093381?i=1000738363711
* Spotify:https://open.spotify.com/episode/7naOOba8SwiUNobGz8mQEL?si=39dd68f346ea4d49
𝐒𝐏𝐎𝐍𝐒𝐎𝐑𝐒(赞助商)
- Gemini 3是我用过的第一个能发现我未曾预料的关联的模型。我最近写了一篇关于强化学习信息效率的博客文章,Gemini 3帮助我理清了所有思路。它还为我生成了相关图表,并零错误地运行了机器学习小实验。立即在 https://gemini.google 试用Gemini 3。
- Labelbox帮助我创建了一个转录我们节目的工具!过去我在转录方面一直很挣扎,因为我不仅需要逐字稿,还需要经过改写、读起来像文章一样的转录稿。Labelbox帮助我生成了为此所需的*精确*数据。如果您想了解Labelbox如何帮助您(或者您想亲自尝试转录工具),请访问 https://labelbox.com/dwarkesh
- Sardine是一个AI风险管理平台,它汇集了数千个设备、行为和身份信号,帮助您评估用户欺诈和滥用的风险。Sardine还提供一套智能体来自动化调查,以便在欺诈者利用AI扩大攻击规模时,您也能利用AI扩大防御规模。了解更多信息,请访问 https://sardine.ai/dwarkesh
要赞助未来的节目,请访问 https://dwarkesh.com/advertise
𝐓𝐈𝐌𝐄𝐒𝐓𝐀𝐌𝐏𝐒(时间戳)
– 解释模型的锯齿状特性
– 情绪与价值函数
– 我们在扩展什么?
– 为什么人类比模型泛化得更好
– 直击超级智能
– SSI的模型将从部署中学习
– 对齐
– “我们是一家不折不扣的研究时代公司”
– 自我对弈与多智能体
– 研究品味