老金出海AI · GO GLOBAL
技术思想家Ilya Sutskever · 2023年8月14日 · 57:21

Ilya Sutskever:关于泛化的一点观察

提示:播放器右下角「字幕」可开启 / 切换字幕语言;如视频提供中文字幕,可直接切换。

项目详情
嘉宾Ilya Sutskever
频道Simons Institute for the Theory of Computing
日期2023年8月14日
时长57:21
格式视频
主题#llm

中文导读

Ilya Sutskever 是 OpenAI 联合创始人、前首席科学家。这场 2023 年伯克利演讲是他极少的公开思想浓缩:为什么「预测下一个词」足以学到世界的深层结构、无监督学习为什么有效。技术圈反复引用的「压缩即智能」思想,源头之一在这里。

关键观点

  • 泛化之谜:为什么大模型在没见过的数据上也好用?Ilya 给出「压缩」的统一解释。
  • 预测下一个词 = 压缩互联网:要压得狠,必须学到文本背后的世界规律。
  • 无监督学习有效的真正原因:数据之间存在共享的深层结构,模型把它挖了出来。
  • 「感受 AGI」:能力随规模持续涌现,真正的难点转到测量与驾驭。
  • 理论品味决定研究方向:这场演讲解释了 OpenAI 多年技术押注背后的世界观。

原视频信息

讲者
Ilya Sutskever
频道
Simons Institute for the Theory of Computing
场合
Simons Institute(伯克利)研讨会演讲
日期 · 时长
2023年8月14日 · 57:21

An Observation on Generalization

在 YouTube 观看原片

📚 来源与延伸

本页内容基于以下权威来源整理,可验证、可引用。

引用规范:请注明来源为老金出海(laojinchuhai.com)并保留原文链接。

老金出品 · 用 AI 提效

AllModelsAPI一个 key,调多家大模型

AllModelsAPI 是多模型 API 中转站:一个 key 调多家模型,OpenAI 兼容接口,现有代码改个 base_url 就能迁。它不是演示品——我们自己的生产环境每天都在用。

更多老金产品:Sellenca · 365AIOrg · 365Loopa · 365 Ops · 365Skill

相关内容

按主题 / 人物 / 专区自动互通