【AI前沿洞察】Andrew Karpathy 谈AI -2024.03.27 红杉资本AI论坛

对于AK哥不太了解的朋友们，AK哥联合创立了OpenAI，是Tesla前AI总监，目前属于离职状态，并且在业务时间也在分享关于AI教育相关内容，其中手搓GPT系列也是爆火全网，可以说是AI工程师的宝藏男孩。

他不仅拥有顶尖的AI学术研究背景，还在学界、工业界有过多年经验，参与主导了许多项目，可以说是对前沿AI最有洞察力的几人之一

完整视频可看B站

核心观点提取：

1、LLM OS

• LLM 操作系统（外设：多模态数据；CPU：transformer 架构 LLM，软件 1.0基建：各种框架）
• LLM OS 类比 windows 操作系统：自带应用也支持三方的生态
• • Windows 自带一些默认应用：edge 浏览器，但也支持三方 Chrome浏览器；
  • OpenAI的 LLM OS 也会自带一些 apps，但也可以自己打造三方的Agents

• 目前开发基于LLM能力的APP的状态： 需要时间学会使用这个基础设施

• • 大模型现在的应用就像早期的 iphone app，一开始不好用，后面会越来越好
  • 现在不是LLM成熟到一个类似于安卓的状态，，需要花时间去学会使用现有的软件基建

• LLM OS 的生态：除了类似 Mac + Windows的系统外，还可能有各种开源发行版的 Linux

• • 闭源： GPT、gemini、Anthropic
  • LLaMA 和 Mistral 不是真正的开源，只能算开放权重的模型， 比如只给你操作系统的二进制文件，可能可以微调一下，但是从根本上进行调整不太可能
  • 真正开源的：llm 360（https://www.wpsshop.cn/w/AllinToyou/article/detail/664761