2012 年 10 月，一个用两块游戏显卡训练了五六天的神经网络，把 ImageNet 图像识别错误率从 26% 砍到 15%，整个领域为之改宗。此后五年：ResNet 越过人眼基准、注意力机制埋下 Transformer 的种子、AlphaGo 4:1 击败李世石让全世界重新认识机器学习。本文是「机器学习简史」系列第三篇，用一手论文数据复盘深度学习的黄金五年，也不回避这五年里的「炼金术」之争。

CLIP（Radford et al., 2021）用 4 亿网络图文对做对比学习，零样本在 ImageNet 拿到 76.2%——追平全监督的 ResNet-50。本文拆解对比学习的训练机制、零样本分类的「提示词即分类器」玩法、CLIP 的失效模式，以及它如何成为多模态时代的地基。

鱼羊* 2026-10-11 11:27:08 来源：量子位 Grok Bot我养不起，ds bot不得高低尝尝咸淡？ 鱼羊 发自 凹非寺 量子位 | 公众号QbitAI DeepSeek官方Muse还没来，民间高手们已经迫不及待了。 刚…

henry* 2026-10-11 17:04:31 来源：量子位 一套生成论文初稿的多智能体工作流 henry 发自 凹非寺 量子位 | 公众号 QbitAI 我真求你们了，论文都多得看不过来了，怎么自动写论文的工具还在往外冒！ 最近，…

henry* 2026-10-11 16:59:06 来源：量子位 多模态模型的视觉原生Harness，来了！ henry 发自 凹非寺 量子位 | 公众号 QbitAI 多模态模型的视觉原生Harness，来了！ 最近，何恺明团队在最新…

鹭羽* 2026-10-01 23:06:30 来源：量子位 用ImageNet训练encoder 克雷西 发自 凹非寺 量子位 | 公众号QbitAI 教会AI做ARC抽象推理题的，竟然是猫猫？ 何恺明团队最新论文提出了**NAT-AR…

杰西卡* 2026-09-24 20:58:55 来源：量子位 让自动驾驶“走一步想十步” 杰西卡 发自 ROBO-人 量子位ROBO | 公众号 AI4ROBO 自动驾驶领域再出一篇原创研究论文。** 这篇最新论文，让自动驾驶能“走一步…

AI正火嘛，老马的待遇也算提升了一点：这回至少有房车了（doge）]