NVIDIA
概述
NVIDIA(英伟达)是全球领先的 GPU 设计与制造公司,其 GPU 产品从游戏显卡演变为 AI 训练的核心硬件基础设施。
关键内容
- GPU 与深度学习:AlexNet(2012)首次大规模使用 NVIDIA GTX 580 GPU(两块,各3GB显存)进行深度神经网络训练,将训练时间从 CPU 的数月缩短至 5-6 天。这开启了 GPU 作为 AI 算力核心硬件的时代。
- AI 芯片生态:NVIDIA 不仅提供硬件(GPU、Tensor Core),还构建了完整的软件生态——CUDA 并行计算平台、cuDNN 深度学习库、TensorRT 推理引擎。这些工具链使研究人员能够高效利用 GPU 加速训练。
- 产业影响:AlexNet 之后,Google、DeepMind、Facebook、百度等纷纷建立深度学习研究团队,大量采购 NVIDIA GPU。NVIDIA 从游戏显卡公司转型为全球 AI 基础设施的核心供应商,市值从 2012 年的约 100 亿美元增长至 2024 年的超过 3 万亿美元。
- 产品线:消费级(GeForce RTX 系列)、数据中心(A100、H100、B200)、自动驾驶(DRIVE 平台)、边缘计算(Jetson)。H100 等数据中心 GPU 成为大语言模型训练的标配硬件。
来源
- [raw/articles/ai-papers/foundations/paper_03_alexnet.md] — AlexNet 论文精读