Anthropic News
Anthropic 官方资讯,属于AI 资讯媒体,支持跟踪大模型与 AI 产品的最新动态,适合日常使用。
DeepSpeed 是微软开源的一套深度学习优化工具库,目标是让大模型的训练与推理更省显存、更快。它提供显存分片、混合精度、梯度累积等机制,并集成多种并行训练策略,使得原本需要大量显卡才能跑动的模型,在更小的集群上也能训练。它已被众多训练框架与开源项目采用,成为基础设施层的常见组件。适合有训练需求的研究团队与企业,需要一定的工程经验,开源免费,通常部署在自有集群上。