M
Megatron-LM
NVIDIA/Megatron-LM
正在进行的大规模训练 transformer 模型的研究
★17.4kstars
Python
NOASSERTION
更新: 今天
📋 项目速览
点击展开
这是什么?一个数据与基础设施领域的large-language-models/model-para工具,用Python构建、开源
作者是谁?由 NVIDIA 团队维护,GitHub 17.4K⭐,在 数据与基础设施 分类 3133 个项目中排名第 106
为什么诞生?数据与基础设施领域快速发展,large-language-models场景缺乏高效方案,Megatron-LM应运而生,专注于简化model-para相关工作流程。
能干什么?核心场景:transformers
怎么用 AI 安装?推荐使用 AI 编码助手根据 GitHub README 自动完成 pip 安装和虚拟环境配置。
🔗 github.com/NVIDIA/Megatron-LM | 官网 https://docs.nvidia.com/megatron-core/developer-guide/latest/get-started/quickstart.html
🔗 github.com/NVIDIA/Megatron-LM | 官网 https://docs.nvidia.com/megatron-core/developer-guide/latest/get-started/quickstart.html
标签
large-language-modelsmodel-paratransformers