鹏程·盘古α(鹏城实验室/华为)

鹏程·盘古α(鹏城实验室/华为)

AI大模型 开源开放 鹏城实验室出品

鹏城实验室联合华为AI智能开源大模型,2000亿参数一键高效调用

一句话简介:业界首个2000亿参数中文预训练生成语言模型,由鹏城实验室与华为联合研发并全面开源。

网站介绍

鹏程·盘古α(PanGu-α)是一个超大规模中文预训练语言模型项目及其开源代码与模型仓库。该项目主要用于自然语言处理领域的文本生成、知识问答、知识检索、阅读理解等任务,支持开发者进行二次开发和行业应用落地。本项目由鹏城实验室牵头,联合华为诺亚方舟实验室、华为中央软件院及北京大学等顶尖科研机构共同研发,属于国家级重大科研成果开源项目。主要面向AI研究人员、算法工程师、自然语言处理开发者以及高校师生。

核心功能/栏目

1. 模型下载与获取:提供2000亿参数大模型及不同参数规模版本的模型权重下载。

2. 开源代码仓库:提供基于MindSpore框架的完整模型训练与推理源代码。

3. 技术报告与文档:提供详细的模型架构设计、训练方法及性能评估的官方学术论文。

4. 自动并行训练指南:展示MindSpore超大规模自动混合并行技术的使用说明与配置方法。

5. 下游任务微调示例:提供知识问答、文本生成等下游任务的微调代码和应用示例。

推荐优势/特点

1. 全国产软硬件生态:基于国产全栈式AI基础设施(MindSpore框架、CANN异构计算、昇腾910芯片、ModelArts平台)训练,实现核心技术自主可控。

2. 超大规模与强泛化能力:拥有2000亿参数,在零样本、单样本及小样本学习任务中表现优异,多项中文自然语言处理指标领先业界。

3. 首创ALM架构:首创顺序自回归预训练语言模型,引入随机词序生成,同时支持理解和生成任务,具备持续学习与演化能力。

4. 全面开源共享:代码与模型逐步全开源,大幅降低国内开发者使用超大规模中文大模型的技术门槛。

使用方法/入口指引

进入方式:开发者可通过Gitee(码云)或OpenI启智社区搜索“PanGu-Alpha”或“盘古α”进入官方开源仓库。相关技术论文可通过arXiv平台搜索获取。

使用步骤:首先配置基于昇腾AI处理器的硬件环境或兼容的算力平台;其次安装MindSpore全场景AI计算框架;最后根据仓库中的说明文档,下载模型权重并运行推理或微调脚本即可进行二次开发。

同类/相关网站推荐

1. MindSpore(昇思)开源社区:华为开源的全场景AI计算框架,也是盘古α的底层训练框架官方网站。

2. OpenI启智社区:鹏城实验室主导的开源社区,提供盘古α的模型托管、代码开源与算力支持。

3. 鹏城实验室官网:支撑盘古α训练的“鹏城云脑”国家级重大科技基础设施的官方介绍与管理平台。

4. 华为云盘古大模型:盘古α技术的商业化与行业落地演进版本,面向政企客户提供成熟的行业大模型服务。

内容反馈
回到顶部
客服QQ
  • 客服QQ点击这里给我发消息