智源“悟道”大模型

什么是"智源“悟道”大模型"？

悟道·天鹰（Aquila）是一款开源语言大模型，具备中英双语知识、支持商用许可协议，以及符合国内数据合规需求。Aquila系列模型源代码基于 Apache 2.0 协议，模型权重基于《智源Aquila系列模型许可协议》，可用于商业目的。Aquila模型在中英文高质量语料基础上从零开始训练，中文语料约占40%，保证模型在预训练阶段就开始积累原生的中文世界知识。模型持续迭代更新，开源开放。

"智源“悟道”大模型"有哪些功能？

• 支持中英文知识
• 符合国内数据合规需求
• 持续迭代更新

产品特点：

Aquila系列模型包括Aquila-7B、Aquila-33B等基础模型，以及AquilaChat-7B、AquilaChat-33B等对话模型，AquilaCode-multi、AquilaCode-py等文本-代码生成模型。模型参数从70亿到330亿不等，适用于不同场景的需求。

应用场景：

悟道·天鹰模型可应用于对话推理、文本生成、代码生成等多种场景。在对话推理方面，AquilaChat模型支持流畅的文本对话及多种语言类生成任务；在文本生成方面，Aquila模型能够生成高质量的文本内容；在代码生成方面，AquilaCode模型使用高质量过滤且有合规开源许可的代码数据进行训练，可定制代码助手。

"智源“悟道”大模型"如何使用？

1. 环境准备：在本地克隆FlagAI github仓库，安装FlagAI环境。
2. 下载模型：进入Aquila-7B基础模型目录，运行模型推理或微调脚本。
3. 模型推理：运行generate.py进行正常模型推理，或使用generate_bminf.py进行低资源推理。
4. 模型微调：准备微调初始模型，配置hostfile文件，启动训练脚本进行微调。
5. 持续更新：悟道·天鹰Aquila系列模型将持续开源更优版本，敬请关注官方渠道更新。

常见问题：

• 如何下载模型权重？
• 如何进行模型推理？
• 如何进行模型微调？
• 模型更新频率如何？