<aside> 💡 大模型是发展成为通用人工智能的重要途经,在学术界和工业界都有着非常广泛的应用。书生浦语大模型性能全面领先,被证明是一种非常全面的大模型平台。下面是关于它的全链路体系介绍。
</aside>
Date: 2024/1/9
Author:灯灯
<aside> 📢 全链路体系
</aside>
引言
书生·浦语大模型是什么?
书生·浦语的性能
从模型到应用
需要的框架/工具
全链路是什么?
书生万卷数据库2TB
OpenDatalab数据库80TB
微调工具Xtuner
部署工具LMDeploy
<aside> 📌 SUMMARY: 介绍了书生·浦语的全链条开放体系的各个模块,包括数据、预训练、微调、部署、评测和应用,每个模块都有很好的性能,同时能和很多平台进行对接,我们能够通过使用已经集成在书生·浦语里的优化算法和相关成型算法,以此为基础进行进一步的大模型开发和研究,最终实现将模型微调、部署并投之于应用。
</aside>
<aside> ❓ 一些其他问题
</aside>
Xtuner是什么?
是一个微调框架,能够进行全参数的微调和LoRA低成本微调.
能够在8GB的显存下进行7B的模型的微调
OpenCompass是什么?
是评测的工具,可以给一个模型的各个方面评分
什么是智能体?
可以以大模型为基础,进行一些推理和执行策略(网络的搜索、pythonExecutor)
提供了轻量级智能体框架Lagent
多模态智能体工具箱AgentLego
,给大模型提供更多的工具集合
为什么要微调?