<aside> 💡 大模型是发展成为通用人工智能的重要途经,在学术界和工业界都有着非常广泛的应用。书生浦语大模型性能全面领先,被证明是一种非常全面的大模型平台。下面是关于它的全链路体系介绍。

</aside>

Date: 2024/1/9

Author:灯灯

Topic:

<aside> 📢 全链路体系

</aside>

Untitled

Recall

引言

书生·浦语大模型是什么?

书生·浦语的性能

从模型到应用

需要的框架/工具

全链路是什么?

书生万卷数据库2TB

OpenDatalab数据库80TB

微调工具Xtuner

部署工具LMDeploy

Notes

<aside> 📌 SUMMARY: 介绍了书生·浦语的全链条开放体系的各个模块,包括数据、预训练、微调、部署、评测和应用,每个模块都有很好的性能,同时能和很多平台进行对接,我们能够通过使用已经集成在书生·浦语里的优化算法和相关成型算法,以此为基础进行进一步的大模型开发和研究,最终实现将模型微调、部署并投之于应用。

</aside>

<aside> ❓ 一些其他问题

</aside>

Xtuner是什么?

是一个微调框架,能够进行全参数的微调和LoRA低成本微调.

能够在8GB的显存下进行7B的模型的微调

Untitled

OpenCompass是什么?

是评测的工具,可以给一个模型的各个方面评分

什么是智能体?

可以以大模型为基础,进行一些推理和执行策略(网络的搜索、pythonExecutor)

提供了轻量级智能体框架Lagent

多模态智能体工具箱AgentLego,给大模型提供更多的工具集合

Untitled

为什么要微调?