XTuner 是一个高效、灵活、全能的轻量化大模型微调工具库。 XTuner 支持微调大语言模型。数据集预处理指南请查阅文档。 步骤 0,准备配置文件。XTuner 提供多个开箱即用的配置文件,用户可以通过下列命令查看: 例如,我们可以利用 QLoRA 算法在 oasst1 数据集上 ...
该模型使用 Math 和高等数学习题及其解析融合的数据集,基于 InternLM2-Math-7B 模型,通过 xtuner 微调,专门设计用于解答高等数学问题。 数字生命: 本项目将以我为原型,利用特制的数据集对大语言模型进行微调,致力于创造一个能够真正反映我的个性特征的AI ...