基于文档驱动的自适应编码大模型微调框架

简介

本人的毕业设计,这个是mvp分支（MVP 是指最小可行产品Minimum Viable Product），其他功能在master分支中

项目概述

• 通过深度解析私有库的文档以及其他资源，生成指令型语料，据此对大语言模型进行针对私有库的微调。

项目技术（预计）

• 使用unsloth框架在GPU上实现大语言模型的qlora微调
• 使用langchain框架编写工作流实现批量生成微调语料
• 使用tinydb和sqlite实现数据的持久化
• 使用gradio框架实现前端展示

施工中......