carry 4d77c429bd refactor(schema): 更新 dataset 模型并为 doc 模型添加版本字段
- 在 doc 模型中添加 version 字段,用于表示文档版本
- 将 dataset 模型中的 source_doc 字段类型从 list[doc] 改为 doc,简化数据结构
2025-04-09 18:18:29 +08:00
2025-04-08 12:28:42 +08:00
2025-04-08 13:35:30 +08:00
2025-04-09 09:58:42 +08:00
2025-04-08 13:35:30 +08:00

基于文档驱动的自适应编码大模型微调框架

简介

本人的毕业设计

项目概述

  • 通过深度解析私有库的文档以及其他资源,生成指令型语料,据此对大语言模型进行针对私有库的微调。

项目技术

  • 使用unsloth框架在GPU上实现大语言模型的qlora微调
  • 使用langchain框架编写工作流实现批量生成微调语料
  • 使用tinydb和sqlite实现数据的持久化
  • 使用gradio框架实现前端展示

施工中......

Description
No description provided
Readme MIT 6 MiB
Languages
TeX 63.9%
Python 36.1%