carry 0a4efa5641 feat(dataset): 添加数据集生成功能
- 新增数据集生成页面和相关逻辑
- 实现数据集名称重复性检查
- 添加数据集对象创建和保存功能
- 优化文档处理和提示模板应用
- 增加错误处理和数据解析
2025-04-20 21:25:51 +08:00
2025-04-20 19:44:11 +08:00
2025-04-12 18:42:36 +08:00
2025-04-08 13:35:30 +08:00
2025-04-08 13:35:30 +08:00

基于文档驱动的自适应编码大模型微调框架

简介

本人的毕业设计

项目概述

  • 通过深度解析私有库的文档以及其他资源,生成指令型语料,据此对大语言模型进行针对私有库的微调。

项目技术

  • 使用unsloth框架在GPU上实现大语言模型的qlora微调
  • 使用langchain框架编写工作流实现批量生成微调语料
  • 使用tinydb和sqlite实现数据的持久化
  • 使用gradio框架实现前端展示

施工中......

Description
No description provided
Readme MIT 6 MiB
Languages
TeX 63.9%
Python 36.1%