
lmms-finetune
统一的代码库,用于微调大型多模态模型
- 提供统一结构的微调框架,简化集成和微调过程
- 支持全微调、lora、q-lora等多种微调策略
- 保持代码库的简洁性,便于理解和修改
- 支持多种类型的LMMs,包括单图像模型、多图像/交错图像模型和视频模型
- 提供详细的文档和示例,帮助用户快速上手
- 灵活的代码库,支持自定义和快速实验
产品详情
lmms-finetune是一个统一的代码库,旨在简化大型多模态模型(LMMs)的微调过程。它提供了一个结构化的框架,允许用户轻松集成最新的LMMs并进行微调,支持全微调和lora等策略。代码库设计简单轻量,易于理解和修改,支持包括LLaVA-1.5、Phi-3-Vision、Qwen-VL-Chat、LLaVA-NeXT-Interleave和LLaVA-NeXT-Video等多种模型。