lmms-finetune

lmms-finetune

统一的代码库,用于微调大型多模态模型

  • 提供统一结构的微调框架,简化集成和微调过程
  • 支持全微调、lora、q-lora等多种微调策略
  • 保持代码库的简洁性,便于理解和修改
  • 支持多种类型的LMMs,包括单图像模型、多图像/交错图像模型和视频模型
  • 提供详细的文档和示例,帮助用户快速上手
  • 灵活的代码库,支持自定义和快速实验

产品详情

lmms-finetune是一个统一的代码库,旨在简化大型多模态模型(LMMs)的微调过程。它提供了一个结构化的框架,允许用户轻松集成最新的LMMs并进行微调,支持全微调和lora等策略。代码库设计简单轻量,易于理解和修改,支持包括LLaVA-1.5、Phi-3-Vision、Qwen-VL-Chat、LLaVA-NeXT-Interleave和LLaVA-NeXT-Video等多种模型。