EL

evolvinglmms-lab/llava-onevision-2

开发工具

本页由 AI 翻译,技术细节请以原文为准。 查看原文

1227 stars 质量 71 趋势 43Apache-2.0

多模式培训的完全开放框架

概览

多模式培训的完全开放框架 🤗 2 型号 ·数据集 ·技术报告 ·主页 ·编解码 器游乐场 ·虚拟语言语言管理系统(vLLM) ·Discord 🤗 1.5 型号 ·数据集 ·技术报告 ·NeMo ·Discord - 2026-04-30:发布LLaVA-OneVision-2——下一代多模态模型,配备新的LLaVA-OneVision-2-VideoCaption和LLaVA-OneVision-2-空间数据集。- 2026-02-10:发布OneVision-Encoder——编码器对齐视觉编码器,附技术报告。- 2025-12-11:发布LLaVA-OneVision-1.5的强化学习配方,包含项目、代码、数据和模型。- 2025-09-30:发布LLaVA-OneVision-1.5技术报告。 是LLaVA-OneVision家族的下一代版本——一个完全开放的8B多模态模型,将图像、长视频和空间理解统一在单一架构下,整个流水线(数据、编码器、训练、检查点、日志)端到端发布。 不仅仅是统一补丁。

概述(AI 翻译)

多模式培训的完全开放框架

[!重要] 🌟 本项目的核心工作由Glint Lab领导。 想要互动的在线体验,请访问ve2s.ai。

👉 小红树集团 👈

🤗 2 型号 ·数据集 ·技术报告 ·主页 ·编解码 器游乐场 ·虚拟语言语言管理系统(vLLM) ·Discord

🤗 1.5 型号 ·数据集 ·技术报告 ·NeMo ·Discord


新闻

  • 2026-04-30:发布LLaVA-OneVision-2——下一代多模态模型,新增LLaVA-OneVision-2-VideoCaption和LLaVA-OneVision-2-空间数据集。
  • 2026-02-10:发布OneVision-Encoder——与编解码器对齐的视觉编码器,附有技术报告。
  • 2025-12-11:发布LLaVA-OneVision-1.5的强化学习配方,包含项目、代码、数据和模型。
  • 2025-09-30:发布LLaVA-OneVision-1.5技术报告。

目录

  • 引言
  • 结果
  • 评估:复制
  • 方法
  • 模型
  • 数据集
  • 快速启动(4B,单节点)
  • 引用
  • 致谢
  • LLaVA-OneVision-1.5

引言

本页由 AI 翻译,技术细节请以原文为准。

README

以下为原文 README 节选,完整内容请查看原文。

Fully Open Framework for Democratized Multimodal Training

👉 <a href=“asset/xiaohongshu_group.jpeg”>Xiaohongshu Group 👈

🤗 2 Models · Datasets · <a href=“https://arxiv.org/pdf/2605.25979”>Technical Report · <a href=“https://evolvinglmms-lab.github.io/LLaVA-OneVision-2/”>HomePage · <a href=“https://huggingface.co/spaces/FeilongTang/OneVision-Encoder-Codec-View”>Codec Playground · <a href=“https://docs.vllm.ai/en/latest/api/vllm/model_executor/models/llava_onevision2/”>vLLM · <a href=“https://discord.gg/PmdGHMFNP”>Discord

🤗 1.5 Models · Datasets · Technical Report · NeMo · Discord


NEWS

Contents

在 GitHub 查看完整 README

推荐工具

换一个关键词,或者移除筛选条件。

安装

npx skillfish add evolvinglmms-lab/llava-onevision-2
新手?先看 mcpskill.org 教程 →