---
title: "FlagevalMM – 智源开源的多模态模型评测框架"
url: "https://paooo.com/aigc-news/25170/"
author: "Prompt 语宙研究院"
published_at: "2026-07-12T06:48:29+08:00"
updated_at: "2026-07-12T06:48:29+08:00"
categories: "AIGC 资讯"
tags: "AI智能体, Claude, Sora, 大模型微调, 开源大模型"
source: "Prompt 语宙 (https://paooo.com)"
ai_tools_directory: "语宙 AI 导航 (https://ai.paooo.com)"
---

# FlagevalMM – 智源开源的多模态模型评测框架

> 来源：[Prompt 语宙 (paooo.com)](https://paooo.com/aigc-news/25170/) · 作者：Prompt 语宙研究院 · 发布时间：2026-07-12

## AI 30 秒核心看点 (TL;DR)

- 评测与推理解耦，统一多模态模型评测流程，提升适配新任务与新模型的效率。
- 支持VQA、图像检索、文生图等任务，并兼容QwenVL、LLaVA及API模型。
- 提供插件化与多后端适配能力，便于在VLLM、SGLang等引擎间切换。

## FlagevalMM是什么

FlagEvalMM是北京智源人工智能研究院开源的多模态模型评测框架，能全面评估处理文本、图像、视频等多种模态的模型，支持多种任务和指标。框架采用评测与模型推理解耦的设计，统一视觉语言模型、文生图、文生视频和图文检索等多种模型的评测流程，提升评测效率，便于快速适配新任务和模型。

## FlagEvalMM的主要功能

- **多模态模型支持**：支持评估多种类型的多模态模型，包括视觉问答(VQA)、图像检索、文本到图像生成等。

- **全面的基准测试和指标**：支持新的和常用的基准测试和评估指标，全面衡量模型性能。

- **模型库集成**：提供模型库(model_zoo)，支持多种流行多模态模型的推理，如QWenVL和LLaVA，并与基于API的模型如GPT、Claude、HuanYuan等集成。

- **多后端支持**：支持多种后端引擎进行推理，如VLLM、SGLang等，适应不同的模型和需求。

## FlagEvalMM的技术原理

- **评测与模型推理解耦**：FlagEvalMM将评测逻辑与模型推理逻辑分离，让评测框架独立于模型更新，提高框架的灵活性和可维护性。

- **统一的评测架构**：基于统一的架构处理不同类型的多模态模型评测，减少重复代码，提高代码的复用性。

- **插件化设计**：框架采用插件化设计，支持用户添加新的插件扩展支持的模型、任务和评估指标。

- **后端引擎适配**：框架支持多种后端引擎，基于适配层处理不同后端引擎的接口差异，让用户在不同的引擎之间无缝切换。

## FlagEvalMM的项目地址

- **GitHub仓库**：[https://github.com/flageval-baai/FlagEvalMM](https://github.com/flageval-baai/FlagEvalMM)

## FlagEvalMM的应用场景

- **学术研究**：研究人员评估和比较不同多模态模型在视觉问答、图像检索等任务上的性能，发表学术论文。

- **工业应用**：企业测试和优化自家的多模态产品，比如智能客服系统，提升用户体验。

- **模型开发**：开发者在开发新的多模态模型时，进行模型评估，确保模型在实际应用中的表现符合预期。

- **教育领域**：教育机构评估教学辅助系统中的多模态交互模型，提高教学效果。

- **内容创作**：内容创作者评估和选择适合生成图文内容的模型，提高内容创作的效率和质量。

## 常见问题解答 (FAQ)

### FlagevalMM主要评测什么模型？
FlagevalMM主要用于评测多模态模型，覆盖视觉问答、图像检索、文本到图像生成等任务，也可用于文本、图像、视频等多模态能力的综合评估。

### FlagevalMM支持哪些模型和后端？
文章提到它的模型库可支持QwenVL、LLaVA等流行多模态模型，也能集成GPT、Claude、HuanYuan等API模型；后端方面支持VLLM、SGLang等推理引擎。

### FlagevalMM适合哪些使用场景？
适合学术研究中的模型对比、企业多模态产品测试、开发者模型验证，以及教育和内容创作场景中对多模态交互或生成能力的评估。

---
探索 2,800+ 全球实用 AI 工具与官方直达入口：[语宙 AI 导航 (https://ai.paooo.com/)](https://ai.paooo.com/)