---
title: mPLUG-Owl2
canonical_url: "https://www.modelscope.cn/models/damo/mPLUG-Owl2"
md_url: "https://www.modelscope.cn/models/damo/mPLUG-Owl2.md"
repository: damo/mPLUG-Owl2
last_updated: 2023-11-08
license: "Apache License 2.0"
pipeline_tag: multimodal-dialogue
tasks:
  - multimodal-dialogue
model_type:
  - mplug-owl2
library_name:
  - pytorch
frameworks:
  - pytorch
language:
  - en
domain:
  - multi-modal
downloads: 101172
stars: 12
tags:
  - transformer
  - mPLUG
  - Multimodal
  - ChatGPT
  - GPT
  - Alibaba
---

# mPLUG-Owl2

> mPLUG-Owl2 - damo 在 ModelScope 开源的模型。mPLUG-Owl2官方权重

damo/mPLUG-Owl2 是 ModelScope 魔搭社区上的multimodal-dialogue模型，采用 Apache License 2.0 许可。

- **Repository**: damo/mPLUG-Owl2
- **License**: Apache License 2.0
- **Tasks**: multimodal-dialogue
- **Tags**: transformer, mPLUG, Multimodal, ChatGPT, GPT, Alibaba
- **Downloads**: 101172
- **Stars**: 12
- **Last updated**: 2023-11-08

Source: https://www.modelscope.cn/models/damo/mPLUG-Owl2

---

# mPLUG-Owl2介绍
mPLUG-Owl2是一种面向多模态语言模型的模块化的训练范式。其能学习与语言空间相适应的视觉知识，并支持在多模态场景(支持图片、文本输入)下进行多轮对话。它涌现多图关系理解，场景文本理解和基于视觉的文档理解等能力。

## 模型描述
mPLUG-Owl2基于mPLUG-2模块化的思想，通过多阶段分别训练模型的视觉底座与语言模型，使其视觉知识能与预训练语言模型紧密协作，达到了显著优于主流多模态语言模型的效果。
![Training paradigm and model overview](assets/mplug_owl2_radar.png)
