# Motion Anything – 腾讯联合京东等高校推出的多模态运动生成框架

- Link: https://paooo.com/aigc-news/21047/
- Published: 2026-06-08T11:48:06+08:00
- Author: Prompt 语宙研究院

⚡ [Prompt](https://paooo.com/ai-image-prompts/) 语宙 AI 导读 · 30 秒核心看点

 * 支持文本、音乐或双条件驱动的人类运动生成，兼顾质量、连贯性与可控性。
 * 通过注意力掩码建模与时间/空间对齐变换器，实现关键帧和动作的细粒度控制。
 * 配套 TMD 数据集含 2153 对文本-音乐-舞蹈样本，为多模态运动生成提供新基准。

## Motion Anything是什么

Motion Anything 是澳大利亚国立大学、悉尼大学、腾讯、麦吉尔大学、京东等机构推出的
多模态运动生成框架，根据文本、音乐或两者的组合生成高质量、可控的人类运动。Motion
Anything引入基于注意力的掩码建模方法，实现对运动序列中关键帧和动作的细粒度控制，
解决现有方法无法根据条件优先生成动态内容的问题。框架基于时间自适应和空间对齐变换
器，有效整合多种模态条件，提升生成运动的连贯性和多样性。同时推出 Text-Music-Dance(
TMD) 数据集，包含 2153 对文本、音乐和舞蹈的配对样本，为多模态运动生成的研究提供了
新的基准。

阅读目录

 * [Motion Anything是什么](https://paooo.com/aigc-news/21047/#motion-anything%e6%98%af%e4%bb%80%e4%b9%88)
 * [Motion Anything的主要功能](https://paooo.com/aigc-news/21047/#motion-anything%e7%9a%84%e4%b8%bb%e8%a6%81%e5%8a%9f%e8%83%bd)
 * [Motion Anything的技术原理](https://paooo.com/aigc-news/21047/#motion-anything%e7%9a%84%e6%8a%80%e6%9c%af%e5%8e%9f%e7%90%86)
 * [Motion Anything的项目地址](https://paooo.com/aigc-news/21047/#motion-anything%e7%9a%84%e9%a1%b9%e7%9b%ae%e5%9c%b0%e5%9d%80)
 * [Motion Anything的应用场景](https://paooo.com/aigc-news/21047/#motion-anything%e7%9a%84%e5%ba%94%e7%94%a8%e5%9c%ba%e6%99%af)

![Motion Anything](https://paooo.com/wp-content/uploads/2026/06/Motion-Anything-
website2-1.avif)

## Motion Anything的主要功能

 * **多模态条件下的运动生成**：根据文本描述、音乐或两者的组合生成高质量的人类运动。
 * **细粒度控制**：基于注意力机制，对运动的关键帧和动作进行细粒度控制，实现更精准
   的生成效果。
 * **动态优先级调整**：根据给定条件（如文本或音乐）动态调整运动生成的优先级，优先
   生成与条件最相关的动态帧和身体部位。
 * **跨模态对齐**：将文本、音乐和运动在时间和空间维度上进行有效对齐，提升生成运动
   的连贯性和一致性。

## Motion Anything的技术原理

 * **基于注意力的掩码建模**：基于注意力机制选择与条件（文本或音乐）最相关的运动部分
   进行掩码。在生成过程中，模型优先恢复被掩码的关键帧和动作，实现对动态内容的聚焦。
 * **时间自适应变换器**：根据条件的模态（文本、音乐或两者的组合），动态调整注意力
   计算。让运动的关键帧与文本中的关键词或音乐的节拍对齐，提升时间维度上的连贯性。
 * **空间对齐变换器**：将条件和运动嵌入重新排列，暴露空间维度。恢复被掩码的关键动作，
   确保运动与条件在空间上的一致性。
 * **多模态条件编码**：同时处理文本和音乐等多种模态条件，基于自适应编码器将不同模
   态的信息整合到运动生成中。实现多模态条件下的可控运动生成，提升生成效果。
 * **数据集支持**：提供新的 Text-Music-Dance (TMD) 数据集，包含 2153 对文本、音乐
   和舞蹈的配对样本，为多模态运动生成提供丰富的数据支持。

## Motion Anything的项目地址

 * **项目官网**：[https://steve-zeyu-zhang.github.io/MotionAnything/](https://steve-zeyu-zhang.github.io/MotionAnything/?utm_source=ai-bot.cn)
 * **GitHub仓库**：[https://github.com/steve-zeyu-zhang/MotionAnything](https://github.com/steve-zeyu-zhang/MotionAnything)
 * **arXiv技术论文**：[https://arxiv.org/pdf/2503.06955](https://arxiv.org/pdf/2503.06955)

## Motion Anything的应用场景

 * **影视动画**：快速生成高质量动画，减少制作成本，提升视觉效果。
 * **VR/AR**：为虚拟角色生成逼真动作，增强沉浸感，实现自然交互。
 * **游戏开发**：根据剧情或音乐生成角色动作，提升游戏的趣味性和流畅性。
 * **人机交互**：生成自然动作，让机器人与人类交互更友好，实现语音指令驱动的动作生成。
 * **教育与培训**：生成标准动作示范，辅助体育、舞蹈等教学，提升培训效果。

❓ 常见问题解答（FAQ）

Motion Anything 主要解决什么问题？

它主要解决现有运动生成方法难以根据文本或音乐条件优先生成动态内容、且控制不够细的
问题。该框架通过注意力掩码建模和跨模态对齐，让模型更准确地生成与条件匹配的人类运动。

Motion Anything 可以输入哪些条件生成动作？

可以使用文本、音乐，或者文本与音乐的组合来生成动作。模型会根据不同模态自适应调整
注意力与对齐方式，从而输出更连贯、可控的人类运动。

TMD 数据集有什么作用？

TMD 数据集包含 2153 对文本、音乐和舞蹈配对样本，为多模态运动生成研究提供训练与评
测基准。它有助于验证模型在文本、音乐联合条件下的生成效果。

🔬 语宙深潜追问 · 进阶实操拆解

多模态运动生成如何保证关键帧可控？

可把关键帧作为显式条件输入，并用时间对齐模块约束动作段落与音乐节拍、文本语义同步。
训练时加入局部重建损失和时序一致性约束，能明显提升可控性。

TMD这类数据集该怎么设计更有效？

要覆盖动作类型、音乐风格和文本描述的组合多样性，同时保留节拍、速度和情绪标签。数据
越结构化，模型越容易学到可迁移的对齐规律，而不是死记动作模板。

🗳️ 读者观点微投票 · 您的实战立场是？

文本音乐生成动作，先控节奏还是姿态？

🕸️ 语宙向量知识图谱 · 语义强关联深度内链

[🐋 所属权威专题：DeepSeek 深度实战与部署 →](https://paooo.com/topics/deepseek/)

 * [Large Motion Model – 商汤科技联合南洋理工推出的统一多模态运动生成模型](https://paooo.com/aigc-news/24496/)
 * [DreaMoving – 阿里开源的基于扩散模型的人类视频生成框架](https://paooo.com/aigc-news/28021/)
 * [MimicMotion – 腾讯联合上海交大推出的AI视频生成框架](https://paooo.com/aigc-news/27765/)
 * [腾讯开源HY-Motion 1.0：一句话生成3D动作，影视游戏数字人必备AI模型](https://paooo.com/aigc-news/12205/)

[🏛️ Prompt 语宙研究院](https://paooo.com/author/paooo-research/) · Prompt 语宙研究院（
paooo.com Research）专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示
词工程（Prompt Engineering）与全球高增长 AI 生产力工具实测追踪，致力于为中文开发
者与创作者提供一手、可复现的深度技术洞察。

[📄 Markdown 纯净版](https://paooo.com/aigc-news/21047/?format=md)

💡 这篇内容对您有启发吗？

[📡 RSS 订阅](https://paooo.com/feed/)[✨ 提交 AI 工具 / 合作](https://paooo.com/submit-tool/)

**🚀 Prompt 语宙 AI 创作者生态：**探索 2,800+ 全球实用 AI 工具与高精度生图提示词
咒语库

[🧭 语宙 AI 导航 (ai.paooo.com)](https://ai.paooo.com/)[🎨 AI 生图 Prompt 库](https://paooo.com/ai-image-prompts/)
[📚 核心专题导航](https://paooo.com/topics/)[⚡ AIGC 早报生成器](https://paooo.com/mtool/)
