Prompt 语宙Prompt 语宙
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
阅读: Motion Anything – 腾讯联合京东等高校推出的多模态运动生成框架
Share
通知 阅读更多
Font Resizer字体
Font Resizer字体
Prompt 语宙Prompt 语宙
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
已有帐户? 登陆
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
Motion Anything – 腾讯联合京东等高校推出的多模态运动生成框架
Prompt 语宙 > AIGC 资讯 > Motion Anything – 腾讯联合京东等高校推出的多模态运动生成框架
AIGC 资讯

Motion Anything – 腾讯联合京东等高校推出的多模态运动生成框架

Prompt 语宙研究院
最近更新: 2026年6月8日 上午11:48
3D与空间智能 AI智能体 AI视频生成 开源大模型
SHARE
⚡ Prompt 语宙 AI 导读 · 30 秒核心看点
  • 支持文本、音乐或双条件驱动的人类运动生成,兼顾质量、连贯性与可控性。
  • 通过注意力掩码建模与时间/空间对齐变换器,实现关键帧和动作的细粒度控制。
  • 配套 TMD 数据集含 2153 对文本-音乐-舞蹈样本,为多模态运动生成提供新基准。

Motion Anything是什么

Motion Anything 是澳大利亚国立大学、悉尼大学、腾讯、麦吉尔大学、京东等机构推出的多模态运动生成框架,根据文本、音乐或两者的组合生成高质量、可控的人类运动。Motion Anything引入基于注意力的掩码建模方法,实现对运动序列中关键帧和动作的细粒度控制,解决现有方法无法根据条件优先生成动态内容的问题。框架基于时间自适应和空间对齐变换器,有效整合多种模态条件,提升生成运动的连贯性和多样性。同时推出 Text-Music-Dance (TMD) 数据集,包含 2153 对文本、音乐和舞蹈的配对样本,为多模态运动生成的研究提供了新的基准。

阅读目录
  • Motion Anything是什么
  • Motion Anything的主要功能
  • Motion Anything的技术原理
  • Motion Anything的项目地址
  • Motion Anything的应用场景

Motion Anything

Motion Anything的主要功能

  • 多模态条件下的运动生成:根据文本描述、音乐或两者的组合生成高质量的人类运动。
  • 细粒度控制:基于注意力机制,对运动的关键帧和动作进行细粒度控制,实现更精准的生成效果。
  • 动态优先级调整:根据给定条件(如文本或音乐)动态调整运动生成的优先级,优先生成与条件最相关的动态帧和身体部位。
  • 跨模态对齐:将文本、音乐和运动在时间和空间维度上进行有效对齐,提升生成运动的连贯性和一致性。

Motion Anything的技术原理

  • 基于注意力的掩码建模:基于注意力机制选择与条件(文本或音乐)最相关的运动部分进行掩码。在生成过程中,模型优先恢复被掩码的关键帧和动作,实现对动态内容的聚焦。
  • 时间自适应变换器:根据条件的模态(文本、音乐或两者的组合),动态调整注意力计算。让运动的关键帧与文本中的关键词或音乐的节拍对齐,提升时间维度上的连贯性。
  • 空间对齐变换器:将条件和运动嵌入重新排列,暴露空间维度。恢复被掩码的关键动作,确保运动与条件在空间上的一致性。
  • 多模态条件编码:同时处理文本和音乐等多种模态条件,基于自适应编码器将不同模态的信息整合到运动生成中。实现多模态条件下的可控运动生成,提升生成效果。
  • 数据集支持:提供新的 Text-Music-Dance (TMD) 数据集,包含 2153 对文本、音乐和舞蹈的配对样本,为多模态运动生成提供丰富的数据支持。

Motion Anything的项目地址

  • 项目官网:https://steve-zeyu-zhang.github.io/MotionAnything/
  • GitHub仓库:https://github.com/steve-zeyu-zhang/MotionAnything
  • arXiv技术论文:https://arxiv.org/pdf/2503.06955

Motion Anything的应用场景

  • 影视动画:快速生成高质量动画,减少制作成本,提升视觉效果。
  • VR/AR:为虚拟角色生成逼真动作,增强沉浸感,实现自然交互。
  • 游戏开发:根据剧情或音乐生成角色动作,提升游戏的趣味性和流畅性。
  • 人机交互:生成自然动作,让机器人与人类交互更友好,实现语音指令驱动的动作生成。
  • 教育与培训:生成标准动作示范,辅助体育、舞蹈等教学,提升培训效果。
❓ 常见问题解答(FAQ)
Motion Anything 主要解决什么问题?

它主要解决现有运动生成方法难以根据文本或音乐条件优先生成动态内容、且控制不够细的问题。该框架通过注意力掩码建模和跨模态对齐,让模型更准确地生成与条件匹配的人类运动。

Motion Anything 可以输入哪些条件生成动作?

可以使用文本、音乐,或者文本与音乐的组合来生成动作。模型会根据不同模态自适应调整注意力与对齐方式,从而输出更连贯、可控的人类运动。

TMD 数据集有什么作用?

TMD 数据集包含 2153 对文本、音乐和舞蹈配对样本,为多模态运动生成研究提供训练与评测基准。它有助于验证模型在文本、音乐联合条件下的生成效果。

🔬 语宙深潜追问 · 进阶实操拆解
多模态运动生成如何保证关键帧可控?

可把关键帧作为显式条件输入,并用时间对齐模块约束动作段落与音乐节拍、文本语义同步。训练时加入局部重建损失和时序一致性约束,能明显提升可控性。

TMD这类数据集该怎么设计更有效?

要覆盖动作类型、音乐风格和文本描述的组合多样性,同时保留节拍、速度和情绪标签。数据越结构化,模型越容易学到可迁移的对齐规律,而不是死记动作模板。

🗳️ 读者观点微投票 · 您的实战立场是?
文本音乐生成动作,先控节奏还是姿态?
🕸️ 语宙向量知识图谱 · 语义强关联深度内链
🐋 所属权威专题:DeepSeek 深度实战与部署 →
  • Large Motion Model – 商汤科技联合南洋理工推出的统一多模态运动生成模型
  • DreaMoving – 阿里开源的基于扩散模型的人类视频生成框架
  • MimicMotion – 腾讯联合上海交大推出的AI视频生成框架
  • 腾讯开源HY-Motion 1.0:一句话生成3D动作,影视游戏数字人必备AI模型
🏛️ Prompt 语宙研究院 · Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
📄 Markdown 纯净版
💡 这篇内容对您有启发吗?
📡 RSS 订阅✨ 提交 AI 工具 / 合作
🚀 Prompt 语宙 AI 创作者生态:探索 2,800+ 全球实用 AI 工具与高精度生图提示词咒语库
🧭 语宙 AI 导航 (ai.paooo.com)🎨 AI 生图 Prompt 库📚 核心专题导航⚡ AIGC 早报生成器
ViiTorVoice – 云上曲率推出的 AI 语音合成模型
Parler-TTS – Hugging Face开源的文本转语音模型
Bernini – 字节跳动开源的统一视频生成与编辑框架
Wan-Dancer – 阿里通义开源的人像舞蹈视频生成模型
ShopMate AI
TAGGED:3D与空间智能AI智能体AI视频生成开源大模型
分享
Email 复制链接 打印
Share
Prompt 语宙研究院 头像
ByPrompt 语宙研究院
Follow:
Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
上一篇 OLMo 2 32B – Ai2 推出的最新开源语言模型 OLMo 2 32B – Ai2 推出的最新开源语言模型
下一篇 DiffBrush – 北邮联合清华等机构推出的图像生成与编辑框架 DiffBrush – 北邮联合清华等机构推出的图像生成与编辑框架
Ad image
Ad image

最近更新

花旗银行、摩根大通与美国银行等多家大型商业银行收紧服务条款,明确用户授权第三方 AI 智能体受损需自行担责
哪怕被黑客盗刷也不赔!花旗、摩根大通与美银等五大银行集体改写条款:使用第三方AI智能体风险由客户全权自担,生态入口博弈全面打响
AIGC 资讯
LangSmith for Coding Agents 代码智能体按 PR 结果核算成本与 ROI 官方封面图
340亿美元编码AI开销如何算清账?LangSmith上线代码智能体ROI追踪:按PR结果归因成本、五大工具全统一与线程上下文通胀治理指南
最新趋势
Axiom Math 利用 AI 多智能体集群完成 1.5 万页有限单群分类定理(CFSG)与 7500 页 Stacks 项目数学形式化验证的可视化点阵图
4300万行代码堪比Linux内核!Axiom Math用AI智能体攻克1.5万页“庞大定理”与Stacks项目形式化验证:百个里程碑与分层多智能体架构全拆解
最新趋势
印度具身智能数据初创公司 Humyn Labs 联合创始人 Ishank Gupta(左)与 Manish Agarwal(右)
半年营收破千万且90%来自美国!印度物理AI数据创企Humyn Labs获4700万美元A轮:双摄硬件、2100万债权垫资与20国采集网全拆解
AIGC 资讯

相关推荐

谷歌Gemini 2.5 Deep Think深度解析:IMO金牌AI模型如何用「并行思考」颠覆复杂推理与科研创新?
AI 工具AIGC 资讯

谷歌Gemini 2.5 Deep Think深度解析:IMO金牌AI模型如何用「并行思考」颠覆复杂推理与科研创新?

Prompt 语宙研究院
AI推理模型 Gemini 2.5 Deep Think 并行思考 稀疏混合专家架构 谷歌AI
FreeScale – 无需微调的推理框架,提升扩散模型生成能力首次实现8K分辨率图像
AIGC 资讯

FreeScale – 无需微调的推理框架,提升扩散模型生成能力首次实现8K分辨率图像

Prompt 语宙研究院
AI视频生成 stable diffusion 大模型微调 开源大模型
爱诗科技发布PixVerse R1:全球首个通用实时世界模型,AI视频生成迈入「即时互动」新时代
AI 工具AIGC 资讯

爱诗科技发布PixVerse R1:全球首个通用实时世界模型,AI视频生成迈入「即时互动」新时代

Prompt 语宙研究院
AIGC AI视频生成 PixVerse R1 实时世界模型 爱诗科技
Gemini 2.0 Flash Thinking – 谷歌推出的最新推理模型,支持百万上下文展示思考路径
AIGC 资讯

Gemini 2.0 Flash Thinking – 谷歌推出的最新推理模型,支持百万上下文展示思考路径

Prompt 语宙研究院
AI办公效率 AI智能体 AI编程 Gemini Google AI
/ Prompt 语宙 /

探索生成式 AI 的无限创作潜能,一站式获取前沿 AIGC 资讯、高阶 Prompt 咒语与全球实用 AI 工具。

核心专栏

  • 语宙 AI 工具导航
  • EVA 视觉抠图工坊Hot
  • 出海数字营销宝典
  • AI 生图咒语灵感库
  • 24H 硅谷 AI 情报流

生态与服务

  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作

标签

开源大模型 AI智能体 AI办公效率 AI绘画提示词 OpenAI 大模型微调 Midjourney AI编程 stable diffusion AI视频生成 ChatGPT 3D与空间智能 HuggingFace AI音频与语音 RAG检索增强 Claude Flux AIGC Gemini 通义千问 Anthropic Llama Cursor DeepSeek Prompt AI Agent Kimi 智谱AI 具身智能 YouTube
Prompt 语宙Prompt 语宙
Follow US
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.