Prompt 语宙Prompt 语宙
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
阅读: VideoReward – 港中文、清华、快手等联合推出的视频生成偏好数据集及奖励模型
Share
通知 阅读更多
Font Resizer字体
Font Resizer字体
Prompt 语宙Prompt 语宙
搜索 AIGC 资讯、Prompt 咒语与 AI 工具
  • 首页
  • 语宙 AI 导航
  • AIGC 资讯
    • AIGC 早报生成器Hot
    • 最新趋势
    • AI 工具
    • 热门资源
    • 强化 AI 学习
  • AI 绘图
    • Prompt 实战
    • AI 绘画教程
    • 模型精选
  • AI 图库
    • 人物
    • 展台场景
    • Banner
    • 游戏
    • 动物
    • 食物
    • 自然
    • 背景
    • 海报
    • 建筑
    • 室内设计
  • 出海数字营销宝典
  • AI 生图 Prompt
    • 写实人像
    • 产品与广告
    • 游戏资产与 3D
    • 界面与图标
    • 建筑与室内
    • 动漫与插画
    • 风景与自然
已有帐户? 登陆
  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.
VideoReward – 港中文、清华、快手等联合推出的视频生成偏好数据集及奖励模型
Prompt 语宙 > AIGC 资讯 > VideoReward – 港中文、清华、快手等联合推出的视频生成偏好数据集及奖励模型
AIGC 资讯

VideoReward – 港中文、清华、快手等联合推出的视频生成偏好数据集及奖励模型

Prompt 语宙研究院
最近更新: 2026年6月9日 上午10:53
AI视频生成 大模型微调 开源大模型
SHARE
⚡ Prompt 语宙 AI 导读 · 30 秒核心看点
  • 18.2 万条人类偏好标注,覆盖 VQ、MQ、TA 三维度,专为视频生成优化。
  • 提出 Flow-DPO、Flow-RWR 与 Flow-NRG 三种对齐方法,兼顾训练与推理阶段。
  • 实验表明可提升视频连贯性和文本对齐,Flow-DPO 效果优于 Flow-RWR 与 SFT。

VideoReward是什么

VideoReward 是香港中文大学、清华大学、快手科技等联合创建的视频生成偏好数据集及奖励模型。包含182,000条标注数据,涵盖视觉质量、运动质量和文本对齐三个维度,用于优化视频生成模型。奖励模型基于人类反馈,通过多维度对齐算法(如Flow-DPO、Flow-RWR)和推理时技术(如Flow-NRG),显著提升视频生成的连贯性和文本对齐效果。Flow-NRG支持用户自定义权重,满足个性化需求。

阅读目录
  • VideoReward是什么
  • VideoReward的主要功能
  • VideoReward的技术原理
  • VideoReward的项目地址
  • VideoReward的应用场景

VideoReward

VideoReward的主要功能

  • 构建大规模偏好数据集:VideoReward包含182,000条标注数据,涵盖视觉质量(VQ)、运动质量(MQ)和文本对齐(TA)三个关键维度,用于捕捉用户对生成视频的偏好。
  • 多维度奖励模型:基于强化学习,VideoReward引入了三种对齐算法,包括训练时策略(如Flow-DPO和Flow-RWR)和推理时技术(如Flow-NRG),用于优化视频生成。
  • 个性化需求支持:Flow-NRG支持用户在推理时为多个目标分配自定义权重,满足个性化的视频质量需求。
  • 提升视频生成质量:通过人类反馈,VideoReward能显著提升视频生成的连贯性和与提示文本的对齐效果,优于现有的奖励模型。

VideoReward的技术原理

  • 对齐算法:VideoReward引入了三种对齐算法,这些算法扩展自扩散模型的方法,专门针对基于流的模型设计:
    • Flow-DPO(直接偏好优化):在训练阶段,直接优化模型以匹配人类偏好的视频对。
    • Flow-RWR(奖励加权回归):通过奖励加权的方式优化模型,使其更符合人类反馈。
    • Flow-NRG(噪声视频奖励引导):在推理阶段,直接将奖励引导应用于噪声视频,支持用户为多个目标分配自定义权重,满足个性化需求。
  • 人类反馈优化:通过人类反馈,VideoReward能显著提升视频生成的连贯性和与提示文本的对齐效果。实验结果表明,VideoReward在性能上优于现有的奖励模型,Flow-DPO相比Flow-RWR和标准监督微调方法表现更优。

VideoReward的项目地址

  • 项目官网:https://gongyeliu.github.io/videoalign/
  • arXiv技术论文:https://arxiv.org/pdf/2501.13918

VideoReward的应用场景

  • 视频生成质量优化:VideoReward 通过大规模人类偏好数据集和多维度奖励模型,显著提升了视频生成的质量,特别是在视觉质量、运动连贯性和文本对齐方面。
  • 个性化视频生成:VideoReward 的 Flow-NRG 技术支持用户在推理时为多个目标分配自定义权重,满足个性化的视频质量需求。
  • 视频生成模型的训练与微调:VideoReward 提供的多维度奖励模型和对齐算法(如 Flow-DPO 和 Flow-RWR)可用于训练和微调视频生成模型。
  • 用户偏好分析与研究:VideoReward 的大规模偏好数据集涵盖了视觉质量、运动质量和文本对齐等多个维度。
  • 视频内容创作与编辑:在视频内容创作和编辑领域,VideoReward 可以帮助生成更高质量的视频素材,提升创作效率。
❓ 常见问题解答(FAQ)
VideoReward 主要解决什么问题?

它主要解决视频生成模型“看起来好但不够对齐”的问题,通过人类偏好数据和奖励模型,同时优化视觉质量、运动质量与文本对齐,让生成视频更连贯、更符合提示词。

VideoReward 和 Flow-DPO 有什么关系?

Flow-DPO 是 VideoReward 提出的对齐方法之一,属于训练阶段的直接偏好优化方案。文中实验结论显示,Flow-DPO 相比 Flow-RWR 和标准监督微调方法表现更优。

Flow-NRG 能做什么?

Flow-NRG 是推理时的噪声视频奖励引导技术,支持用户为多个目标分配自定义权重,适合需要个性化视频质量控制的场景。

🔬 语宙深潜追问 · 进阶实操拆解
偏好数据怎么标才最有效?

优先把“视觉质量、运动质量、文本对齐”拆成独立维度标注,并加入成对比较而非绝对打分。训练时用偏好优化比纯监督更能放大细粒度差异,且要定期做噪声清洗与标注一致性校验。

Flow-DPO落地要避开什么坑?

先保证采样分布覆盖长镜头、复杂运动和提示词歧义场景,否则偏好学习容易只优化“容易样本”。同时要控制奖励过拟合,结合离线评测与人工复核,避免模型学会投机取巧。

🗳️ 读者观点微投票 · 您的实战立场是?
视频生成该先押偏好对齐还是画质堆料?
🕸️ 语宙向量知识图谱 · 语义强关联深度内链
🐋 所属权威专题:DeepSeek 深度实战与部署 →
  • Skywork-VL Reward – Skywork AI开源的多模态奖励模型
  • LongReward – 清华、中科院、智谱AI联合推出提升长文本大语言模型性能的方法
  • DeepSeek-GRM – DeepSeek 联合清华推出的通用奖励模型
  • 昆仑万维重磅开源Skywork-Reward-V2:8款奖励模型横扫七大榜单,4000万数据集驱动AI对齐新突破
🏛️ Prompt 语宙研究院 · Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
📄 Markdown 纯净版
💡 这篇内容对您有启发吗?
📡 RSS 订阅✨ 提交 AI 工具 / 合作
🚀 Prompt 语宙 AI 创作者生态:探索 2,800+ 全球实用 AI 工具与高精度生图提示词咒语库
🧭 语宙 AI 导航 (ai.paooo.com)🎨 AI 生图 Prompt 库📚 核心专题导航⚡ AIGC 早报生成器
原“阿里云开发者”公众号正式更名为“千问AI平台”
浙大蚂蚁联手破局:DRA-Ctrl跨模态图片编辑框架,用视频生成模型精准编辑图像
大模型公司造手机抢跑OpenAI:阶跃星辰7月13日发首款AI智能体终端
DomainHuntAI
谷歌发布GEO铁拳政策:AI Overview垃圾内容将遭降权、移除甚至全网封禁
TAGGED:AI视频生成大模型微调开源大模型
分享
Email 复制链接 打印
Share
Prompt 语宙研究院 头像
ByPrompt 语宙研究院
Follow:
Prompt 语宙研究院(paooo.com Research)专注于前沿多模态大模型架构拆解、AI Agent 工作流评测、AIGC 提示词工程(Prompt Engineering)与全球高增长 AI 生产力工具实测追踪,致力于为中文开发者与创作者提供一手、可复现的深度技术洞察。
上一篇 PaSa – 字节跳动推出的学术论文检索智能体 PaSa – 字节跳动推出的学术论文检索智能体
下一篇 TradingAgents – 加利福尼亚联合麻省理工推出的多智能体LLM金融交易框架 TradingAgents – 加利福尼亚联合麻省理工推出的多智能体LLM金融交易框架
Ad image
Ad image

最近更新

Latent Space 对话 Black Forest Labs 核心创始人 Andreas Blattmann 与 Dustin Podell:从 FLUX 到视觉智能与世界动作模型
视觉智能为什么不能只靠静态图片?对话Black Forest Labs创始人:FLUX 3音画联合训练、扩散与自回归之争及世界动作模型全拆解
强化 AI 学习
Google 官方详解网站迁移至 CDN 如何避免爬虫流量激增打崩源站与误封 Googlebot 导致搜索掉收录
刚切上CDN源站反被爬虫打崩?Google官方拆解迁移翻车悖论:冷缓存雪崩、验证码误杀与预热止血指南
AI 工具
GitHub 正式上线 Repository insights 页面,集中展示 Copilot 代码审查采纳率与评论分类统计结果
AI代码审查到底有没有被采纳?GitHub上线Repository insights与repos-1-day API:四维信号、力度趋势及统计陷阱全拆解
AI 工具
Forrester AI 颠覆评估模型 17 大技术与服务品类分布图:呈现受颠覆、中立、争夺与加速四类市场象限及细分赛道数量
80%技术市场面临AI重塑冲击!Forrester拆解200+细分赛道颠覆矩阵:四大象限与Top 20合同采购谈判实战
最新趋势

相关推荐

OpenRouter把语音转录塞进同一个API:一份key搞定聊天和转写,Whisper与按token计价STT一并接入
AIGC 资讯

OpenRouter把语音转录塞进同一个API:一份key搞定聊天和转写,Whisper与按token计价STT一并接入

Prompt 语宙研究院
AI音频与语音 OpenAI OpenRouter
马斯克亲口承认Grok Build偷传用户代码,承诺历史数据全部清零不留一个字节
AIGC 资讯

马斯克亲口承认Grok Build偷传用户代码,承诺历史数据全部清零不留一个字节

Prompt 语宙研究院
AI智能体 AI编程 Cursor Grok
STranslate – 多功能免费AI翻译工具,支持离线OCR识别
AIGC 资讯

STranslate – 多功能免费AI翻译工具,支持离线OCR识别

Prompt 语宙研究院
AI办公效率 Gemini OpenAI 开源大模型 智谱AI
阶跃星辰StepAudio 2.5 ASR发布:500 TPS极速推理与30分钟长音频端到端转写,定义语音识别新SOTA
AI 工具AIGC 资讯

阶跃星辰StepAudio 2.5 ASR发布:500 TPS极速推理与30分钟长音频端到端转写,定义语音识别新SOTA

Prompt 语宙研究院
ASR 大语言模型 自动语音识别 语音转写 阶跃星辰
/ Prompt 语宙 /

探索生成式 AI 的无限创作潜能,一站式获取前沿 AIGC 资讯、高阶 Prompt 咒语与全球实用 AI 工具。

核心专栏

  • 语宙 AI 工具导航
  • EVA 视觉抠图工坊Hot
  • 出海数字营销宝典
  • AI 生图咒语灵感库
  • 24H 硅谷 AI 情报流

生态与服务

  • 语宙 AI 导航
  • 全部资讯
  • AI 生图咒语库
  • AIGC 早报生成器
  • 核心专题
  • 提交工具 / 合作

标签

开源大模型 AI智能体 AI办公效率 AI绘画提示词 OpenAI 大模型微调 Midjourney AI编程 stable diffusion AI视频生成 ChatGPT 3D与空间智能 HuggingFace AI音频与语音 RAG检索增强 Claude Flux AIGC Gemini 通义千问 Anthropic Llama Cursor DeepSeek Prompt AI Agent Kimi 智谱AI 具身智能 YouTube
Prompt 语宙Prompt 语宙
Follow US
© 2023–2026 Prompt 语宙 (paooo.com). HalfPX. All Rights Reserved.