文章来源:万象ai发布时间:2025-04-10 11:50:50
ReCamMaster 是由浙江大学、快手科技、香港中文大学和华中科技大学的研究团队共同开发的一种从单个视频生成新视角和运动轨迹视频的框架。它能够通过重新定义相机轨迹,从单个视频中生成具有新视角和运动轨迹的视频内容。该技术的核心在于利用预训练的文本到视频生成模型,并通过一种精心设计的视频条件机制,实现高质量的视频重渲染。

相机轨迹控制:支持平移、旋转、缩放等多种复杂轨迹,用户可以自定义相机运动。
高质量视频生成:保持视频的动态同步性和多帧一致性,生成高质量的视频。
大规模数据集支持:使用 Unreal Engine 5 构建的多相机同步视频数据集,覆盖多样化场景和相机运动。
创新的视频条件机制:通过帧维度的条件拼接技术,显著提升生成视频的质量。

视频稳定化:将不稳定视频转换为平滑的视频,同时保留原始场景和动作。
视频超分辨率和外扩:提升视频分辨率和视野范围。
自动驾驶和机器人视觉:提供多视角数据增强,增强模型的泛化能力。
视频创作和后期制作:重新定义视频的相机轨迹,创造新的视觉效果。
输入视频:提供单视角的输入视频。
选择轨迹:选择或自定义相机轨迹(如平移、旋转、缩放等)。
生成视频:系统会根据定义的轨迹生成新视角的视频,并通过邮件发送结果。
批量处理:如需批量处理或对比测试,可联系项目团队(jianhongbai@zju.edu.cn)。
GitHub仓库:https://github.com/KwaiVGI/ReCamMaster
项目主页:https://jianhongbai.github.io/ReCamMaster/
论文:https://arxiv.org/abs/2503.11647
相关攻略 更多
OpenAI底层AGI技术被曝光!前研究主管豪言:从此再无新范式
爆款AI视频越来越多,但本质我觉得跟炒股没区别。
Cursor+Claude的SVG图片生成功能,强到离谱,强烈建议写PPT没思路的时候买个会员
超20万人使用!最强开源浏览器Workflow插件【内置3300+模版】效率又起飞了~
营销获客AI公司Clay,花7年找到PMF后,快速实现10倍增长的秘密
5天连发5个王炸!MiniMax这波发布周把OpenAI都整懵了|MiniMax发布周回顾
AI应用行业全景洞察丨中国丨2025年5月丨万字诚作丨Xsignal
数字疗法AI医疗独角兽SwordHealth再融4000万,估值冲至40亿美元背后的战略棋局
最新资讯 更多
OpenAI底层AGI技术被曝光!前研究主管豪言:从此再无新范式
更新时间:2025-07-25
爆款AI视频越来越多,但本质我觉得跟炒股没区别。
更新时间:2025-07-25
Cursor+Claude的SVG图片生成功能,强到离谱,强烈建议写PPT没思路的时候买个会员
更新时间:2025-07-25
超20万人使用!最强开源浏览器Workflow插件【内置3300+模版】效率又起飞了~
更新时间:2025-07-25
营销获客AI公司Clay,花7年找到PMF后,快速实现10倍增长的秘密
更新时间:2025-07-25
5天连发5个王炸!MiniMax这波发布周把OpenAI都整懵了|MiniMax发布周回顾
更新时间:2025-07-25
AI应用行业全景洞察丨中国丨2025年5月丨万字诚作丨Xsignal
更新时间:2025-07-25
数字疗法AI医疗独角兽SwordHealth再融4000万,估值冲至40亿美元背后的战略棋局
更新时间:2025-07-25
宁德时代领投,「银河通用」完成超10亿元新一轮融资
更新时间:2025-07-25
【译】万字长文解读:生成式AI的21个设计模式、示例及应用策略
更新时间:2025-07-25