Recapture
目标受众为视频制作者、电影制作人、游戏开发者等需要从单一视频源生成新视角和摄像机运动的专业人士。ReCapture提供了一种创新的方法,使他们能够在不实际拍摄新镜头的情况下,创造出具有新视角和动态摄像机效果的视频内容,这对于节省成本和提高创
总访问量: 216
占比最多地区: US(100.00%)
648
简介
ReCapture是一种从单一用户提供的视频生成新视频和新颖摄像机轨迹的方法。该技术允许我们从完全不同的角度重新生成源视频,并带有电影级别的摄像机运动。ReCapture通过使用多视图扩散模型或基于深度的点云渲染生成带有新摄像机轨迹的嘈杂锚视频,然后通过我们提出的掩蔽视频微调技术将锚视频重新生成为干净且时间上一致的重新角度视频。这种技术的重要性在于它能够利用视频模型的强大先验,将近似的视频重新生成为时间上一致且美观的视频。
截图
产品特色
- 多视图扩散模型或深度点云渲染:生成带有新摄像机轨迹的嘈杂锚视频。
- 掩蔽视频微调技术:通过微调学习场景动态和外观,提高视频质量。
- 场景动态学习:使用时间LoRA在掩蔽的锚视频上进行微调,学习场景动态。
- 场景外观学习:使用空间LoRA在源视频的增强帧上进行微调,学习场景外观。
- 忽略不信息区域:只学习锚视频中信息丰富的部分,忽略缺失区域。
- 增强视频模型的先验:利用视频模型的强大先验,改善视频质量。
- 支持复杂摄像机轨迹:包括绕场景中某点的轨道运动等。
使用教程
1. 提供一个用户视频作为源视频。
2. 确定新的摄像机轨迹,包括变焦、平移和倾斜等。
3. 使用多视图扩散模型或深度点云渲染生成带有新摄像机轨迹的锚视频。
4. 应用掩蔽视频微调技术,对锚视频进行微调,以学习场景动态和外观。
5. 通过微调后的模型,重新生成干净且时间上一致的重新角度视频。
6. 检查最终视频的质量,并根据需要进行进一步的调整。
7. 导出并使用生成的视频内容。
流量来源
直接访问7.26%外链引荐80.06%邮件0.03%
自然搜索5.22%社交媒体6.66%展示广告0.76%
最新流量情况
月访问量
795
平均访问时长
393.35
每次访问页数
1.70
跳出率
44.24%
总流量趋势图
地理流量分布情况
美国
100.00%
地理流量分布全球图
同类开源产品
AI Dance Generator
VideoPlus.ai是一款AI舞蹈生成器,利用AI技术快速生成引人注目的舞蹈视频,用户可定制舞蹈风格、人物和主题,无水印,适用于舞蹈爱好者、社交媒体影响者等。
视频生成#AI
Faceage AI
FaceAge AI是一款基于人工智能的面部年龄检测工具,通过上传照片,快速准确地分析面部各个部位的年龄信息。
图片编辑#面部识别
Veo3video
Veo3 Video是一款利用Google Veo3模型生成高质量视频的平台。
视频生成#AI技术
Portal By 20Vision
Portal by 20Vision是一个免费AI平台,可在几秒钟内转换图像和视频,无需注册。
图片编辑#AI设计工具
Veo3
Veo 3是最新的AI视频生成工具,可添加音效、对话和环境噪音,将您的故事栩栩如生。
视频生成#AI
Veo 3
国外精选
Veo 3 是最新的视频生成模型,旨在通过更高的现实主义和音频效果,提供 4K 输出,能更准确地遵循用户的提示。
视频生成#深度学习
Flow AI
Flow 是一个为创作者打造的 AI 电影制作工具,利用 Google DeepMind 的先进模型,用户可以轻松创建出色的电影片段、场景和故事。
视频生成#视频制作
Index AniSora
优质新品
Index-AniSora是由B站开源的顶尖动画视频生成模型,基于AniSora技术实现,支持多种二次元风格视频镜头的一键生成,如番剧、国创、漫改动画、VTuber、动画PV和鬼畜动画等。
视频生成
Picsman
Picsman 是一款 AI 驱动的在线照片编辑器,专为电商和个人用户设计,提供背景移除、对象去除、照片增强等功能,旨在提高图片处理的效率和质量。
图片编辑#照片编辑
替代品
Index AniSora
优质新品
Index-AniSora是由B站开源的顶尖动画视频生成模型,基于AniSora技术实现,支持多种二次元风格视频镜头的一键生成,如番剧、国创、漫改动画、VTuber、动画PV和鬼畜动画等。
视频生成
Hunyuancustom
中文精选
HunyuanCustom 是一个多模态定制视频生成框架,旨在根据用户定义的条件生成特定主题的视频。
视频生成#多模态
Step1x Edit
国外精选
Step1X-Edit 是一种实用的通用图像编辑框架,利用 MLLMs 的图像理解能力解析编辑指令,生成编辑令牌,并通过 DiT 网络解码为图像。
图片编辑#机器学习
Pixverse MCP
PixVerse-MCP 是一个工具,允许用户通过支持模型上下文协议(MCP)的应用程序访问 PixVerse 最新的视频生成模型。
视频生成#AI 工具
Avatarfx
国外精选
AvatarFX 是一个尖端的 AI 平台,专注于互动故事讲述。
视频生成#视频生成
Skyreels V2
优质新品
SkyReels-V2 是昆仑万维 SkyReels 团队发布的全球首个使用扩散强迫框架的无限时长电影生成模型。
视频生成#视频生成
Wan2.1 FLF2V 14B
中文精选
Wan2.1-FLF2V-14B 是一个开源的大规模视频生成模型,旨在推动视频生成领域的进步。
视频生成#深度学习
Pusa
Pusa 通过帧级噪声控制引入视频扩散建模的创新方法,能够实现高质量的视频生成,适用于多种视频生成任务(文本到视频、图像到视频等)。
视频生成#开源
Skyreels A2
SkyReels-A2 是一个基于视频扩散变换器的框架,允许用户合成和生成视频内容。
视频生成#深度学习