Ruyi Mini 7B
Ruyi Mini 7B
目标受众包括视频制作者、动画师、游戏开发者和研究人员。Ruyi-Mini-7B适合他们因为它提供了一种创新的方式来从静态图像生成动态视频内容,这可以用于制作动画、游戏背景、广告和其他多媒体内容。
总访问量: 29,742,941
占比最多地区: US(17.94%)
1,080
简介
Ruyi-Mini-7B是由CreateAI团队开发的开源图像到视频生成模型,具有约71亿参数,能够从输入图像生成360p到720p分辨率的视频帧,最长5秒。模型支持不同宽高比,并增强了运动和相机控制功能,提供更大的灵活性和创造力。该模型在Apache 2.0许可下发布,意味着用户可以自由使用和修改。
截图
产品特色
- 视频压缩与解压:Casual VAE模块,将空间分辨率降低到1/8,时间分辨率降低到1/4。
- 3D全注意力视频数据生成:Diffusion Transformer模块,使用2D Normalized-RoPE处理空间维度,Sin-cos位置嵌入处理时间维度,DDPM模型训练。
- 语义特征提取:利用CLIP模型从输入图像中提取语义特征,引导整个视频生成过程。
- 多分辨率支持:模型能够处理从360p到720p不同分辨率的视频生成。
- 运动和相机控制:增强视频生成的灵活性和创造力。
- 开源许可:Apache 2.0许可,用户可以自由使用和修改模型。
- 高效视频生成:模型能够快速生成长达5秒的视频内容。
使用教程
1. 从GitHub克隆Ruyi-Models代码库。
2. 进入Ruyi-Models目录。
3. 使用pip安装requirements.txt中列出的依赖。
4. 使用python3 predict_i2v.py运行模型。
5. 或者使用GitHub仓库中的ComfyUI包装器运行模型。
6. 输入图像并等待模型生成视频。
7. 根据需要调整运动和相机控制参数以优化视频效果。
8. 导出生成的视频内容。
流量来源
直接访问48.39%外链引荐35.85%邮件0.03%
自然搜索12.76%社交媒体2.96%展示广告0.02%
最新流量情况
月访问量
25296.55k
平均访问时长
285.77
每次访问页数
5.83
跳出率
43.31%
总流量趋势图
地理流量分布情况
美国
17.94%
中国
17.08%
印度
8.40%
俄罗斯
4.58%
日本
3.42%
地理流量分布全球图
同类开源产品
AI Dance Generator
VideoPlus.ai是一款AI舞蹈生成器,利用AI技术快速生成引人注目的舞蹈视频,用户可定制舞蹈风格、人物和主题,无水印,适用于舞蹈爱好者、社交媒体影响者等。
视频生成#AI
Dmind
DMind-1 和 DMind-1-mini 是针对 Web3 任务的领域专用大型语言模型,提供比其他通用模型更高的领域准确性、指令跟随能力及专业理解。
AI模型#人工智能
Veo3video
Veo3 Video是一款利用Google Veo3模型生成高质量视频的平台。
视频生成#AI技术
Veo3
Veo 3是最新的AI视频生成工具,可添加音效、对话和环境噪音,将您的故事栩栩如生。
视频生成#AI
Veo 3
国外精选
Veo 3 是最新的视频生成模型,旨在通过更高的现实主义和音频效果,提供 4K 输出,能更准确地遵循用户的提示。
视频生成#深度学习
Flow AI
Flow 是一个为创作者打造的 AI 电影制作工具,利用 Google DeepMind 的先进模型,用户可以轻松创建出色的电影片段、场景和故事。
视频生成#视频制作
Index AniSora
优质新品
Index-AniSora是由B站开源的顶尖动画视频生成模型,基于AniSora技术实现,支持多种二次元风格视频镜头的一键生成,如番剧、国创、漫改动画、VTuber、动画PV和鬼畜动画等。
视频生成
Fastvlm
FastVLM 是一种高效的视觉编码模型,专为视觉语言模型设计。
AI模型#图像处理
Hunyuancustom
中文精选
HunyuanCustom 是一个多模态定制视频生成框架,旨在根据用户定义的条件生成特定主题的视频。
视频生成#多模态