广东建设网站首页,深圳货拉拉,广东省建设厅网站怎么查询证件,建筑工程考试题库❤️ 如果你也关注大模型与 AI 的发展现状#xff0c;且对大模型应用开发非常感兴趣#xff0c;我会快速跟你分享最新的感兴趣的 AI 应用和热点信息#xff0c;也会不定期分享自己的想法和开源实例#xff0c;欢迎关注我哦#xff01;
#x1f966; 微信公众号#xff…❤️ 如果你也关注大模型与 AI 的发展现状且对大模型应用开发非常感兴趣我会快速跟你分享最新的感兴趣的 AI 应用和热点信息也会不定期分享自己的想法和开源实例欢迎关注我哦 微信公众号搜一搜蚝油菜花 快速阅读
Genmoai-smol 是一个优化过的视频生成模型能在单个 GPU 上运行并减少显存占用。该模型支持通过 Gradio UI 或命令行界面生成视频具有高保真度的运动和强大的提示遵循能力。项目开源提供了详细的安装和运行教程适合在显存有限的设备上进行视频创作。
正文附运行示例
Genmoai-smol 是什么 Genmoai-smol 是 Genmoai 的 txt2video 模型 的一个优化分支专为在单个 GPU 节点上运行而设计减少了显存占用。它能够在只有 24GB 显存的 GPU 上生成高质量的视频内容适合资源受限的环境使用。模型通过高保真度的运动和强大的提示遵循能力缩小了开放和封闭视频生成系统之间的差距。
Genmoai-smol 的主要功能
视频生成将文本描述转换为视频内容。高保真度运动生成自然流畅的视频内容。强大的提示遵循能力理解并遵循用户的文本提示。优化显存占用通过技术手段减少显存使用适合单 GPU 设备。用户界面提供 Gradio UI 和命令行界面两种操作方式。
Genmoai-smol 的技术原理
深度学习模型基于生成对抗网络GANs或变分自编码器VAEs等深度学习技术生成视频内容。文本到视频的转换通过自然语言处理NLP技术理解文本提示生成对应的视频内容。显存优化通过将部分模型移回 CPU 和使用 bfloat16 数据类型等手段优化显存使用。多步骤推理推理步骤不改变显存使用但生成视频的时间随步骤增加而增加。系统资源管理需要大量系统 RAM约 64GB来保证流畅的视频生成过程。
如何运行 Genmoai-smol
安装步骤
克隆项目仓库
git clone https://github.com/victorchall/genmoai-smol
cd models安装 uv 工具并创建虚拟环境
pip install uv
uv venv .venv
source .venv/bin/activate
uv pip install -e .下载模型权重可以从 Hugging Face 下载或使用磁力链接。
运行 Gradio UI
启动 Gradio UI
python3 -m mochi_preview.gradio_ui --model_dir path_to_downloaded_directory命令行生成视频
使用命令行直接生成视频
python3 -m mochi_preview.infer --prompt A hand with delicate fingers picks up a bright yellow lemon from a wooden bowl filled with lemons and sprigs of mint against a peach-colored background. The hand gently tosses the lemon up and catches it, showcasing its smooth texture. A beige string bag sits beside the bowl, adding a rustic touch to the scene. Additional lemons, one halved, are scattered around the base of the bowl. The even lighting enhances the vibrant colors and creates a fresh, inviting atmosphere. --seed 1710977262 --cfg-scale 4.5 --model_dir path_to_downloaded_directory将 path_to_downloaded_directory 替换为您下载模型权重的目录路径。
资源
关注并回复公众号【63】或【GenmoaiSmol】获取相关项目资源。 ❤️ 如果你也关注大模型与 AI 的发展现状且对大模型应用开发非常感兴趣我会快速跟你分享最新的感兴趣的 AI 应用和热点信息也会不定期分享自己的想法和开源实例欢迎关注我哦 微信公众号搜一搜蚝油菜花
