即梦AI / 海螺AI / 通义万相肢体与动态光影氛围
#肢体与动态#光影氛围
中文翻译
🔥AI爆款视频教程
上一条视频也是获得了差不多30万次的浏览量(算上被抄袭的加起来应该有100万了),再送你们一个。我之前说过会分享怎么做这种视频的,现在它来啦
并没有使用seedance、Minimax H3那种视频模型,而是多种组合的口型+声音同步方案
显卡:5090(可以去租,3块钱一小时);
工作台:ComfyUI(要选Blackwell版);
声音:Fish Audio / ElevenLabs;
(懒的话直接把下面这些东西发给codex/claude code帮你做,声音素材还是得自己弄)
- 底模:Wan2_1-I2V-14B-480P_fp8_e4m3fn
- 口型:InfiniteTalk/Wan2_1-InfiniTetalk-Single_fp16
- 加速LoRA:Lightx2v/lightx2v_I2V_14B_480p_cfg_step_distill_rank64_bf16
- VAE:Wan2_1_VAE_bf16
- 文本编码:umt5-xxl-enc-fp8_e4m3fn
- 图像编码:clip_vision_h
- 音频特征:wav2vec2-chinese-base_fp32
怎么做:
1. 先去搞一段人物音频去克隆,然后根据你的文字去生成相应的音频。
2. ComfyUI里那堆方块是「工作流」。去ComfyUI-WanVideoWrapper仓库的example_workflows拿wanvideo_I2V_InfiniteTalk_example_03.json,直接拖进网页,图自己就出来了。
3. 拖进去大概率一片红。装个ComfyUI-Manager,点Install Missing Custom Nodes补节点;模型在Model Manager里搜名字下载,就是上面列表里的那些。
4. 图丢进LoadImage;音频先ffmpeg -i 你的.mp3 -ar 16000 -ac 1 out.wav转16k单声道,再从LoadAudio传进去;帧数按25fps算(11.36秒取285,宁可多给几帧)填进MultiTalkWav2VecEmbeds。
5. 提示词:WanVideoTextEncodeCached,上框正向下框负向。把人在做什么、光线怎么样写清楚,负向里记得加motionless, frozen, expressionless, stiff,不然人会发呆。
6. 运行
参数:frame_window_size 81、motion_frame 9、dpm++_sde 6步、cfg 1.0、shift 11、audio_scale 1.35(调表情和手势幅度)。VideoCombine记得开trim_to_audio。
🕵️♂️关注我,带给你全方位的AI教程
原帖
🔥AI爆款视频教程
上一条视频也是获得了差不多 300k 的浏览量(算上被抄袭的加起来应该有 1m 了),再送你们一个。我之前说过会分享怎么做这种视频的,现在它来啦
并没有使用 seedance、Minimax H3 那种视频模型,而是多种组合的口型+声音同步方案
显卡:5090(可以去租,3 块钱一小时);
工作台:ComfyUI(要选 Blackwell 版);
声音:Fish Audio / ElevenLabs;
(懒的话直接把下面这些东西发给 codex/claude code 帮你做,声音素材还是得自己弄)
- 底模:Wan2_1-I2V-14B-480P_fp8_e4m3fn
- 口型:InfiniteTalk/Wan2_1-InfiniTetalk-Single_fp16
- 加速 LoRA:Lightx2v/lightx2v_I2V_14B_480p_cfg_step_distill_rank64_bf16
- VAE:Wan2_1_VAE_bf16
- 文本编码:umt5-xxl-enc-fp8_e4m3fn
- 图像编码:clip_vision_h
- 音频特征:wav2vec2-chinese-base_fp32
怎么做:
1. 先去搞一段人物音频去克隆,然后根据你的文字去生成相应的音频。
2. ComfyUI 里那堆方块是「工作流」。去 ComfyUI-WanVideoWrapper 仓库的 example_workflows 拿 wanvideo_I2V_InfiniteTalk_example_03.json,直接拖进网页,图自己就出来了。
3. 拖进去大概率一片红。装个 ComfyUI-Manager,点 Install Missing Custom Nodes 补节点;模型在 Model Manager 里搜名字下载,就是上面列表里的那些。
4. 图丢进 LoadImage;音频先 ffmpeg -i 你的.mp3 -ar 16000 -ac 1 out.wav 转 16k 单声道,再从 LoadAudio 传进去;帧数按 25fps 算(11.36 秒取 285,宁可多给几帧)填进 MultiTalkWav2VecEmbeds。
5. 提示词:WanVideoTextEncodeCached,上框正向下框负向。把人在做什么、光线怎么样写清楚,负向里记得加 motionless, frozen, expressionless, stiff,不然人会发呆。
6. 运行
参数:frame_window_size 81、motion_frame 9、dpm++_sde 6 步、cfg 1.0、shift 11、audio_scale 1.35(调表情和手势幅度)。VideoCombine 记得开 trim_to_audio。
🕵️♂️关注我,带给你全方位的 AI 教程
