即梦AI肢体与动态场景环境
#肢体与动态#场景环境
中文翻译
让奥普斯5.5操作 Blender,进行人工智能素材的视觉特效测试。
“在舞蹈上叠加动态设计”
■素材(人工智能)
・舞者:Seedance 2.0
・音乐:苏诺
■让 Blender 和代码做的事
・分析身体的关节和轮廓,按手臂、躯干、腿部,分别用动漫风格的色面填涂
・自动捕捉手脚“利落停住的瞬间”,产生形状、飞溅和色彩错位
・根据动作的剧烈程度和歌曲音量,增减特效数量
・让背景切换、故障效果和反转与歌曲节拍同步
■了解到的事
・特效的效果,与其说由增加数量决定,不如说由触发它的时机决定
・安静场景比较薄弱,需要想办法。不过如果全部都做得热闹,就会失去强弱对比。
・人工智能的续接生成,只要从最后一帧开始,基本上就能无缝衔接
也许完全通过人工智能生成也能做到,但制作一次之后,可以相当快速、细致地调整,这一点可能不错。
原帖
Opus 5.5にBlenderを操作させた、AI素材のVFXテスト。
「ダンスにモーションデザインを乗せる」
■素材(AI)
・ダンサー:Seedance 2.0
・音楽:Suno
■Blenderとコードでやらせたこと
・体の関節と輪郭を解析し、腕・胴・脚ごとにアニメ調の色面で塗る
・手足が「ビシッと止まる瞬間」を自動で拾って、形・しぶき・色ずれを出す
・動きの激しさと曲の音量で、エフェクトの量を増減
・背景の切り替えやグリッチ、反転を、曲の拍に合わせる
■わかったこと
・エフェクトは数を足すより、何をきっかけに出すかで決まる
・静かな場面が弱いので、工夫が必要。ただし全部盛り上げるとメリハリがなくなる。
・AIの続き生成は、最後のコマから始めればほぼ継ぎ目なくつながる
全部AI生成でもできるのかもしれませんが、一度作ると調整は結構早く、細かくできるのはいいかもしれません。
