近日,推特瘋傳一支動畫,一位動畫美少女表演韓國女團「宇宙少女」(WJSN)2019 年推出的歌曲〈Boogie Up〉熱舞的影片,不到兩天已超過 400 萬次瀏覽,角落還附上了一位真人跳舞的畫面,很明顯告訴大眾這是一部運用 AI 技術 StableDiffusion 生成的動畫。
該動畫的焦點除了美少女的神韻到位與肢體動作流暢度相當高之外,如果仔細暫停觀看,你會發現動畫美少女的衣服會改變,她的手指有時候會有不自然的地方,這些都是 StableDiffusion 過去的通病,但若播放後這些小細節便很難察覺,也獲得許多網友高度讚賞。
而這部影片則是海外網友 neilwong2012 透過 StableDiffusion 的外掛插件「ControlNet」所製作,這是一個在 AI 生成圖片前由使用者來印上一個基礎的圖上,再透過 ControlNet 來補上其他的部份。
以簡單的角度來說,今年 2 月,ControlNet 插件有了新的功能,「Muti-ControlNet」,可以連續生成圖片,於是這樣的技術便被 neilwong2012 所運用,他將這支真人熱舞的影片,直接運用 ControlNet 連續算圖而產生。