Warning: error_log(/data/www/wwwroot/hmttv.cn/caches/error_log.php): failed to open stream: Permission denied in /data/www/wwwroot/hmttv.cn/phpcms/libs/functions/global.func.php on line 537 Warning: error_log(/data/www/wwwroot/hmttv.cn/caches/error_log.php): failed to open stream: Permission denied in /data/www/wwwroot/hmttv.cn/phpcms/libs/functions/global.func.php on line 537
寧航 發(fā)自 凹非寺
量子位 報(bào)道 | 公眾號(hào) QbitAI
有沒(méi)有想過(guò)讓蒙娜麗莎跟著你的表情動(dòng),來(lái)一番親切的交流?
Aliaksandr的一階運(yùn)動(dòng)模型(First Order Motion Model)可以實(shí)現(xiàn),但是實(shí)現(xiàn)過(guò)程非常復(fù)雜且繁瑣。
一階運(yùn)動(dòng)模型功能強(qiáng)大,可以在未經(jīng)預(yù)訓(xùn)練的數(shù)據(jù)集上對(duì)圖像和視頻進(jìn)行特效生成,但代價(jià)是安裝配置比較繁瑣。
能不能簡(jiǎn)單一點(diǎn),再簡(jiǎn)單一點(diǎn)?
印度一位程序員阿南德·帕瓦拉(Anand Pawara)設(shè)計(jì)了基于OpenCV實(shí)現(xiàn)的實(shí)時(shí)動(dòng)畫(huà)特效。
畢竟OpenCV是成名已久的跨平臺(tái)視覺(jué)庫(kù),是事實(shí)上的計(jì)算機(jī)視覺(jué)領(lǐng)域的標(biāo)準(zhǔn)庫(kù)。
項(xiàng)目中涉及的人臉識(shí)別、動(dòng)作識(shí)別和運(yùn)動(dòng)跟蹤,均在OpenCV庫(kù)中原生支持。
幾天前,阿南德在GitHub上開(kāi)源了完整代碼,并給出實(shí)現(xiàn)具體過(guò)程。
走過(guò)路過(guò),不要錯(cuò)過(guò)。
1、安裝依賴模塊
安裝依賴模塊:
pip install -r requirements.txt
安裝pytorch 1.0.0 :
pip install torch===1.0.0 torchvision===0.2.1 -f https://download.pytorch.org/whl/cu100/torch_stable.html
2、下載配置文件(如果不能下載,文件鏈接在文末)
gdown —id 1wCzJP1XJNB04vEORZvPjNz6drkXm5AUK
3、運(yùn)行程序
運(yùn)行文件 :
python image_animation.py -i path_to_input_file -c path_to_checkpoint
針對(duì)攝像頭的實(shí)時(shí)特效生成 :
python .\image_animation.py -i .\Inputs\Monalisa.png -c .\checkpoints\vox-cpk.pth.tar Run application from video file : python image_animation.py -i path_to_input_file -c path_to_checkpoint -v path_to_video_file
針對(duì)既有視頻的特效生成 :
python .\image_animation.py -i .\Inputs\Monalisa.png -c .\checkpoints\vox-cpk.pth.tar -v .\video_input\test1.mp4
如果你想上手試試,只需要調(diào)整相關(guān)配置文件即可。
模型分為兩種使用模式,一種是較為常規(guī)的導(dǎo)入視頻常規(guī)方法,另外一種就是實(shí)時(shí)生成視頻特效。
但是,請(qǐng)注意,一定要使用pytorch 1.0.0版本,因?yàn)楦叩陌姹驹诤蠖艘蕾嚨囊浑A模型上存在問(wèn)題。
按照作者的后續(xù)計(jì)劃,會(huì)推出客戶端程序,并且會(huì)增加假聲(deepfake voice)功能。
阿南德所做的工作是簡(jiǎn)化現(xiàn)有的一階運(yùn)動(dòng)模型(First Order Motion Model),使用OpenCV對(duì)視頻進(jìn)行特效生成。
項(xiàng)目的后端支持由OpenCV庫(kù)完成,避免使用復(fù)雜的模型,降低使用門(mén)檻。
按照作者觀點(diǎn),使用這個(gè)模型只需要對(duì)一類(lèi)數(shù)據(jù)集進(jìn)行訓(xùn)練后,便可應(yīng)用到對(duì)其全部事物上去,即具有較好的泛化能力。
不同于原一階模型的多個(gè)數(shù)據(jù)集測(cè)試效果,現(xiàn)在阿南德實(shí)時(shí)動(dòng)態(tài)特效模型還只在人臉數(shù)據(jù)集上進(jìn)行測(cè)試,后續(xù)后持續(xù)增加其他數(shù)據(jù)集。
這個(gè)模型的特點(diǎn)是易用,配置非常簡(jiǎn)單,基本可以開(kāi)箱即用,即使是訓(xùn)練自己的數(shù)據(jù)集也會(huì)比較簡(jiǎn)單。
因?yàn)榱⒆阌趯?duì)現(xiàn)有資源進(jìn)行優(yōu)化配置,操作簡(jiǎn)易,功能強(qiáng)大。
當(dāng)然,簡(jiǎn)單也會(huì)帶來(lái)問(wèn)題,比如現(xiàn)在數(shù)據(jù)集較為單一,針對(duì)的主要是人臉數(shù)據(jù)集。
此外,對(duì)人臉的輪廓識(shí)別效果還不那么令人滿意,需要加以改造。
項(xiàng)目作者阿南德·帕瓦拉(Anand Pawara)是印度AvenDATA公司的一名深度學(xué)習(xí)工程師,現(xiàn)居孟買(mǎi)。
繁瑣的工作自動(dòng)化,大幅度降低上手的難度。
完整實(shí)現(xiàn)過(guò)程連接在下面,如果有興趣,歡迎自己去試試喲~
參考鏈接:
https://github.com/anandpawara/Real_Time_Image_Animation
https://m.weibo.cn/1402400261/4508119667605445
— 完 —
量子位 QbitAI · 頭條號(hào)簽約
關(guān)注我們,第一時(shí)間獲知前沿科技動(dòng)態(tài)
dobe Character Animator 2021免費(fèi)版是一款由知名產(chǎn)商Adobe公司精心推出的一款簡(jiǎn)單實(shí)用且專(zhuān)業(yè)強(qiáng)大的2D角色動(dòng)畫(huà)制作程序應(yīng)用。軟件整體的界面風(fēng)格卡通簡(jiǎn)約,功能齊全,其主要常用于為卡通片、動(dòng)畫(huà)片和現(xiàn)場(chǎng)直播制作動(dòng)畫(huà),以及社交媒體構(gòu)建卡通形象等,旨在幫助廣大用戶可以使用自己的作品將生動(dòng)的表現(xiàn)力帶給人們。且使用簡(jiǎn)單快捷,用戶只需要有一個(gè)攝像頭,加上一個(gè)麥克風(fēng),再根據(jù)需要做出各種不同的表情,它能夠跟蹤你的口型、眼部細(xì)節(jié)等,在幾秒鐘就能夠生成一個(gè)具有真實(shí)的表情、動(dòng)作的人物角色動(dòng)畫(huà),表情豐富而自然!
內(nèi)容來(lái)源:http://www.32r.com/soft/95098.html
dobe Animate 是一款強(qiáng)大的動(dòng)畫(huà)制作軟件,使用可輕松創(chuàng)建各種動(dòng)畫(huà)內(nèi)容,為游戲、應(yīng)用程序和 Web 設(shè)計(jì)交互式矢量和位圖動(dòng)畫(huà)。讓卡通和橫幅廣告栩栩如生。并為教程和信息圖表添加操作。借助 Animate CC,您可以快速發(fā)布到多個(gè)平臺(tái)并覆蓋桌面、移動(dòng)設(shè)備和電視上的觀眾。
需 要軟件 的可以 復(fù) 制 鏈 接 再 打 開(kāi) 獲取
https://www.xxrjm.com/14521.html?aff=lmj3ql
Adobe Animate 2022軟件介紹
動(dòng)畫(huà)幾乎任何東西。
行業(yè)領(lǐng)先的動(dòng)畫(huà)工具集可讓您創(chuàng)建可在任何屏幕上移動(dòng)的應(yīng)用程序、廣告和令人驚嘆的多媒體內(nèi)容。
開(kāi)始你的游戲。
使用強(qiáng)大的插圖和動(dòng)畫(huà)工具為游戲和廣告創(chuàng)建基于 Web 的交互式內(nèi)容。構(gòu)建游戲環(huán)境、設(shè)計(jì)開(kāi)始屏幕和界面、創(chuàng)建交互式玩家精靈,甚至集成音頻。借助 Animate,您可以直接在應(yīng)用程序內(nèi)進(jìn)行所有資產(chǎn)設(shè)計(jì)和編碼。
創(chuàng)建栩栩如生的角色。
使用對(duì)壓力和傾斜敏感的矢量畫(huà)筆來(lái)草繪和繪制更具表現(xiàn)力的角色,效果與真實(shí)作品相似。通過(guò)簡(jiǎn)單的逐幀動(dòng)畫(huà)讓您的角色眨眼、說(shuō)話和行走。并創(chuàng)建響應(yīng)用戶交互(例如鼠標(biāo)移動(dòng)、觸摸和點(diǎn)擊)的交互式 Web 橫幅。
發(fā)布到任何平臺(tái)。
通過(guò)將動(dòng)畫(huà)導(dǎo)出到多個(gè)平臺(tái)(包括 HTML5 Canvas、WebGL、Flash/Adobe AIR 和 SVG 等自定義平臺(tái)),在桌面、移動(dòng)和電視上吸引觀眾。您可以在項(xiàng)目中直接包含代碼,甚至無(wú)需編寫(xiě)代碼即可添加操作。
資產(chǎn)雕刻
使用網(wǎng)格變形為矢量或光柵內(nèi)容創(chuàng)建新姿勢(shì)。
更好的圖層控制
在父子層次結(jié)構(gòu)中組織您的圖層,以便更輕松地在姿勢(shì)之間制作動(dòng)畫(huà)。
自動(dòng)口型同步
感謝 Adobe Sensei,Animate 現(xiàn)在可以自動(dòng)將嘴巴姿勢(shì)與聲音變化相匹配。
VR 創(chuàng)作和發(fā)布(測(cè)試版)
使用您的 2D 技能導(dǎo)出 360 VR 動(dòng)畫(huà)并為虛擬漫游創(chuàng)建身臨其境的體驗(yàn)。
*請(qǐng)認(rèn)真填寫(xiě)需求信息,我們會(huì)在24小時(shí)內(nèi)與您取得聯(lián)系。