太平洋未來科技AR+Ai3D人體姿態(tài)捕捉,解鎖世界杯球星動態(tài),解放三維設(shè)計(jì)師雙手
4年一次的世界杯,既承載著一代人炙熱的青春,也是不容錯過的激情四射賽事,***收官之際,這家致力于AR底層技術(shù)的科技公司——太平洋未來科技,這群技術(shù)狂熱者也是亢奮的球迷愛好者團(tuán)隊(duì),通過自身研發(fā)的AR+Ai3D人體姿態(tài)捕捉技術(shù),展示了基于Wi-Fi穿透系統(tǒng)下的純3D環(huán)境AI人體姿態(tài)算法,實(shí)時追蹤記錄球場上球員從開始瞄準(zhǔn)到射球等一連串的動作,精確的解析球場上每個球員的動作形態(tài)。
太平洋未來科技(中國)團(tuán)隊(duì)
AR+Ai3D人體姿態(tài)捕捉 科技讓姿捕行業(yè)跨形態(tài)更精準(zhǔn)
太平洋未來科技團(tuán)隊(duì)研發(fā)的AR+Ai3D人體姿態(tài)捕捉技術(shù),基于自身的AMreal 光場算法,解決光度立體算法,通過深度卷積神經(jīng)網(wǎng)絡(luò)和Wi-Fi穿墻的形態(tài)原理,整合特定人的常規(guī)形態(tài)和三維空間動作,將所有捕捉像素點(diǎn)及掃描參數(shù)固定在一個維度中,并將其饋送到訓(xùn)練網(wǎng)絡(luò),從而完全控制目標(biāo)對象。憑借體積結(jié)構(gòu)的組成模塊和固定維度的特征計(jì)算,加之交互式用戶控制人體系統(tǒng),明確的獲取人的整個身體特征及所處背景,即使在有障礙物、有遮擋、光線不明朗的情況下,也能高效而準(zhǔn)確地實(shí)現(xiàn)真實(shí)環(huán)境與計(jì)算機(jī)視覺實(shí)時關(guān)聯(lián),從而實(shí)現(xiàn)掃描、追蹤、組合、傳導(dǎo)人體的神情及動作姿態(tài),全方位識別3D人體ID。
AR+Ai3D人體姿態(tài)捕捉解析世界杯球星動態(tài)
變革三維視覺設(shè)計(jì)工作方式 建造全方位人體動態(tài)云端數(shù)據(jù)庫
3D卡通動畫/武打動作片的制作,三維動畫設(shè)計(jì)師得去學(xué)習(xí)人體動態(tài)課,深度了解人體動態(tài),而后建立模型,調(diào)整多個人體骨骼,根據(jù)劇情所需分別對應(yīng)骨骼綁定蒙版,建立皮膚,毛發(fā)等,使得骨骼和皮膚貼合,***才能生成3D動畫人物; 發(fā)展到后來的3D影視制作,則需讓武打演員穿戴上傳感器衣服及帽子,捕捉其動作及表情方可將大片呈現(xiàn)在大眾眼前。“團(tuán)隊(duì)在研發(fā)AR+Ai3D人體姿態(tài)捕捉前,也與數(shù)千名3D設(shè)計(jì)師進(jìn)行深度溝通并觀看他們工作的日常,要配色、打光、形體到位、建模和特效等等一連串復(fù)雜的工作,科技讓世界進(jìn)步一點(diǎn),好一點(diǎn)早一點(diǎn)到來就對了。”太平洋未來科技創(chuàng)始人兼CEO李建億表示,這項(xiàng)技術(shù)的研發(fā),也希望能真正意義上解決三維設(shè)計(jì)師的痛,變革他們的復(fù)雜工作形態(tài),讓他們從高強(qiáng)度的工作中解放出來,去做更多有創(chuàng)意、有意義的事情。
(左)太平洋未來科技文旅項(xiàng)目CG動畫建模(中)三維設(shè)計(jì)師穿戴傳感器測試(右)AR+Ai3D人體姿態(tài)捕捉生成
AR+Ai3D人體姿態(tài)捕捉變革三維設(shè)計(jì)復(fù)雜的工作形態(tài)
AR+Ai3D人體姿態(tài)捕捉研發(fā)成果優(yōu)勢:
支持手勢及姿態(tài)識別
支持多人姿態(tài)及動作捕捉
支持單目RGB攝像頭/視頻文件輸入
300萬+人體姿態(tài)圖片訓(xùn)練集
人體姿態(tài)定制版深度卷積神經(jīng)網(wǎng)絡(luò)
3D設(shè)計(jì)軟件動作數(shù)據(jù)導(dǎo)入和實(shí)時動作數(shù)據(jù)交互
可適用于多個場景應(yīng)用:3D光效人像、3D虛擬角色建立、3D 實(shí)時表情生成、3D人體ID識別、視頻重繹、復(fù)原人物復(fù)原、歷史情境再現(xiàn)等
AR+Ai3D人體姿態(tài)捕捉技術(shù),通過捕捉視頻源/實(shí)時捕捉拍攝人物臉部表情、身體姿態(tài)及動作,解析視頻源/被捕捉人的動作數(shù)據(jù),上傳云端算法庫,打通研發(fā)實(shí)驗(yàn)室到測試的繁雜環(huán)節(jié),生成SDK數(shù)據(jù)包,供研發(fā)者直接使用。解決設(shè)計(jì)者/制作方/開發(fā)者調(diào)整時間慢、生成時間長、硬件昂貴的困局,并能實(shí)時語譯人群中各個人物的表情及動作,提前洞悉和獲取多個人體或人群動態(tài)及行為,預(yù)知人群大腦動作及反應(yīng)。此技術(shù)一旦鋪開,不僅將三維設(shè)計(jì)師從繁雜的工作中解放出來,推動CG/3D影業(yè)進(jìn)步,也將造福安全與智慧生活,用于商場監(jiān)控、智能教育、無人駕駛、廠務(wù)培訓(xùn)、戰(zhàn)斗訓(xùn)練、預(yù)知暴亂大事件等場景。
技術(shù)的狂熱讓生活賦予***可能,太平洋未來科技的AR+Ai3D人體姿態(tài)捕捉技術(shù)為姿捕行業(yè)生態(tài)發(fā)展助力加速,拭目以待。