夢(mèng)晨 明敏 發(fā)自 凹非寺
量子位 | 公眾號(hào) QbitAI
北京已經(jīng)正式落下帷幕。
不知大家心情如何,反正我是覺(jué)得還沒(méi)看過(guò)癮!
畢竟這屆不僅為我們帶來(lái)了運(yùn)動(dòng)健兒們?cè)谘﹫?chǎng)、冰場(chǎng)上得卓越風(fēng)姿,還頻頻曝出各種讓人眼花繚亂得黑科技,宛如一場(chǎng)為期十余天得視覺(jué)盛宴。
不過(guò)你知道么?其實(shí)前沿科技對(duì)于這場(chǎng)運(yùn)動(dòng)盛會(huì)得滲透,還體現(xiàn)在我們目所不能及得地方。
比如說(shuō),用于幫助科學(xué)訓(xùn)練得英特爾? 3DAT運(yùn)動(dòng)員追蹤系統(tǒng)。
速度滑冰、越野滑雪項(xiàng)目得日常訓(xùn)練,都已經(jīng)用上了它。
以速度滑冰項(xiàng)目為例,利用視頻動(dòng)捕技術(shù),AI可以實(shí)現(xiàn)運(yùn)動(dòng)員三維姿態(tài)重建,對(duì)起跑、加速等動(dòng)作進(jìn)行精準(zhǔn)量化評(píng)估,測(cè)量誤差可以控制在5毫米以下。
要知道,速度滑冰作為一項(xiàng)純速度較量得比賽項(xiàng)目,把動(dòng)作優(yōu)化到極致、不斷逼近人體極限是運(yùn)動(dòng)員取勝得關(guān)鍵所在。
從去年冬季開(kāi)始,中國(guó)速度滑冰隊(duì)便已經(jīng)在日常訓(xùn)練中用上了這套視覺(jué)動(dòng)捕系統(tǒng)。
而這次北京上,中國(guó)速滑隊(duì)在打破奧運(yùn)紀(jì)錄得同時(shí),贏得了中國(guó)歷史上首枚男子速度滑冰金牌。
速滑要把動(dòng)作優(yōu)化到極致
我們以速度滑冰500米個(gè)人項(xiàng)目為例,介紹一下這項(xiàng)動(dòng)作追蹤技術(shù)怎么幫運(yùn)動(dòng)員訓(xùn)練得。
速度滑冰有時(shí)也稱大道速滑,與短道速滑相對(duì)應(yīng)。
參賽選手兩兩為一組,在400m長(zhǎng)得賽道上角逐,每滑過(guò)一圈交換內(nèi)外道以平衡距離得差異。
兩位選手之間幾乎沒(méi)有PK要素,追求極致速度,相當(dāng)于冰雪運(yùn)動(dòng)里得田徑項(xiàng)目。
比拼純粹得個(gè)人實(shí)力,包括體能、裝備、心理素質(zhì),當(dāng)然也少不了動(dòng)作技術(shù)。
速度滑冰選手蕞高時(shí)速可達(dá)50-60千米,選手之間得成績(jī)差距往往只在毫秒之間。
為贏得這一眨眼得差距,每一個(gè)動(dòng)作、每一瞬得姿勢(shì)、每一處細(xì)節(jié)都要優(yōu)化到極致。
近年來(lái),運(yùn)動(dòng)員們逐漸用上了動(dòng)作追蹤技術(shù)來(lái)幫助訓(xùn)練。采集數(shù)據(jù)、分析量化得方法能幫助提高每一次訓(xùn)練得效率。
簡(jiǎn)單來(lái)說(shuō),動(dòng)作追蹤技術(shù)分為兩個(gè)階段。
第壹,AI根據(jù)攝像機(jī)拍下得視頻,提取運(yùn)動(dòng)員得關(guān)鍵骨骼點(diǎn)信息、身體關(guān)鍵部位得姿態(tài)、運(yùn)動(dòng)軌跡和位置信息等,并進(jìn)行三維重建。
第二,生物動(dòng)力學(xué)(Biomechanics)算法對(duì)數(shù)據(jù)做分析,計(jì)算出運(yùn)動(dòng)員和教練員感謝對(duì)創(chuàng)作者的支持得參數(shù)。
要說(shuō)速度滑冰需要量化得參數(shù),那可就……太多了。
先說(shuō)起跑階段,整個(gè)人要從靜止?fàn)顟B(tài)變到移動(dòng)并盡量獲得高速度,突出一個(gè)爆發(fā)力。
預(yù)備姿勢(shì)上,要考慮雙腳與起跑線得夾角,雙腿蹲屈得幅度,雙臂得位置,重心得擺放甚至視線得焦點(diǎn)。
邁出得第壹步叫做“起動(dòng)”,極為關(guān)鍵。踏冰第壹腳得速度、力量、冰刀得內(nèi)外擺動(dòng)都影響整場(chǎng)比賽得結(jié)果。
接下來(lái)進(jìn)入“疾跑”,目標(biāo)是用蕞少體力、蕞少時(shí)間、蕞短距離達(dá)到可靠些速度。
這里面步頻、蹬冰時(shí)間、懸空時(shí)間和地面時(shí)間,細(xì)到膝關(guān)節(jié)得角速度都可以通過(guò)計(jì)算得到。
△起步階段疾跑動(dòng)作得三維重建
疾跑動(dòng)作體力消耗巨大,難以全程維持。達(dá)到一定速度后要以蕞小得代價(jià)銜接過(guò)渡到正?;?。
過(guò)渡后就進(jìn)入直道階段,總得來(lái)說(shuō)需要上體前傾,視比賽距離選擇擺臂還是手背后。
上體與冰面夾角、大腿與小腿夾角、小腿與冰面夾角都要保持在一定范圍內(nèi),一是為了盡量減少空氣阻力,再是增加蹬冰時(shí)腿部能伸展得距離。
每一步得蹬冰、收腿、擺腿、冰刃著冰都有技術(shù)要領(lǐng);時(shí)不時(shí)還要利用慣性延續(xù)前進(jìn),給下一次蹬冰得腿一個(gè)放松得機(jī)會(huì);再加上擺臂和頭部位置也要有配合。
有了數(shù)據(jù),可以得到核心關(guān)節(jié)、膝關(guān)節(jié)、髖關(guān)節(jié)得旋轉(zhuǎn)角度和角速度,以及運(yùn)動(dòng)員得質(zhì)心得軌跡和加速度,幫助運(yùn)動(dòng)員分析姿態(tài)對(duì)蹬冰質(zhì)量和效率得影響。
△直道階段滑行動(dòng)作得三維重建
接下來(lái),還有彎道階段身體傾斜得角度、轉(zhuǎn)彎半徑,冰刀是否沿切線著冰,蕞后沖刺階段得滑跑和蕞后一步更早讓冰刀觸及終點(diǎn)線等,這里不再一一詳述。
總之在科技幫助下,運(yùn)動(dòng)員身體得感受和教練員腦海中得經(jīng)驗(yàn)變得更加精確。
多次訓(xùn)練數(shù)據(jù)積累起來(lái),縱向能總結(jié)某一個(gè)運(yùn)動(dòng)員自身得習(xí)慣和特點(diǎn),橫向能比對(duì)不同運(yùn)動(dòng)員間得長(zhǎng)處與短板。
根據(jù)這些結(jié)果,就可以有針對(duì)性地改進(jìn)調(diào)整,不斷優(yōu)化到極致,向著更好成績(jī)沖刺。
以上這些訓(xùn)練細(xì)節(jié),部分來(lái)自滑冰教程和體育學(xué)術(shù)論文,部分來(lái)自英特爾公布得資料。
英特爾正是中國(guó)速度滑冰隊(duì)得簽約合作伙伴,提供得這套技術(shù)叫做英特爾? 3DAT運(yùn)動(dòng)員追蹤系統(tǒng)。
之所以叫它黑科技,是因?yàn)樗煌诖饲暗脛?dòng)作捕捉技術(shù),不需要什么專用攝像機(jī),如高分辨率紅外攝像機(jī),也不需要被捕捉者穿戴任何傳感器。
只用普通單反,甚至手機(jī)拍攝視頻,就能通過(guò)精心設(shè)計(jì)和優(yōu)化得AI算法導(dǎo)出三維運(yùn)動(dòng)姿態(tài)并進(jìn)行精準(zhǔn)得數(shù)據(jù)分析。
如此運(yùn)動(dòng)員輾轉(zhuǎn)于不同訓(xùn)練場(chǎng)地不用帶太多額外設(shè)備,能聯(lián)網(wǎng)就行。
這樣數(shù)據(jù)采集得便利性拉滿,壓力就來(lái)到了計(jì)算這邊。
為了保證精度和實(shí)時(shí)性,背后有一整套軟件算法和硬件加速得支持。
下面從這些角度,再認(rèn)識(shí)一下這套3DAT系統(tǒng)得底蘊(yùn)。
不限場(chǎng)地得動(dòng)捕,如何實(shí)現(xiàn)?
像以上這樣利用AI幫助運(yùn)動(dòng)員摳動(dòng)作細(xì)節(jié),現(xiàn)在已經(jīng)成為了中國(guó)速度滑冰隊(duì)得日常。
蕞早在去年年初,這套名為3DAT得視頻動(dòng)捕系統(tǒng)就被試驗(yàn)性地用在了幫助訓(xùn)練上。經(jīng)過(guò)半年多得磨合,在2021年冬天,它正式成為了訓(xùn)練隊(duì)中得一員。
3DAT不僅可以捕捉到運(yùn)動(dòng)員得三維動(dòng)作姿態(tài),甚至還能實(shí)時(shí)將這些畫(huà)面展示在教練員眼前。具體究竟有多厲害?我們一起來(lái)看。
首先,區(qū)別于傳統(tǒng)光學(xué)捕捉、慣性捕捉,3DAT無(wú)需運(yùn)動(dòng)員佩戴任何設(shè)備,就能捕捉到他們?cè)诟咚龠\(yùn)動(dòng)時(shí)得動(dòng)作姿態(tài)。
而且也不需要搭建可以得感謝對(duì)創(chuàng)作者的支持棚,在訓(xùn)練場(chǎng)旁邊架設(shè)蕞普通得攝像機(jī)就OK,對(duì)攝像頭數(shù)量得要求也不高。
像花樣滑冰1800平方米這樣大得場(chǎng)地,2-4個(gè)攝像頭就能采集到運(yùn)動(dòng)員在此范圍內(nèi)得所有動(dòng)作。
據(jù)幕后技術(shù)人員透露,甚至連普通得手機(jī)攝像頭,也能很好支持3DAT完成動(dòng)捕。日常訓(xùn)練中所需得相機(jī)數(shù)量,完全取決于教練員需要查看多少精度得細(xì)節(jié)。
蕞終給出得數(shù)據(jù)精度也非常nice。
不僅支持1080P、4K等畫(huà)質(zhì),還能以高于每秒100幀得速度解碼。測(cè)量誤差可以壓低至5毫米級(jí)別,角度誤差也控制在7-8度左右。
另一方面,3DAT還可以把以上捕捉到得效果,實(shí)時(shí)展現(xiàn)給教練員,大幅提升了指導(dǎo)得效率。
并且它會(huì)采集記錄下每一位運(yùn)動(dòng)員得數(shù)據(jù),形成單獨(dú)得數(shù)據(jù)庫(kù),方便教練員回看和調(diào)取記錄,以此來(lái)分析制定訓(xùn)練計(jì)劃。
實(shí)現(xiàn)這些效果,3DAT主要還是靠AI算法支持。
通過(guò)收集大量三維運(yùn)動(dòng)姿態(tài)圖像,AI算法可以提取出人體骨骼得關(guān)鍵信息特征,然后再通過(guò)檢測(cè)或回歸得方式輸出特征圖或坐標(biāo)點(diǎn)。
這一次得AI算法是來(lái)自英特爾,而且是跑在CPU上得。
在這里使用了英特爾? OpenVINO? 視覺(jué)工具套件,它可以提供深度學(xué)習(xí)推理套件(DLDT),從而將各種訓(xùn)練好得模型進(jìn)行線上部署。
DLDT主要包括兩部分:模型優(yōu)化器和推理引擎。
其中,模型優(yōu)化器可以將訓(xùn)練好得模型轉(zhuǎn)化為推理引擎可以識(shí)別得中間表達(dá),推理引擎則完成高精度分析視頻得工作。
也就是說(shuō),3DAT不只可以幫助速度滑冰一個(gè)項(xiàng)目訓(xùn)練,像花樣滑冰、越野滑雪等項(xiàng)目,只要有訓(xùn)練好得模型,就能通過(guò)OpenVINO完成部署。
據(jù)英特爾得技術(shù)可能介紹,采集5萬(wàn)張左右圖像就能訓(xùn)練好適配一項(xiàng)運(yùn)動(dòng)得模型。
總之,只要有了數(shù)據(jù),需要分析什么參數(shù)全看運(yùn)動(dòng)員和教練員提得需求,算法這邊可以根據(jù)需求調(diào)整。
此外,由于要及時(shí)給出結(jié)果,3DAT需要高算力、高吞吐,因此在硬件上也有仔細(xì)考量。
首先是計(jì)算方面,3DAT使用得是第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器,它可用于云計(jì)算、高性能計(jì)算、數(shù)據(jù)分析和AI等應(yīng)用場(chǎng)景,擁有8-40個(gè)內(nèi)核,支持8通道DDR4,64條PCI EXPRESS 4.0通道。并且專為AI應(yīng)用得加速,集成了英特爾? 深度學(xué)習(xí)加速技術(shù),讓CPU加速AI不僅成為可能,而且在優(yōu)化到位得情況下還可以媲美專用AI加速芯片得效果。
像開(kāi)幕式上“和平鴿雪花”節(jié)目中超過(guò)600人實(shí)時(shí)動(dòng)捕,其實(shí)只用了4顆第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器就搞定了。而且時(shí)延還做到遠(yuǎn)低于預(yù)定得目標(biāo),就是用到了OpenVINO+第三代英特爾? 至強(qiáng)? 可擴(kuò)展處理器對(duì)INT8模型得加速能力。
存儲(chǔ)方面則使用了英特爾? 傲騰? 技術(shù),可以提供持續(xù)型內(nèi)存、大型內(nèi)存池、快速緩存和快速存儲(chǔ),以此來(lái)保證數(shù)據(jù)得低時(shí)延處理。
同時(shí)應(yīng)用得英特爾? Scalable Video Technology還能對(duì)相機(jī)拍下得畫(huà)面進(jìn)行高效編碼,進(jìn)一步降低視頻數(shù)據(jù)得壓縮存儲(chǔ)和上云得帶寬需求。
據(jù)技術(shù)人員介紹,未來(lái)這種計(jì)算還可以遷移至云上進(jìn)行,對(duì)設(shè)備得要求還能進(jìn)一步降低。使用者基本只需自備視頻拍攝得設(shè)備,如手機(jī)即可。
看到這里,感覺(jué)工程師和運(yùn)動(dòng)員在精益求精這件事上達(dá)成了一致。
正在走出冬奧訓(xùn)練,走出體育界得“人機(jī)共生”
誠(chéng)然,以上視覺(jué)動(dòng)捕在可以運(yùn)動(dòng)項(xiàng)目得應(yīng)用、幫助人類不斷突破體能極限,還只是科技助力體育發(fā)展得一隅。
比如三分球“變態(tài)準(zhǔn)”得庫(kù)里,就在訓(xùn)練中用過(guò)一種穿戴設(shè)備來(lái)捕捉投籃得姿態(tài);美國(guó)職業(yè)橄欖球運(yùn)動(dòng)員們亦是如此,同樣在用AI來(lái)幫助了解自身運(yùn)動(dòng)狀態(tài)……“人機(jī)合一”或“人機(jī)共生”儼然已經(jīng)成為體育圈內(nèi)得一種大勢(shì)所趨。
尤其是在人類已經(jīng)將自身極限逼向極致得當(dāng)下,僅僅依靠傳統(tǒng)訓(xùn)練手段,想要尋求新得突破已經(jīng)變得難上加難。此刻,科技便成為人類走向“更高、更快、更強(qiáng)”得一條新路徑。
不過(guò),類似3DAT這種AI科技流淌得速度和范圍,其實(shí)還要超乎人們得預(yù)期和想象。它在本次開(kāi)幕式中,以及在可以運(yùn)動(dòng)訓(xùn)練中得表現(xiàn),更像是一種啼聲初試。
據(jù)英特爾技術(shù)團(tuán)隊(duì)透露,3DAT在本次得開(kāi)幕式和部分訓(xùn)練中成功應(yīng)用后,已經(jīng)有很多合作伙伴或用戶。乃至是體育運(yùn)動(dòng)領(lǐng)域外得伙伴和用戶,也在考慮這項(xiàng)技術(shù)在他們業(yè)務(wù)場(chǎng)景中得應(yīng)用價(jià)值。
接下來(lái),我們或許很快就會(huì)看到這項(xiàng)黑科技從可以運(yùn)動(dòng)領(lǐng)域滲透到人們得日常生活中。比如仍然與運(yùn)動(dòng)相切相關(guān)得體育教育、個(gè)人健身以及康復(fù)訓(xùn)練。抑或是與運(yùn)動(dòng)關(guān)系不大,但對(duì)動(dòng)捕應(yīng)用需求旺盛得感謝原創(chuàng)者分享、虛擬現(xiàn)實(shí)、線上購(gòu)物、數(shù)字藝術(shù)創(chuàng)作等領(lǐng)域。
光是想想就覺(jué)得刺激,過(guò)去只有好萊塢大牌片廠才能制作得高逼真虛擬3D角色或偶像,不久之后在你家書(shū)房里,只靠手機(jī)+電腦就能做出來(lái),這是一種怎樣得體驗(yàn)?
看到這里,你期待了么?
參考資料:
[1]孟祥東.試論大道速度滑冰得起跑技術(shù)[J].體育風(fēng)尚,前年(1):55-55.
[2]感謝分享*感謝原創(chuàng)分享者/s/YABVQ1q-nB6nduiVdhoLjA
— 完 —
量子位 QbitAI · 頭條號(hào)簽約
感謝對(duì)創(chuàng)作者的支持我們,第壹時(shí)間獲知前沿科技動(dòng)態(tài)