本文概要:
1. 研究團(tuán)隊(duì)利用機(jī)器學(xué)習(xí)系統(tǒng)從廣播視頻中學(xué)習(xí)網(wǎng)球技能，實(shí)現(xiàn)了真實(shí)的動(dòng)作模擬。
2. 他們使用物理模擬和動(dòng)作規(guī)劃策略來指導(dǎo)角色的運(yùn)動(dòng)，并能夠生成穩(wěn)定的控制器。
3. 這項(xiàng)技術(shù)有望擴(kuò)展到其他運(yùn)動(dòng)領(lǐng)域，并為機(jī)器人學(xué)習(xí)提供方法。
西蒙弗雷澤大學(xué)的研究人員正在開發(fā)一種新的運(yùn)動(dòng)模擬技術(shù)，通過學(xué)習(xí)現(xiàn)實(shí)運(yùn)動(dòng)員的視頻來生成虛擬角色的真實(shí)動(dòng)作。他們的研究重點(diǎn)是網(wǎng)球，但他們認(rèn)為這項(xiàng)技術(shù)未來可以擴(kuò)展到其他運(yùn)動(dòng)領(lǐng)域。
該團(tuán)隊(duì)使用了機(jī)器學(xué)習(xí)系統(tǒng)，從大量廣播視頻中學(xué)習(xí)網(wǎng)球技能，并將學(xué)習(xí)到的動(dòng)作模擬為穩(wěn)定的控制器。這個(gè)系統(tǒng)結(jié)合了物理模擬和動(dòng)作規(guī)劃策略，能夠準(zhǔn)確地模擬球拍擊球、發(fā)球、旋球等各種網(wǎng)球動(dòng)作。
他們還開發(fā)了一個(gè)基于物理模擬的糾正系統(tǒng)，用來修正從廣播視頻中提取出的低質(zhì)量動(dòng)作。
通過這項(xiàng)技術(shù)，游戲設(shè)計(jì)師可以讓他們的角色通過模仿現(xiàn)實(shí)運(yùn)動(dòng)員的鏡頭來學(xué)習(xí)移動(dòng)，并自動(dòng)生成新的變化和動(dòng)態(tài)響應(yīng)行為。此外，研究人員還計(jì)劃將這項(xiàng)技術(shù)應(yīng)用于機(jī)器人學(xué)習(xí)，讓機(jī)器人通過分析視頻來學(xué)習(xí)技能。盡管目前該系統(tǒng)只限于網(wǎng)球，但他們認(rèn)為將來可以擴(kuò)展到籃球、曲棍球和足球等其他運(yùn)動(dòng)。
這項(xiàng)研究的成果將于8月6日至10日在洛杉磯舉行的 SIGGRAPH 會(huì)議上展示，并已發(fā)表了相關(guān)研究論文。這一技術(shù)的推出將為虛擬運(yùn)動(dòng)員的動(dòng)作提供更多的真實(shí)感，提高運(yùn)動(dòng)模擬技術(shù)的水平。
項(xiàng)目網(wǎng)址:https://xbpeng.github.io/projects/Vid2Player3D/2023_TOG_Vid2Player3D.pdf
