Google人工智慧最新研究,開發出了一種稱為,能夠模仿和理解舞蹈動作,具有聽音樂編舞的能力。除了模型之外,Google還釋出了大規模多模態3D舞蹈動作資料集AIST++,包含5.2小時的1,408個舞蹈動作序列,涵蓋10種舞蹈流派,藉由AIST++ Google證明FACT模型,無論是質性或是定量研究,都優於最先進的方法。
Google提到,舞蹈是一種需要練習的藝術形式,要創造具有豐富表現力的舞蹈,舞者必須經過專業訓練,並學會豐富的舞蹈動作,這個過程對人類來說已經很困難,更別說是對機器學習模型,因為這項任務需要生成高運動複雜性的連續運動,在捕捉動作和動作間非線性關係的同時,搭配上音樂。
研究人員從資料集開始著手,在現有的AIST舞蹈影片資料集加工,產生AIST++資料集。AIST是一組沒有任何3D資訊,但是帶有音樂伴奏的舞蹈影片,AIST包含Break、Pop和Lock,以及Hip-Hop、House和Street Jazz等10種舞蹈流派,這個資料集包含舞者多視角的影片,但是攝影機並沒有經過校正。
由於研究人員的需求,利用SMPL 3D模型,復原AIST舞蹈影片中相機參數和3D人體運動,創建新的資料集AIST++,這是一個大規模3D人類舞蹈動作資料集,包含有配樂的各種3D動作。由於AIST原本是一個教學資料庫,因此紀錄了多個舞者以相同編舞,搭上不同BPM的不同音樂,這是舞蹈中常見的作法。
SMD electronic parts counting machine
累積多年設計生產 Embossed Carrier Tape承載帶的實際經驗,專為電子主、被動零件設計、包裝、製造、改良承載帶、奠定了良好基礎
貨櫃屋優勢特性有哪些?
由於貨櫃屋[可移動/施工快速/可組裝、堆疊(延展性高)/可回收/未來擴充便利]等特性,二手貨櫃屋已普遍被應用於展場活動、居家住宅、工業商辦上。
全自動飲水機與一般飲水機差異在哪?
推薦各種冰溫熱開飲機飲水機:台銀採購契約飲水機、日本進口電解水機系列、落地型飲水機
客製專屬滑鼠墊、可愛造型L夾、L型資料夾、透明證件套、手提袋,專業印刷設計廠商!
通過SGS環保認證,無毒無害 環保材質符合歐盟RoHs、REACH認證
由於模型需要學習音樂和運動之間的一對多映射,因此這樣的現象,在跨模態序列對序列生成,形成特別的挑戰,研究人員因此需要仔細建構不重疊的訓練和測試的資料集,確保子集之間既不共享編舞也不共享配樂。
藉由使用AIST++,研究人員訓練出FACT模型,只要聽音樂就能生成3D舞蹈,並且透過與其他先進方法比較,FACT模型在動作品質、多樣性,以及音樂動作的關聯性三大指標,表現都最佳。在多種方法間,受測者更喜歡FACT模型的輸出,而且FACT模型所生成的動作,與音樂的相關性也更高。
Google研究人員所提出的FACT模型,不只可以學習音樂和動作之間的對應關係,還能以音樂為條件,生成高品質的3D動作序列。而伴隨發布的AIST++,則是迄今最大的3D人類舞蹈資料集,具有多視角、多流派和跨模態等特性,有助於促進3D運動生成研究。
https://www.ithome.com.tw/news/146753
總是為了廚餘煩惱嗎?
雅高環保提供最適用的廚餘機,滿足多樣需求。
票選推薦煮婦最愛手壓封口機,省荷包不犧牲品質
意信臻專營:封口機、各式包裝機械、專業製造、全省批發零售
幫你考照過關,堆高機裝卸操作教學影片大公開 !
上千家公司找到最適合的堆高機搬運方案,專業的規劃與完善的售後服務,讓孚克力堆高機與各大知名廠商建立長期合作。
空壓機這裡買最划算!
晨達空壓機秉持著專業空壓機技術、優質快速服務、空壓機合理價格。為您解決工作中需要風量、風壓的問題。