近日,谷歌藝術與文化部的Damien Henry與英國舞蹈編導Wayne McGregor合作,共同研發了一種能夠預測特定風格舞蹈動作的人工智能。
這個工具可以根據數百小時的視頻片段生成自創的舞蹈編排,所有的資料都來自于Wayne McGregor自己以及他公司的十位舞者的檔案。
在觀看了他們的舞蹈動作視頻后,AI可以抓取出這些舞蹈家的個人風格,并創造類似風格的獨舞編排。
McGregor對科學和技術并不是一時興起,他擁有普利茅斯大學的名譽科學博士學位。他說,這個新項目是在回顧他25年來的表演視頻時想到的,他想知道技術能否幫助保持表演的新鮮感。
McGregor 說到:“我想用一種有趣的方式來利用這個龐大的工作檔案,所以我問Damien是否可以用它來產生一些新的東西。所有的這一切最后都歸結到了編排中的一個至關重要的問題:如何不斷創造新的內容?”
人工智能已經能夠預測很多事情,比如你將在手機上輸入的下一個單詞,或者在上傳到社交媒體的圖片中識別你的身份。但是,預測手勢對人工智能來說是很棘手的。
Henry說,他在科學網站distill.pub上的一篇帖子中得到了靈感,該帖子使用神經網絡,根據你在前一封信中的筆跡去預測下一封信的筆跡形式。他提出了一個類似的算法,可以對給定的運動進行預測。通過視頻捕捉舞蹈演員的姿勢,然后使用工具提供接下來最有可能的幾個舞蹈片段,并在屏幕上實時顯示它們。
這項技術錄入了McGregor的檔案和他的舞蹈演員的錄制視頻。Henry認為,在某種程度上,人工智能學會了如何跳舞,但它的舞蹈風格與Wayne McGregor十分相似。
該工具的工作原理是利用網絡攝像機獲取視頻輸入,并通過繪制不同身體部位之間的點,提取舞蹈演員做出特定姿勢的“骨架”。它將這個輸入至三種不同的算法來猜測下一個舞蹈姿勢可能是什么,這需要考慮到特定舞者的個人風格,也要考慮到公司其他九個舞者的風格。
這總共產生了30個潛在的編排序列,目前持續時間約10秒,并使用類似的"骨架" 視覺顯示在計算機屏幕上,McGregor會選擇他想用哪一個序列。Henry說:“接下來,無論舞蹈演員跳什么,都可以再次錄制,重新輸入機器。”
由AI工具讀取的舞者"骨架"
對于McGregor來說, 這項技術最引人入勝的一個方面是, 它可以學習和再現舞者的特殊風格。
他說:“我之所以選擇某些舞者,是因為他們的身體特征和特殊的運動方式。”Damien的發明的天才之處在于,它抓住了表演的精髓。
實際上,算法在編舞中已經被使用了幾十年。
早在1964年,在匹茲堡大學,Jeanne Beaman和Paul Le Vasseur就用計算機從不同的時間變化、空間方向和他們輸入的運動類型中產生隨機的舞蹈序列。本世紀初,編導們使用了一種叫"choreograph" 的軟件,該軟件是一種排序工具,可以讓編導在時間軸上設置數字變體, 在表演過程中作為舞者的提示表。由于舞臺周圍安裝了傳感器, 它能夠實時更新舞者的動作。
但是人工智能在舞蹈和創造力方面有局限性。Michael Klien是杜克大學舞蹈項目的編導,也是ChoreoGraph的熟練使用者。他的軟件作品在倫敦皇家歌劇院展出,但他解釋說,他很快就厭倦了這一過程,并在2002年放棄了系統,轉而直接與他的舞蹈演員合作。
他表示:“我們不斷在系統中加入更多的算法,使其更加智能,我想實現人工智能編排結構。但我意識到,人工智能不能作為開發舞蹈的中堅力量。我們對智能的假設構建出我們的人工智能機器,這也意味著我們不會突破我們的想象力極限。”
AI工具預測舞蹈演員下一步動作的示例
Henry表示,谷歌的工具無法發明出以前從未見過的動作。像所有的人工智能一樣,它通過“插值”來構建結果——也就是說,它預測的是在之前所有學到的事情中最有可能發生的事情。
“我們不是要用AI取代編舞這個角色,”他說。“但是,AI可以以一種非常有效和快速的方式進行創造,這樣創造的過程就會永不停止。真正的創造部分將來自Wayne對這些舞蹈序列的選擇與使用。”
當然,AI編舞也不是完全不具備創造力。該技術可以畫出一張它所識別的不同舞蹈動作的“地圖”,并且推薦特定的動作序列。Henry解釋說, 它在動作之間轉換的方式可能并未在訓練數據中出現過。這意味著它必須有潛力想出以前從未做過的動作。McGregor 表示,“我總是對一件我從未見過的東西感興趣”。
這項技術也可以設置為提供一個混合兩個舞者風格的編排舞蹈序列。當公司試用時這一功能時,這引起觀看者哈哈大笑,你想象一下你以別人的風格在屏幕上移動,你就能體會到這種樂趣了。
比如說,在McGregor的檔案中插入巴西桑巴舞的錄像,會發生什么?結果將會是一場以前可能從未見過的混合舞。但是McGregor說,他并不擔心AI會編排出四不像的舞蹈。“接下來如何選擇還是我來決定的。我是整個舞蹈的源頭。我更把這看作一個創造的機會,我很喜歡這種不確定的感覺,像在玩游戲一樣。”
McGregor希望這一工具將來可以用于實時工作,每個舞蹈演員都有自己的展示屏幕,并在舞臺上可以再現算法傳遞出的舞蹈序列。但是一些技術細節仍然需要整理——比如,該程序能否同時支持十部手機連接,能否將舞蹈序列同時顯示在屏幕上?
McGregor對此很有信心“我們將會實現實時舞蹈編排,這一定會很吸引人。”
-
谷歌
+關注
關注
27文章
6142瀏覽量
105100 -
神經網絡
+關注
關注
42文章
4762瀏覽量
100539 -
人工智能
+關注
關注
1791文章
46859瀏覽量
237577
原文標題:跳舞也比不過AI?谷歌AI已可以自行freestyle
文章出處:【微信號:robot-1hjqr,微信公眾號:1號機器人網】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
評論