蓋蒂之夜：我所見即所得
今年早些時候，蓋蒂博物館邀請伍德伯里的“應用計算機科學-媒體藝術”計劃為其大學之夜活動設計裝置和展覽。結果合併AI和視覺藝術在交互式安裝是在範圍和複雜性，認真執行顯著，同時情感和好玩-啟發，至少可以說。我們與ACS 計劃主席Ana Herruzo教授（一位受過培訓的建築師）以及一位才華橫溢的藝術家和程序員進行了交談，我們在這裡寫的《 Captured Atmospheres》 與學生們合作創建了展覽。
Derivative：安娜，請您介紹一下伍德伯里的ACS程序以及此Getty的安裝過程如何？
安娜Herruzo：在應用計算機科學-媒體藝術計劃是科學學士學位，幫助學生成為設計師，思想家，而新數字時代的領導者。它是一種藝術與技術相結合的學位，重點是通過與交互環境，體驗設計和人類交互合作來致力於新興的數字實踐。該計劃使用計算機科學作為工具在設計，娛樂和媒體藝術領域進行創新。
今年，我們受到蓋蒂博物館的邀請，為他們的“大學之夜”活動設計了裝置。我們決定將兩個類別結合起來以進行項目開發。
通過本人和教職員工Nikita Pashenkov的概念和項目管理，伍德伯里的ACS學生創造了一種融合了AI和視覺藝術的沉浸式交互式裝置。我的媒體環境課程的學生領導了項目的設計和執行，帕申科夫教授的人工智能課程的學生領導了項目的機器學習開發部分。
Derivative：您能否簡要介紹一下您構建的TouchDesigner系統？
Ana Herruzo： TouchDesigner開發了四個主要領域。學生將在這些領域的每一個領域中發揮領導作用。
軟件，硬件和網絡-Zane Zukovsky
播放系統-Ben Luker
互動發展-李勝民
藝術指導，整體外觀和情感色彩調色板-邱潔儀
除了這些職責外，每個學生還設計了至少三個實時TouchDesigner場景。學生不僅學習了TD編程技能，而且還發揮了創新作用，並學習瞭如何在TD中創建實時生成的視覺效果。沒有一個學生以前有過TouchDesigner的經驗。
Derivative：真令人印象深刻！ 在上下文中，了解一些您在教授TouchDesigner方面的經驗將非常有見識。
安娜·赫魯佐（Ana Herruzo）：在程序所關注的藝術和技術領域，TouchDesigner是一個非常強大的工具。學生在第一年學習3D建模和編程，因此，在參加Media Environments課程時，他們很快就會選擇TouchDesigner。他們這學期學到了多少，真是令人驚訝。正如我提到的那樣，它們現在都可以製作漂亮的3D場景，但是它們也可以編寫腳本和編寫顯示系統，構建複雜的邏輯系統，狀態機，解析交互式數據，與其他應用程序聯網等等。
“學習TOUCHDESIGNER就像學習如何寫具有邏輯思想的詩。”趙家傑學生
蓋蒂安裝簡介
安娜·赫魯佐（Ana Herruzo）：我們設計並開發了一種體驗式裝置，該裝置通過分析人的面部表情和行為以及通過機器學習算法生成的文本來創建實時交互式視覺效果，該算法是在洛杉磯J.保羅·蓋蒂博物館的藝術收藏中受過訓練的。
該裝置包括一個垂直的電視牆，該電視牆由三個橫向屏幕組成。在牆的頂部，有兩個嵌入式傳感器：Microsoft Kinect ONE（包含RGB彩色VGA視頻攝像機，深度傳感器和多陣列麥克風）和USB網絡攝像機。這兩個傳感器使我們能夠使用計算機視覺算法從用戶獲取實時數據。我們使用了兩個軟件平台PyCharm作為Python編程語言的集成開發環境。和Derivative TouchDesigner是一個實時渲染的可視化編程平台。這兩個平台通過網絡發送的TCP / IP套接字相互通信。視頻牆上顯示的內容是在用戶輪廓內外播放的實時生成的動畫。
Derivative：您之前未完成此過程的哪一部分？
Ana Herruzo：在學術環境中開發具有此特徵的項目。我們需要大量的批准，所有事情都比生產環境慢。此外，該項目還需要在洛杉磯的一家頂級藝術機構為某項活動製作一件作品，並且需要事先明確起草該項目，以通過必要的審批流程。因此，學術和藝術機構的作品與我以前所經歷的完全不同。
至於安裝本身，我已經在專業環境中進行了類似的編程，但是管理和指導所有學生進行協作並將所有開發合併到一個TouchDesigner文件中是一種新的體驗。要確保學生的工作量不會過多，並且需要在合理的每周家庭作業時間和上課時間內完成工作，因此需要進行大量計劃。
在TouchDesigner中，重要的是要教給學生如何在同一個TouchDesigner文件上一起工作，並確保一旦將其包含在整個回放系統中，這些毒物將連接到所有輸入和網絡數據。
在學期開始時，所有學生都從頭開始學習TD，因此整個學期都有驚人的進步和學習曲線。
Derivative：這是否給您未來工作/展覽/教學的思路？
Ana Herruzo：實際上，我已經對機器學習和創建數據庫以創建新內容非常感興趣。在接下來的項目中，我將專注於此。
我們非常感謝Ana Herruzo投入的所有時間與我們談論《蓋蒂裝置》，並成為如此出色的老師和領袖！對於那些有興趣看到該裝置的人，現在可以在伍德伯里大廳校園中永久展示它們。該裝置還將在2020年5月伍德伯里（Woodbury）舉行的第56屆時裝秀上展出，該展覽在加利福尼亞州洛杉磯的彼得森汽車博物館舉行。
“嗨，我叫李成民。我剛完成應用計算機科學-媒體藝術專業的第二年課程。
當我學習TouchDesigner並將其用於不同的任務時，感覺就像是被引入了一個新世界，因為我注意到程序中有無限的創建可能性。另外，從我的教練和其他在線資源中學習TD可以使我比以前更加廣泛和富有創意地思考。
在Getty項目中，我負責實現Kinect和用戶體驗部分。特別是Kinect部分具有挑戰性，因為我只需要在特定邊界內進行跟踪，這樣Kinect只能檢測出其中的許多人，並解僱其外部的任何人。另外，在製作時，我必須考慮足夠長的距離，以便人們可以舒適地直接觀看視頻牆。在此過程中，我使用了各種方法，例如使用python代碼，冒泡排序和CHOP。後來，在我的老師Ana Herruzo的幫助下，我得以實現解決該工作的邏輯。但是，我嘗試過並失敗的其他方法仍然使我變得更有經驗，成為TouchDesigner用戶。另外，它告訴我，我不應不願意嘗試使用該程序的任何可能方法，它具有如此強大的功能。