麻省理工學(xué)院 | 機(jī)器學(xué)習(xí)和藝術(shù):一個創(chuàng)造性的連續(xù)體
指南者留學(xué)
2022-12-22 13:47:08
閱讀量:1198
<p><img src="https://info.compassedu.hk/sucai/content/1671688076917/1671688076917.jpg" width="808" height="539" />用鼓或薩克斯管畫出一幅多樂器的作品??粗W(wǎng)絡(luò)攝像頭,說話,看著你的嘴在屏幕上跳動——這是一系列可愛而笨拙的連鎖反應(yīng)的輸入。</p>
<p> </p>
<p>這是麻省理工學(xué)院劉易斯音樂圖書館的游客在與兩個新的數(shù)字裝置“涂鴉曲調(diào)”和“來自嘴巴的聲音”互動時遇到的情況,這是由藝術(shù)與技術(shù)中心(CAST)訪問藝術(shù)家Andreas Refsgaard與音樂技術(shù)和數(shù)字媒體圖書館員Caleb Hall合作創(chuàng)作的。劉易斯音樂圖書館部門負(fù)責(zé)人艾弗里·博迪(Avery Boddie)發(fā)起了駐留計劃,他認(rèn)識到雷夫斯加德在揭示新興技術(shù)的趣味性方面的天賦。編碼和機(jī)器學(xué)習(xí)的復(fù)雜性對新人來說似乎令人生畏,但作為一名創(chuàng)意編碼員、交互設(shè)計師和教育家,Refsgaard的實(shí)踐試圖向所有人開放這一領(lǐng)域。包括工作坊、藝術(shù)家談話、班級參觀和展覽,駐地充滿了他獨(dú)特的幽默感——活潑的古怪和隨和的相關(guān)性的結(jié)合。</p>
<p> </p>
<p><span class="h1"><strong>笑中學(xué)習(xí)</strong></span></p>
<p> </p>
<p>在哥本哈根工作的雷夫斯加德是機(jī)器學(xué)習(xí)領(lǐng)域真正的特立獨(dú)行者。“我對我們通過代碼表達(dá)自己的方式很感興趣,”他解釋道。</p>
<p> </p>
<p>“我喜歡在輸入和輸出之間建立非常規(guī)的聯(lián)系,讓電腦充當(dāng)翻譯器——一個工具可以讓你用眼睛播放音樂,或者它可以從一張墨西哥卷餅的照片生成一首情詩。”雷夫斯加德對創(chuàng)新的特別解讀并不在于直接解決問題或創(chuàng)辦改變世界的初創(chuàng)公司。相反,他只是試圖“找出可以做什么”,提供可訪問的開源模板,以激發(fā)新的創(chuàng)造性想法和應(yīng)用程序。</p>
<p> </p>
<p>由Refsgaard編程,并以霍爾創(chuàng)造的自定義聲音為特色,“涂鴉曲調(diào)”和“從嘴里發(fā)出的聲音”展示了如何通過自發(fā)的人類手勢和算法生成的輸出混合來生成原創(chuàng)作品。在“涂鴉曲調(diào)”中,機(jī)器學(xué)習(xí)算法在不同樂器的圖紙數(shù)據(jù)集上訓(xùn)練:鋼琴、鼓、貝斯吉他或薩克斯管。當(dāng)用戶在觸摸屏上畫出這些圖像之一時,就會產(chǎn)生聲音;你加入的樂器越多,作曲就越復(fù)雜。“從嘴里發(fā)出的聲音”通過面部跟蹤和自我捕捉圖像來實(shí)現(xiàn)。當(dāng)參與者面對網(wǎng)絡(luò)攝像頭并張開嘴巴時,一個自動快照就會被鋼琴的音符彈開。要親自嘗試這些項(xiàng)目,請滾動到本文的末尾。</p>
<p> </p>
<p><span class="h1"><strong>庫,無限的</strong></span></p>
<p> </p>
<p>薩克斯管的尖叫和數(shù)字鼓點(diǎn)并不是安裝這些項(xiàng)目的地方發(fā)出的唯一聲音。“我的辦公室就在附近,”霍爾說。“所以當(dāng)我突然聽到笑聲時,我就知道發(fā)生了什么事。”劉易斯音樂圖書館的這個新的聲音維度符合整個環(huán)境的氣質(zhì)——設(shè)計為音頻實(shí)驗(yàn)的校園中心,圖書館從來沒有打算完全安靜。Refsgaard的駐地體現(xiàn)了由Boddie帶頭的漸進(jìn)式編程的新強(qiáng)調(diào),隨著圖書館的戰(zhàn)略轉(zhuǎn)向數(shù)字館藏和音樂技術(shù)。</p>
<p> </p>
<p>“除了作為一個安靜的學(xué)習(xí)和獲取物理資源的空間,我們希望圖書館成為一個用戶聚集、合作和探索的地方。”Boddie說。“在這方面,這次實(shí)習(xí)非常成功。通過研討會,我們能夠?qū)碜月槭±砉W(xué)院社區(qū)和他們獨(dú)特學(xué)科的個人聯(lián)系起來。我們有來自斯隆管理學(xué)院、蘇世民計算學(xué)院、音樂和戲劇藝術(shù)的人,所有人都在一起工作,搞得一團(tuán)糟,創(chuàng)造出有時有用、有時沒用的工具。”</p>
<p> </p>
<p><span class="h1"><strong>錯誤和意外</strong></span></p>
<p> </p>
<p>誤差的整合是Refgaard工作的一個關(guān)鍵品質(zhì)。偶爾的小故障是藝術(shù)的一部分,它們也會慢慢削弱圍繞AI的炒作;一個算法的好壞取決于它的數(shù)據(jù)集,而這個數(shù)據(jù)集會受到人類偏見和疏忽的影響。在一場名為“機(jī)器學(xué)習(xí)與藝術(shù)”的公開藝術(shù)家演講中,觀眾們被介紹給了雷夫斯加德的另類藝術(shù)范式,并展示了Booksby等項(xiàng)目。ai(出售人工智能制作的科幻小說的網(wǎng)上書店),是不是很FUNKY?(試圖區(qū)分“有趣”和“無聊”的圖像),以及“眼睛指揮”(通過眼球運(yùn)動和面部動作播放音樂的界面)。展覽裝置上的小故障被坦率地承認(rèn)了(《涂鴉曲調(diào)》確實(shí)偶爾會把薩克斯管的畫誤認(rèn)為松鼠),雷夫斯加德鼓勵觀眾提出潛在的改進(jìn)建議。</p>
<p> </p>
<p>這種開放的態(tài)度為“藝術(shù)、算法和人工智能”和“交互設(shè)計師的機(jī)器學(xué)習(xí)”研討會奠定了基調(diào),旨在適合新人和好奇的專家。雷夫斯加德對音樂技術(shù)課程的訪問探索了機(jī)器學(xué)習(xí)放大人類創(chuàng)造力的方式,以及如何在藝術(shù)意圖和意想不到的結(jié)果之間進(jìn)行調(diào)整。“在我看來,成功是當(dāng)參與者參與材料并提出新的想法時。學(xué)習(xí)的第一步是理解所教的內(nèi)容,接下來就是以老師無法預(yù)見的方式應(yīng)用這種理解。”</p>
<p> </p>
<p><span class="h1"><strong>不確定性和機(jī)遇</strong></span></p>
<p> </p>
<p>Refsgaard的工作體現(xiàn)了麻省理工學(xué)院圖書館發(fā)展的一些核心價值觀和核心問題——數(shù)字化、計算和開放獲取的問題。通過選擇讓他輕松的演示文稿免費(fèi)訪問,他放棄了對自己想法的所有權(quán);機(jī)器學(xué)習(xí)模型可以作為學(xué)生的學(xué)習(xí)設(shè)備,也可以由公司進(jìn)行貨幣化。對于雷夫斯加德來說,玩耍是一種與新興技術(shù)的倫理影響接觸的方式,霍爾發(fā)現(xiàn)自己在為這兩個裝置創(chuàng)作聲音的過程中也在努力解決這些問題。“如果我寫了聲音樣本,但其他人把它們編成了樂曲,那么誰擁有音樂?還是AI擁有音樂?在音樂技術(shù)領(lǐng)域工作是一個非常有趣的時代;我們正在進(jìn)入一個未知的領(lǐng)域。”</p>
<p> </p>
<p>對于雷夫斯加德來說,不確定性是他算法藝術(shù)的秘密武器。“我喜歡制作讓我對最終結(jié)果感到驚訝的東西。”他說。“我正在尋找熟悉和意外之間的甜蜜點(diǎn)。”正如他解釋的那樣,太多的驚喜只是噪音,但機(jī)器可能會把薩克斯管誤認(rèn)為松鼠,這也有一些令人高興的地方。一個有創(chuàng)造力的編碼員的任務(wù)是不斷地調(diào)整人類和機(jī)器能力之間的關(guān)系——找到并跟隨音樂。</p>
<p> </p>
<p>“涂鴉曲調(diào)”和“從嘴里發(fā)出的聲音”在麻省理工學(xué)院劉易斯音樂圖書館(14E-109)展出,直到12月20日。點(diǎn)擊鏈接與項(xiàng)目進(jìn)行在線互動。</p>
<p> </p>
<blockquote>
<p>注:本文由院校官方新聞直譯,僅供參考,不代表指南者留學(xué)態(tài)度觀點(diǎn)。</p>
</blockquote>