麻省理工學(xué)院 | 機(jī)器學(xué)習(xí)和藝術(shù):一個(gè)創(chuàng)造性的連續(xù)體
指南者留學(xué)
2022-12-22 13:47:08
閱讀量:1197
<p><img src="https://info.compassedu.hk/sucai/content/1671688076917/1671688076917.jpg" width="808" height="539" />用鼓或薩克斯管畫(huà)出一幅多樂(lè)器的作品??粗W(wǎng)絡(luò)攝像頭,說(shuō)話,看著你的嘴在屏幕上跳動(dòng)——這是一系列可愛(ài)而笨拙的連鎖反應(yīng)的輸入。</p>
<p> </p>
<p>這是麻省理工學(xué)院劉易斯音樂(lè)圖書(shū)館的游客在與兩個(gè)新的數(shù)字裝置“涂鴉曲調(diào)”和“來(lái)自嘴巴的聲音”互動(dòng)時(shí)遇到的情況,這是由藝術(shù)與技術(shù)中心(CAST)訪問(wèn)藝術(shù)家Andreas Refsgaard與音樂(lè)技術(shù)和數(shù)字媒體圖書(shū)館員Caleb Hall合作創(chuàng)作的。劉易斯音樂(lè)圖書(shū)館部門(mén)負(fù)責(zé)人艾弗里·博迪(Avery Boddie)發(fā)起了駐留計(jì)劃,他認(rèn)識(shí)到雷夫斯加德在揭示新興技術(shù)的趣味性方面的天賦。編碼和機(jī)器學(xué)習(xí)的復(fù)雜性對(duì)新人來(lái)說(shuō)似乎令人生畏,但作為一名創(chuàng)意編碼員、交互設(shè)計(jì)師和教育家,Refsgaard的實(shí)踐試圖向所有人開(kāi)放這一領(lǐng)域。包括工作坊、藝術(shù)家談話、班級(jí)參觀和展覽,駐地充滿了他獨(dú)特的幽默感——活潑的古怪和隨和的相關(guān)性的結(jié)合。</p>
<p> </p>
<p><span class="h1"><strong>笑中學(xué)習(xí)</strong></span></p>
<p> </p>
<p>在哥本哈根工作的雷夫斯加德是機(jī)器學(xué)習(xí)領(lǐng)域真正的特立獨(dú)行者。“我對(duì)我們通過(guò)代碼表達(dá)自己的方式很感興趣,”他解釋道。</p>
<p> </p>
<p>“我喜歡在輸入和輸出之間建立非常規(guī)的聯(lián)系,讓電腦充當(dāng)翻譯器——一個(gè)工具可以讓你用眼睛播放音樂(lè),或者它可以從一張墨西哥卷餅的照片生成一首情詩(shī)。”雷夫斯加德對(duì)創(chuàng)新的特別解讀并不在于直接解決問(wèn)題或創(chuàng)辦改變世界的初創(chuàng)公司。相反,他只是試圖“找出可以做什么”,提供可訪問(wèn)的開(kāi)源模板,以激發(fā)新的創(chuàng)造性想法和應(yīng)用程序。</p>
<p> </p>
<p>由Refsgaard編程,并以霍爾創(chuàng)造的自定義聲音為特色,“涂鴉曲調(diào)”和“從嘴里發(fā)出的聲音”展示了如何通過(guò)自發(fā)的人類手勢(shì)和算法生成的輸出混合來(lái)生成原創(chuàng)作品。在“涂鴉曲調(diào)”中,機(jī)器學(xué)習(xí)算法在不同樂(lè)器的圖紙數(shù)據(jù)集上訓(xùn)練:鋼琴、鼓、貝斯吉他或薩克斯管。當(dāng)用戶在觸摸屏上畫(huà)出這些圖像之一時(shí),就會(huì)產(chǎn)生聲音;你加入的樂(lè)器越多,作曲就越復(fù)雜。“從嘴里發(fā)出的聲音”通過(guò)面部跟蹤和自我捕捉圖像來(lái)實(shí)現(xiàn)。當(dāng)參與者面對(duì)網(wǎng)絡(luò)攝像頭并張開(kāi)嘴巴時(shí),一個(gè)自動(dòng)快照就會(huì)被鋼琴的音符彈開(kāi)。要親自嘗試這些項(xiàng)目,請(qǐng)滾動(dòng)到本文的末尾。</p>
<p> </p>
<p><span class="h1"><strong>庫(kù),無(wú)限的</strong></span></p>
<p> </p>
<p>薩克斯管的尖叫和數(shù)字鼓點(diǎn)并不是安裝這些項(xiàng)目的地方發(fā)出的唯一聲音。“我的辦公室就在附近,”霍爾說(shuō)。“所以當(dāng)我突然聽(tīng)到笑聲時(shí),我就知道發(fā)生了什么事。”劉易斯音樂(lè)圖書(shū)館的這個(gè)新的聲音維度符合整個(gè)環(huán)境的氣質(zhì)——設(shè)計(jì)為音頻實(shí)驗(yàn)的校園中心,圖書(shū)館從來(lái)沒(méi)有打算完全安靜。Refsgaard的駐地體現(xiàn)了由Boddie帶頭的漸進(jìn)式編程的新強(qiáng)調(diào),隨著圖書(shū)館的戰(zhàn)略轉(zhuǎn)向數(shù)字館藏和音樂(lè)技術(shù)。</p>
<p> </p>
<p>“除了作為一個(gè)安靜的學(xué)習(xí)和獲取物理資源的空間,我們希望圖書(shū)館成為一個(gè)用戶聚集、合作和探索的地方。”Boddie說(shuō)。“在這方面,這次實(shí)習(xí)非常成功。通過(guò)研討會(huì),我們能夠?qū)?lái)自麻省理工學(xué)院社區(qū)和他們獨(dú)特學(xué)科的個(gè)人聯(lián)系起來(lái)。我們有來(lái)自斯隆管理學(xué)院、蘇世民計(jì)算學(xué)院、音樂(lè)和戲劇藝術(shù)的人,所有人都在一起工作,搞得一團(tuán)糟,創(chuàng)造出有時(shí)有用、有時(shí)沒(méi)用的工具。”</p>
<p> </p>
<p><span class="h1"><strong>錯(cuò)誤和意外</strong></span></p>
<p> </p>
<p>誤差的整合是Refgaard工作的一個(gè)關(guān)鍵品質(zhì)。偶爾的小故障是藝術(shù)的一部分,它們也會(huì)慢慢削弱圍繞AI的炒作;一個(gè)算法的好壞取決于它的數(shù)據(jù)集,而這個(gè)數(shù)據(jù)集會(huì)受到人類偏見(jiàn)和疏忽的影響。在一場(chǎng)名為“機(jī)器學(xué)習(xí)與藝術(shù)”的公開(kāi)藝術(shù)家演講中,觀眾們被介紹給了雷夫斯加德的另類藝術(shù)范式,并展示了Booksby等項(xiàng)目。ai(出售人工智能制作的科幻小說(shuō)的網(wǎng)上書(shū)店),是不是很FUNKY?(試圖區(qū)分“有趣”和“無(wú)聊”的圖像),以及“眼睛指揮”(通過(guò)眼球運(yùn)動(dòng)和面部動(dòng)作播放音樂(lè)的界面)。展覽裝置上的小故障被坦率地承認(rèn)了(《涂鴉曲調(diào)》確實(shí)偶爾會(huì)把薩克斯管的畫(huà)誤認(rèn)為松鼠),雷夫斯加德鼓勵(lì)觀眾提出潛在的改進(jìn)建議。</p>
<p> </p>
<p>這種開(kāi)放的態(tài)度為“藝術(shù)、算法和人工智能”和“交互設(shè)計(jì)師的機(jī)器學(xué)習(xí)”研討會(huì)奠定了基調(diào),旨在適合新人和好奇的專家。雷夫斯加德對(duì)音樂(lè)技術(shù)課程的訪問(wèn)探索了機(jī)器學(xué)習(xí)放大人類創(chuàng)造力的方式,以及如何在藝術(shù)意圖和意想不到的結(jié)果之間進(jìn)行調(diào)整。“在我看來(lái),成功是當(dāng)參與者參與材料并提出新的想法時(shí)。學(xué)習(xí)的第一步是理解所教的內(nèi)容,接下來(lái)就是以老師無(wú)法預(yù)見(jiàn)的方式應(yīng)用這種理解。”</p>
<p> </p>
<p><span class="h1"><strong>不確定性和機(jī)遇</strong></span></p>
<p> </p>
<p>Refsgaard的工作體現(xiàn)了麻省理工學(xué)院圖書(shū)館發(fā)展的一些核心價(jià)值觀和核心問(wèn)題——數(shù)字化、計(jì)算和開(kāi)放獲取的問(wèn)題。通過(guò)選擇讓他輕松的演示文稿免費(fèi)訪問(wèn),他放棄了對(duì)自己想法的所有權(quán);機(jī)器學(xué)習(xí)模型可以作為學(xué)生的學(xué)習(xí)設(shè)備,也可以由公司進(jìn)行貨幣化。對(duì)于雷夫斯加德來(lái)說(shuō),玩耍是一種與新興技術(shù)的倫理影響接觸的方式,霍爾發(fā)現(xiàn)自己在為這兩個(gè)裝置創(chuàng)作聲音的過(guò)程中也在努力解決這些問(wèn)題。“如果我寫(xiě)了聲音樣本,但其他人把它們編成了樂(lè)曲,那么誰(shuí)擁有音樂(lè)?還是AI擁有音樂(lè)?在音樂(lè)技術(shù)領(lǐng)域工作是一個(gè)非常有趣的時(shí)代;我們正在進(jìn)入一個(gè)未知的領(lǐng)域。”</p>
<p> </p>
<p>對(duì)于雷夫斯加德來(lái)說(shuō),不確定性是他算法藝術(shù)的秘密武器。“我喜歡制作讓我對(duì)最終結(jié)果感到驚訝的東西。”他說(shuō)。“我正在尋找熟悉和意外之間的甜蜜點(diǎn)。”正如他解釋的那樣,太多的驚喜只是噪音,但機(jī)器可能會(huì)把薩克斯管誤認(rèn)為松鼠,這也有一些令人高興的地方。一個(gè)有創(chuàng)造力的編碼員的任務(wù)是不斷地調(diào)整人類和機(jī)器能力之間的關(guān)系——找到并跟隨音樂(lè)。</p>
<p> </p>
<p>“涂鴉曲調(diào)”和“從嘴里發(fā)出的聲音”在麻省理工學(xué)院劉易斯音樂(lè)圖書(shū)館(14E-109)展出,直到12月20日。點(diǎn)擊鏈接與項(xiàng)目進(jìn)行在線互動(dòng)。</p>
<p> </p>
<blockquote>
<p>注:本文由院校官方新聞直譯,僅供參考,不代表指南者留學(xué)態(tài)度觀點(diǎn)。</p>
</blockquote>