Sadly by your side 利用圖像來產生音樂，不需要專業設備也能當DJ

藝術的發展就是多方面的融合。現在，義大利的互動設計師 Angelo Semeraro 想到要讓視覺與音樂融合，但和我們一般多媒體影音播放軟體裡看到的視覺化音樂效果不一樣，Semeraro 不打算透過聲音來產生動畫效果，而是反過來透過圖像來形成音樂。

為此，他發起名為 的「跨界」藝術項目，與別人合作，最終做出一款同名的app，一本書。但在 Semeraro 看來，這款名為 Sadly by your side 的app，不光是一張，還是一種「聯動」（synesthetic）app。

下載app然後打開它，會發現它好像當下的攝影類app一樣，整個螢幕都變成了電子取景視窗，但不同的是，上面還有灰、紅、藍種顏色色塊所組成的拼盤——同時，app會自動播放內建的曲目（還記得它是一張電子音樂專輯吧？）。當我們把鏡頭對著不同的地方，不同色塊的面積會相應的增加、減少，結果影響到音樂裡不同音樂元素的表現。

透過這種方式，我們就能夠控制 Sadly by your side 這張專輯裡的曲目是如何表現的了，儘管我們未必具備音樂方面的知識。

Semeraro 的實驗讓普通的大眾無需唱盤機、監聽耳機，也嘗試到做 DJ 的滋味。有趣的是，現實世界裡的視覺元素非常豐富，這意味著 Sadly by your side 有無限的表現空間，無數的個性化元素，以及無數次參與的機會。

為什麼 Semeraro 會想到一個這麼有趣的點子？他對《Wire》雜誌說，「我一開始是在思考如何透過app來表現音樂，透過行動設備如何增加聽覺體驗。行動設備讓人能夠無論何地都能聽音樂，因此我認為也許音樂可以透過適應環境，從而給人個性化的聽覺體驗。」

專案成員音效設計師、音樂製作人 Davide Cairo 提出可以將音樂分成三個部分：節拍、曲調、和聲；然後負責視覺體驗的 Matteo Di Iorio 和 Claudio Fabbro 則發展出一套視覺語音，將音樂的這三種成分定義為紅、藍、灰三種顏色；最終 Semeraro 再整理這些想法，最終提出開發一個app，並開發了一套演算法來捕捉音樂元素與視覺元素之間的關聯。

如果你想知道專輯原本的表現應該是怎麼樣的，那需要花 13 美元購買他們所設計的書，每一頁畫上了紅、藍、灰不同比例的色塊組合，打開app然後用鏡頭對著它們，就能聽到「原音」的效果。

Sadly by your side 給人感覺十分前衛，它不光將 CD、MP3 變為手機app；還改變了音樂製作的模式，從 DJ 控制，到透過演算法與外界的視覺元素來控制，提高人們參與感，讓人擁有廣闊的實驗空間。這讓我想起了之前所討論的「自動生成藝術」，還有擁有無窮想像力的桌布應用程式 Deko。