崑山科大創意設計與編撰課程

Listening Post 聽訊站 (採訪:馬克‧翰森 Mark Hansen)

[p.s 因為Listening Post 這個原文標題取得太好，一個字有多重含意，中文翻譯現階段只求大概了解，尚無法選用更適當的字眼來表達。sorry！]

創作者：馬克‧翰森 和 班‧魯賓 Mark Hansen and Ben Rubin

年份：2001-2002

媒材：裝置

使用軟體：Software Perl, c, Max/MSP, c++, sh/tcsh, R

URL： http://earstudio.com/2010/09/29/listening-post/

什麼是《聽訊站》?

《聽訊站》是藝術裝置作品，能即時（real-time）從不受控管的網路聊天室、佈告欄、公開論壇等地方收集線上文字片斷，這些文字透過語音合成器讀唱出，並同時顯示在懸掛的231個小型電子螢幕（11行21列）上。《聽訊站》能在7種動態（或情境）中循環變換，這7種動態各自都有不同的視覺、聽覺和音樂元素編排，也都有自己的資料處理邏輯。

為什麼你要創造《聽訊站》?

1999年11月我和Ben 在朗訊科技Lucent Technologies （我之前的公司）以及 Brooklyn Academy of Music布魯克林音樂學院舉辦的活動認識。我們第一個合作專案就是讓一個大型企業網站的網頁瀏覽「發聲」（sonification）。Sonification 是指用聲音傳達信息、顯示資料的模式。這對身為聲音藝術家的Ben 和統計學家的我來說，似乎是蠻合理的開始。我們花了好幾星期創造了一套演算法，將用戶的需求模式轉為音樂。這個設計採用相當直接的對映(mapping）區分網站主要區域（由少數頂層目錄定義）的流量和人們在其中瀏覽的深度（同樣由網站的目錄架構決定）。可惜要讓大家注意到是很難的，即便是該網站的內容提供廠商也被逼迫參與。經過一個月左右的時間，我們發現網頁瀏覽的統計資料（上網的副產品）或許不如網上交易或交換的內容來得有趣些。我們都同意網頁瀏覽行為並不很有「表現性」，因為我們只能從點擊模式、瀏覽的時間、需求的網頁來瞥見用戶，這些考量讓我們注意到像是聊天室或佈告欄的網路論壇。（當然這是在2000年初，如果是今天我們的合作應該會自然朝向部落格、YouTube或MySpace發展吧。） 

現在回想起來，還蠻容易從這些論壇取得資料流或從網路不同地方採樣文章的，不過要拿這些資料來創作，呈現方式還要考慮到它的自然節奏或循環週期，這就困難多了。文字作為資料是很難用數學描述或模擬的。更慘的是網路論壇上的拼字和文法、其他老套的假設概念等都是出名的糟糕，這些都牽涉到統計的自然語言處理技術。我們對網絡論壇的興趣，遠超過對內容的總結萃取或將資料縮減為流行語、流行主題的跑馬燈，相反的，我們想做的是捕捉人們連結的那一刻，而這在大多數情況是無法用數學表示的。我們在創作早期就決定在某種程度上要讓資料發聲，並創造情境以簡單明瞭的方式組織（或更正式的說法，群組）和分類內容。

延續之前對網路發聲計畫的基礎，我們第一個網路聊天實驗也是聲響作品：使用文字轉語音引擎（Text-to-speech engine，TTS engine），賦予資料聲音（可以同時有四個說話語音出現），並採用不同的資料導向組成策略來支援它。當我們聽的時候，反而發現自己常注意那些我一起駭入用來監控資料收集情況的顯示文字。雖然我們是用這種簡單的視覺裝置來幫助解決TTS 的缺陷，不過「真的有人打出那些字嗎？」，這些文字很快就變成重要的創意成份。這個視覺元素從2000年於紐約Kitchen 的現場表演中投影的四行字，演變到一個10 x 11 懸掛的真空螢光顯示屏（VFD）的平面格狀系統，第一次《聽訊站》的裝置是在2001年的布魯克林音樂學院，最後的版本則是使用231個 VFD，形成一個弧形的網格，在2002年的Whitney Museum of American Art 首展。《聽訊站》的視覺演變也隨著引進新的TTS，讓整個展間都充斥著聲響（一次可多達一百個聲音）。

用了哪些軟體工具？

每個各別的VFD 螢幕都由上面的微控制器控制，程式主要由 Parallel Development 公司的 Will Pickering 用客製的C 語言所寫。螢幕分為7組，每組有33個（在網格上呈現的方式為 11 x 3 ），由7 台主機提供指令，螢幕收到命令後才沿列顯示文字或出現在特定螢幕上。基本的螢幕主機語言採用 Perl，更上一層的弧形VFD 螢幕網格則是透過一系列的情境程式（scene programs）做編排，同樣用Perl 寫成。

《聽訊站》的聲音使用Max/ MSP 做動態音樂編製，Max 收到的訊息是情境程式透過開放聲音控制( Open Sound Control ）標準傳送的。值得一提的是《聽訊站》的視覺和音效的程式介面非常不同。Max 是視覺程式的環境，意思是當Ben 把不同的聲音元素在「patch」（譯註：Max/ MSP 裡面視覺化音軌等元素的視窗）當中連結，我可以一邊透過Emacs 視窗駭入，從主要情境模組（module）當中連結附程式（subroutines）。最後一個能直接影響《聽訊站》呈現樣貌的主要軟體，就是文字語音轉換引擎（TTS）。跟Max一樣，TTS 也是透過情境程式接收訊息，不過不同的是我們必須要自己寫C++的外包介面(wrapper)才能處理網路通訊。除了Max 和 TTS，還有其他或許比較不明顯的軟體隱藏其中。裝置有製造環場效果的8個喇叭，雖Max 能處理大部分環場效果，我們也採用了山葉數位混音器材，而這個器材需要另寫程式對應每個情境。

最後我們在情境發展時是用了稍有變化的軟體組合。從實際面來說，每個新情境場景都用Perl 程式編排視覺元素，並控制整個場景結構，而Max/Msp 和數位混音器材的程式則共同製作場景的特定音效。（在這裡我們把電子螢幕和TTS 當成固定輸出的裝置，不隨場景變動只聽從已預設的指令。）每個場景的設計都透過反覆的程序，在資料觀察和不斷發展的基本場景元素當中循環發展。讓我們的文字資料有意義，靠的就是Perl 的文字分析和特徵粹取能力，部分也使用UNIX shell 來控制過程，還有R programming 環境做資料分析、建模、統計圖表等。

為什麼要自己寫軟體工具？

因為「裝置」的視聽組件是全新的，我們別無選擇只能自己寫軟體來控制。

大致來說，《聽訊站》在軟體方面採用所謂的「指令碼語言」（scripting language），雖說這個名詞有點難確切去定義它--- 這類語言往往能讓你在一個流動的互動過程中，快速建立程式或指令碼計畫。它跟「系統語言」如C 語言，是完全不同的。舉例來說，Perl 本身的設計相當適合來操控文字（靈感來自之前UNIX shell的工具awk），幾年來程式設計師和研發人員為Perl 語言製造為數驚人的擴充工具，包括網路程式設計等。使用Perl 語言能讓我輸出資料到電子螢幕上，也可以快速在不同情境動態轉換，這些許多都包括用文字分析和運算。透過 Open Sound Control，Perl 程式也可以操縱聲音，傳送訊息到 Max/Msp 或 TTS。為《聽訊站》創作場景，可以說是一種在各種程序間連結和溝通的練習。

自2000年起，類似的Python 語言已成為Perl 的強勁競爭對手，Python 甚至可以在許多諾基亞手機上跑！如果我們今天研發的話，應該會認真考慮用Python 替代Perl。這也代表程式設計工具或一般的資訊技術，其實是不斷精進的。如果你選擇用軟體作為創作媒材，在做法上也要跟得上變化。你必須能「讀懂」新語言，評估其優缺點，並決定哪種計算方式是「自然的」，也就是設計師原本設定的輕鬆執行方法，最好也能懂得其中道理。 

為什麼你選擇用軟體創作？
軟體，或者說更大類別的電腦資訊，是我認識資料數據的方式。 

工作分配

Ben Rubin    http://earstudio.com/

Bio http://www.adobe.com/aboutadobe/philanthropy/sjsemaphore/bio.html

Ben Rubin at Bryce Wolkowitz Gallery 2011

激發其他藝術家 林方宇訪談 http://www.digiarts.org.tw/ShowIntvTW.aspx?lang=zh-tw&CI_NO=1

重要新聞： 

Listening Post是2002年的作品，在2003年得到Webby Award，2004年得到Arts Electronica的Golden Nica 獎項。

2011年他們兩人加入美國的劇團Elevator Repair Service（電梯維修服務），製作了演出：Shuffle。

2012年跟劇團還是持續有合作，新作品Arguendo將在2013年問世。

問題討論

Who is Mark Hansen and Ben Rubin?

Mark Hansen:

  是UCLA統計系教授

Ben Rubin:

  是一個紐約市的媒體藝術家

1.有哪些呈現? 

ANS: 例如高樓大廈的大片玻璃窗戶裝上這個藝術裝置，可使大家一看到高樓大廈就知道資訊是甚麼

目前這個作品巡迴於世界各大美術館，它是藝術裝置作品。

2.發起:

ANS:發起的原因其實就是為了幫助障礙人士，可以使他們不用因為自己生理因素而沒辦法跟社會聯繫

就是聲音藝術家和統計學家的結合吧，因為對讓資料發出聲音有興趣，從以前的一些projects延伸到這個作品，成功把網路論壇的文字轉化為藝術裝置。

3.優點缺點

ANS: 優點就是幫助例如盲人或是不懂文字的人，用聽的就可以知道資訊在哪裡

 （沒有任何跟盲人有關係的點吧？）

優點是它把一些網路用語和人與人之間打招呼的互動，轉為實體的視覺和聽覺的作品，這個作品不但有其時代性，在美感上也讓人印象深刻。

事實上它也是我看過少數可以佇足一段時間，不會輕易讓人無聊的裝置作品。

它每年展似乎螢幕會越來越多，如2007年在紐約就有500多個螢幕。它是有時代性的作品，不過同樣的出發點若拿到今天，會因為工具不同而有不同表現，這是很自然的，並不能說是缺點。不過會不會因為現在網路論壇使用者都走向臉書或其他平台，而讓他們比較難取得文字資料，這是可以去思考的。

4.有些字會打不出來嗎?

ANS:對的，因為電子版面所呈現出的文字 其實以英文為主，Ben也說了，這是他們唯一難突破的缺點，至今還是在研究。

並沒有打不出來的字，那也不是打出來的，而是去網路論壇即時截取的文字。會以英文當成主要呈現的語言，應該也是因應它的共通性，還有在整個畫面、聲音呈現的一種協調感。

5.有其他作品嗎?

ANS:有，因為Ben就是一個聲音藝術家，而且他有自己的藝術工作室，所以在網路上有Ben的專題網站，可以去裡面逛逛，裡面有很多藝術品(上面 網址 哦~~)

===========================後記===========================

方老師：建議可以多在網路上找相關資料代替翻譯。勿直接copy and paste 網路自動翻譯的結果。。。。。