觸動琴鍵 螢幕竟長出草

中國時報【曹明正╱高雄報導】 觸動琴鍵,螢幕上居然長出一株小草!透過偵測樂器聲音的各項參數,中山大學音樂系教授應廣儀和機電系教授程啟正,11日發表跨領域「音樂作畫」,未來可望應用於互動遊戲、醫療復健與藝術治療等領域。 「音樂作畫」跨域合作,為國內數位科技與互動藝術跨界一大創舉,藉由偵測樂器的頻率、振幅與漸強漸弱等聲音參數,利用演算法轉換成視覺上的點線面;在樂曲演奏時「觸發音」同步呈現動畫,讓音樂與畫合而為一。 中山音樂系與機電系合組的研究團隊先作曲、構思故事內容,接著用電腦畫出500張圖,其中31張圖需透過一個小節的音串觸發,靠著數學方式「快速傅立葉轉換」(Fast Fourier Transform,簡稱FFT)辨識音串。 中山音樂系教授應廣儀指出,目前多數號稱影音結合,其實是將音樂用後製方式搭配影像播放,並非當下體驗。 昨發表會上,中山大學音樂系自創作品《成長》演出,分別由應廣儀演奏鋼琴、兼任助理教授侯柔安拉大提琴,多媒體則由程啟正與音樂系校友林孟萱、機電系學生林科呈、徐浩崴操刀,演出讓人為之一亮。