今回は、Addonを用いてオーディオとビジュアルを融合するための手法について考えていきます。オーディオからビジュアルへの変換と、ビジュアルからオーディオへの変換という2つ方向に分けて、それぞれの手法について考えていきます。

前半はオーディオからビジュアルに変換する方法のひとつとして、openFrameworksにFFT解析のためのクラスを追加して波形をFFTで解析しその周波数成分を視覚化する方法について探っていきます。後半はビジュアルからオーディオに変換する手法として、openFrameworksと音響合成のためのアプリケーションをAddonを利用して組合せる方法について解説します。今回は、Pdを使用するためのofxPdとSuperColliderを使用するためのofxSuperColliderを紹介します。