“Painting Synthesizer” is an interactive sound system utilizing the color and shape which were painted by an improvised live-painting. Ths system detect a color and shape on the canvas via a camera device, and find some blobs on an abstract things drawn by the painter. Data of the blobs generate sound: pitch and timbre, in real time. I tried to generate the sound by utilizing the painter’s skills and habit. “Painting Synthesizer” was built with Max5, and using a camera device and a synthesizer.
『Painting Synthesizer』は，ライブペインティングによって即興的に描かれる抽象的な色彩と形態を画像処理によってリアルタイムに音響変換し，演奏するライブパフォーマンスの為のサウンドシステムです．画家が描く多様な視覚的パターンを個々の”音”と捉え，色と形によって波形を定義し，合成（Synthesize）することで複雑な音響を生成します．本作品は，画家が即興で描くことで自身の経験によって蓄積された技術や慣れをキャンバス上に再現し，それらを音によって拡張することを試みました．システムの開発にはCycling’74のMax5，画像処理にはcv.jitライブラリを使用しています．
System, Sound: Tatsuya Ogusu
Painter: Yuki Nishimura
Painting: Yuki Nishimura
Video