HOME >> Japanese >> 共感覚(音と色のノンバーバルマッピング)

共感覚(音と色のノンバーバルマッピング)

映画やテレビ番組、そしてWebデザインなどの映像作品に対して、それに合う音楽をつけるという作業は、その道のエキスパートでさえも困難なものである。しかし、ひとたび合う音楽がつけば作品の魅力は2倍にも3倍にもふくれあがる。このことから、映像に合う音楽を抽出するルールを生成することで、このような創造活動を支援するツールを作成することができれば、非常に有用なものとなる。ところで、世の中には、音を聞けば、色を思い浮かべるという色聴をもつ人が、数少ないが存在する。この人々は、なんの感性語(形容詞)も介さずに音から色への変換を行うことができる。また、この変換ルールは色聴保持者の中で共通であることが多い。このことを、上記の映像に合う音楽を抽出するルール作りに利用しようというのがこの研究である。

Publications

  • Nagata, N., Iwai, D., Sanae H. Wake, Inokuchi, S.(2005.09). Non-verbal Mapping between Sound and Color - Mapping Derived from Colored Hearing Synesthetes and Its Applications -. F. Kishino et al. (Eds.): ICEC2005, Lecture Notes in Computer Science 3711, Berlin et al.: Springer-Verlag, 401-412.
  • 長田典子, 岩井大輔, 津田学, 和氣早苗, 井口征士, "音と色のノンバーバルマッピング−色聴保持者のマッピングルール抽出とその応用−," 電子情報通信学会論文誌(A), vol.J86-A, no.11, pp.1219-1230, 2003.
  • D. Iwai, N. Nagata, S.H. Wake, S. Inokuchi, "Approach to Non-verbal Mapping between Sound and Color", Proc. SICE Annual Conference 2002, pp.34-39, 2002.
  • 岩井大輔, 長田典子, 津田学, 和氣早苗, 井口征士, "音と色のノンバーバルマッピングー色聴保持群のマッピングルール抽出とその応用ー", 情処研報(2000-MUS-47), Vol.2002, No.100, pp.97-104, 2002.
  • 岩井大輔, 長田典子, 和氣早苗, 井口征士, "音と色のノンバーバルマッピング", 情報処理学会関西支部, 支部大会講演論文集, pp.7-10, 2002.