この記事では、『音楽と絵画に共通する法則を見つけ出して合体させる』研究と試みしてきた過去の人物の業績を精査して、どこまでを先人が解決し、どこからが私の発見なのかの根拠を皆さんにご提示いたします。
参考にした文献は先行研究の歴史総括の一次資料である『ヨルグ・ジェワン スキー(Jörg Jewanski)著、カラーオルガン』とアメリカカリフォルニア州のChapman(チャップマン)大学の『2022年のプロジェクト・メタモルフォシスの一つとして発表された論文とプログラム『楽曲を絵画に変換するための動的なフレームワークの設計 Project Metamorphosis: Designing a Dynamic Framework for Converting Musical Compositions into Paintings』やその他の海外文献も読み、その試作の内容・プログラム・出力例を一次資料で検証した上で、私の理論が何を解決したのかを明らかにします。
ニュートンから、坂本龍一と岩井俊雄のコラボレーションによるパフォーマンスと、DumpType2022年までの研究
(1)ニュートンがスペクトラムと音階表を作ったが、作って考察を終えてしまった。
1704年『Opticks』で色スペクトルと音階の振幅関係を初めて物理的に示したのが起点です。
7色スペクトルが「音楽の全音階を支える同じ比率」に支配されると示唆。
ニュートンは、光のスペクトルを7色(赤・橙・黄・緑・青・藍・紫)に区分し、
これを音階の7音(D–E–F–G–A–B–C)に対応させました。
Nature誌の解説によると、ニュートンの対応は次のように整理できます:
D=赤(Red)
E=橙(Orange)
F=黄(Yellow)
G=緑(Green)
A=青(Blue)
B=藍(Indigo)
C=紫(Violet)
ニュートンはスペクトルの比率を音階の比率(全音・半音など)に対応させようとし、
「色の帯の長さは、弦の長さの比率と同じように分割できる」と述べています。
しかしそれ以上に考察は進められませんでした。
これは私の対応表と違って赤=Cになっていませんね。
クリューガーが1743年に、神智学者ブラヴァツキーが1888年に著書『秘密教義』にがクリューガーの体系を採用
クリューガーは、ニュートンの音階=色対応をほぼそのまま採用しつつ、
音楽家にとって自然な「C=赤」から始まる並びに再配置したとされています。
これは、ニュートンの「D=赤」から始まる並びを、“C=赤”に移し替えただけで、色の順序は同じです。
クリューガーの並び(1743)
音 色
C 赤(Red)
D 橙(Orange)
E 黄(Yellow)
F 黄緑(Yellow‑green)
G 緑(Green)
A 青(Blue)
B 紫(Violet)
理由は明確で、当時の音楽理論の慣習に合わせたため。音楽家は C音(ド)を音階の基準として扱う。ニュートンの「D=赤」は音楽的には不自然なので、クリューガーは 体系を“音楽家向け”に調整した
つまり、ニュートンの科学的体系 → 音楽家が使いやすい体系へ変換したということ。
◆ここで私の対応表が歴史的に発見されたわけですね?
★さらに神智学者ブラヴァツキーが1888年に著書『秘密教義』にがクリューガーの体系を採用。
神智学の宇宙論の中で、「宇宙の法則は数的比率と振動の調和にある」という思想を展開し、音と色の対応を“天球の調和”の象徴として扱った。
1919年マリオン(Edward Maryon)が、光の波長を音のオクターブに変換し、赤が29オクターブ下でCになる」という主張
これは ニュートン → クリューガー → ブラヴァツキー → マリオン(Marcotone) へと続く「音=色」対応の歴史的系譜の中で、初めて“測定値(波長)を使った科学的換算”を導入した体系 です。
マリオン(Edward Maryon, 1919–1924)の主張は事実か?
マリオンの著書 Marcotone: The Science of Tone-Color(1924)に 「12音=12色の対応」「光と音はオクターブで連続する」「波長を音階に変換できる」 という理論が明確に記述されています。
マリオンの核心:光の波長をオクターブで下げると同音になる。
ここで、オクターブで周波数が変わり、上がるごとに同色が明るくなることが示唆されました!
ここでさらに私の対応表とほぼ同じになりましたね?
● 赤の波長(例:0.68 μm = 680 nm)
● 波長=速度/振動数
● 光の振動数をオクターブで下げ続ける(÷2を繰り返す)
すると、
約 29 オクターブ下で可聴域(20Hz〜20kHz)に到達する。
以下が、英文の下に「<和訳>」を付けて日本語訳を追加した完成版です。
カラーピアノ300年の歴史――なぜ「楽譜を絵画に完全翻訳する」装置は実現しなかったのか?
色と音階の対応表は、エドワード・マリオン(Edward Maryon)が1919年に確定させました。それでも、楽譜を絵画に翻訳しようとすると、なぜ必ず紫禁城や女性のヌード、桂林の風景、リゾートのビーチといった具象的なイメージが浮かび上がるのか。そして、この私の理論を採用した「カラーピアノ」は、なぜこれまで実現されなかったのか。
その答えを、300年の歴史と先行事例を振り返りながら考えてみます。
1. 300年間、装置ばかりが増えた理由
これを先の『ヨルグ・ジェワン スキー(Jörg Jewanski)著、カラーオルガン』でみてみましょう。
Bishop Color Organ、Rimington Color-Organ、Loring Musical Chromoscopeなど、歴史上多くのカラーピアノが登場しました。しかし、その多くは
「 a purely visual stimulus that had no deeper aesthetic value — comparable to today's chains of lights at a fair。」
<和訳>
装置はみんな深い美的価値を持たない、純粋に視覚的な刺激にすぎないもの――今日の縁日の電飾チェーンのようなものばかりである。
つまり「縁日の電飾のような快さ」で終わっていました。
総括的な研究サイトも、共通する「大問題」をこう定義しています。
「A major problem of all color organs introduced until now, was that they lacked the possibility to design forms artistically. The punctual light sources in these devices could be turned on and off and their size and intensity could be changed; however, it was not possible to produce forms that varied over time.」
<和訳>
これまで登場したすべてのカラーオルガンに共通する大きな問題は、芸術的に形をデザインする可能性が欠けていたことである。これらの装置の点光源はオン・オフしたり、大きさや強さを変えたりすることはできたが、時間とともに変化する形を生み出すことはできなかった。
点光源をオン・オフするだけで、芸術的な「形」を生み出せなかった。ましてや、作曲者が思い描いた風景や人体を一目で表示することなど、到底できなかったのです。これが300年間解けなかった根本的な課題でした。
2. 岩井俊雄と坂本龍一の試みも、同じ大問題を抱えていた
日本でも先駆的な試みがありました。
★ 岩井俊雄《映像装置としてのピアノ》(1995)
NTT ICCアーカイブ
YouTubeデモ
トラックボールで光の点を置き、点が鍵盤に向かって流れ、鍵盤を叩くとスクリーンに図形が飛び出すインタラクションです。点が時間とともに動くことには成功しましたが、点の位置は観客の恣意や想像に委ねられており、「C=赤」という物理的必然はありません。
★岩井俊雄 × 坂本龍一《Music Plays Images x Images Play Music》(1997)
YouTube
二人で交互に光の点を置きながら即興するパフォーマンス。音楽と映像が相互に生み合う美しさはありますが、置く場所もタイミングも感覚に依存しており、楽譜を物理法則で完全に翻訳しているわけではありません。
★ 坂本龍一 + Dumb Type《2022》
YouTube
これはヴェネツィア・ビエンナーレ日本館の作品。津波ピアノや地震データを扱い、ポスト真実を問う自律的なライトアートとして重要です。
しかし、主調色が画面を支配するという規則も、和音を色彩和音として定義する規則も存在しません。
これら3作品に共通するのは、印象・感覚・恣意性・想像の介入が多量に含まれている点です。どこに点を置くか、どんな形に見えるかを、人の感覚で補う必要があるため、「誰が見ても同じ紫禁城や人体として再現される」ことはありません。
3. Chapman大学2022年の試作――何が表示され、何が問題だったか!
近年の先行研究として、Chapman大学の論文が挙げられます。
再掲:アメリカカリフォルニア州のChapman(チャップマン)大学の『2022年のプロジェクト・メタモルフォシスの一つとして発表された論文とプログラム『楽曲を絵画に変換するための動的なフレームワークの設計 Project Metamorphosis: Designing a Dynamic Framework for Converting Musical Compositions into Paintings』
「 The authors present an automated, rule-based system for converting piano compositions into paintings. Using a color-note association scale presented by Edward Maryon in 1919, which correlates 12-tone scale with 12 hues of the color circle.]
<和訳>
著者たちは、ピアノ曲を絵画に変換する自動化された規則ベースのシステムを提示している。1919年にエドワード・マリオンが提示した、12音階と色相環の12色を対応させた色と音の関連スケールを使用している。
仕組みは以下の通りです。
- MIDI解析
Pythonのpretty_midiライブラリでテンポ、タイムスタンプ、ベロシティ、キーを抽出。ドビュッシー《月の光》などの全音を、音量を色の濃さにしてプロットします。 - 色抽出
マリオン表で音高を12色相に変換。オクターブごとに明度を25%ずつ変え、小さな四角を左から右へ並べた色のマトリクスを生成します。 - Cell(ブラシストローク)のプログラム
1音=1つのブラシ。強さで大きさ、長さで進む距離を決め、Perlinノイズでうねらせます。Processing言語で実装され、筆の透明度や厚みもパラメータ化されています。 -
画面分割と記号化
キャンバスを8つの重なる区画に分け、曲の進行に合わせて左から右へ描画位置を決めます。和音は「長三和音=縦線、短三和音=横線」といった記号に置き換え、アルペジオは渦巻きとして表現されます。 -
出力
画像を載せましたが、バッハ《プレリュード ハ長調》、ショパン《ノクターン Op.9-2》、ドビュッシー《月の光》など。完成した動画は「音なしで音楽がイメージとして展開する動く絵画」と説明されています。
横田理論と比較したときの問題点
この試作は「楽譜→絵画の自動変換」という枠組みでは先行していますが、私が解いた大問題は解けていません。
1. **主調=支配色がない**
長調で明るく短調で暗くする機械的規則だけで、「ハ長調=赤が画面を支配する」といった主調色の概念がありません。
2. **和音の色彩版がない**
C=赤黄緑、Dm=朱黄緑青といった「色彩和音」として、色そのもののコード理論が欠落しています。縦線・横線という記号化で逃げています。マティスが「色が音楽の和音のように調和しなければ」と気づいた先を、完成させたのは私の理論が最初です。
3. **音色・高低・リズムの対応がない**
トランペット=黄といった音色と色彩の対応、高低=明度、低周波=暗い・高周波=白いという対応、リズムを縞として表現する規則がありません。
4. **具象画像が表示されない**
生成物は最後まで抽象的なピクセル+ブラシストロークです。身体のシルエットや紫禁城、桂林のような具象が一目で浮かぶという発見がありません。
5. **印象・感覚・恣意性の介入**
Perlinノイズによる揺らし、8分割、25%刻み、縦線・横線といった規則自体が「こうすると綺麗」という感覚的選択であり、物理的法則ではありません。
私の理論の革新性――点と点から、構造と構造への転換
私が行ったのは、丁度ポアンカレがそれま不可能とされた複雑な立体を数式で表現するトポロジー=位相幾何学と同じです。
それまで、音楽を絵画に翻訳することは無理。と言われて来ました。
周波数などの構造と人間に入力される器官とその生理メカニズムが似てもにつかなずまったく違っているからという思い込みに、「絶対に可能だ!必ず法則を見つけ出し結合してみせる。
と私は考えました。
これはほとんどのノーベル章やフィールズ賞受賞にも当てはまることですね?
「解決することは不可能だ。これからの学者人生を無駄に消耗しすぎてしまってドロップアウトするぞ!」と。
ポアンカレは『数学とは異なるものを同じものとみなす技術である』と言いました。
こちらのページをご覧ください。『正多面体クラブ』『松岡正剛の千夜千冊 ポアンカレ 科学と方法』
さらに詳しくはこのサイトのこのページ『私が『音楽と絵画』を結合したことは、大数学者ポアンカレが「数学とは異なるものを同じと見なす技術である」と考え幾何学と代数学を結合して位相幾何学を作ったのとまったく同じです。』をご覧ください!
- 主調音 =主調色 画面の支配色
- 和音 = 色彩和音
- 音色 =各色、音高 = 明度、リズム = メロディの進行する長短と空間のリズム
これにより、楽譜を規則通りに描くだけで、誰が見ても描出されたものが、ある人物のシルエットや紫禁城・桂林・リゾートビーチと波だね。と連想できる具象図になります。
スペクトラム対応表そのものは史上初ではありませんでした。
しかし「譜面が具象イメージに完全に翻訳される。という物理的法則を、印象・感覚・恣意性・想像の介入なしに与えたのは、私の理論が最初です。」
これが岩井・坂本・Chapmanの3つの試みとの決定的な差であり、300年続いた大問題を解いた価値だと考えています。





