2.9 KiB
date
| date |
|---|
| 2025-06-09 09:25 |
#memo
Interactive Music Co-Creation with an Instrumental Technique-Aware System: A Case Study with Flute and Somax2
Prototyping Digital Musical Instruments in Virtual Reality
VR内でのプロトタイピング。現実空間でのプロトタイプがゴミめっちゃ出るというところを起点にしてるのは、本当か？みたいな気がする
tactilityがないのは厳しいですよね、そりゃそう
Questのコントローラーに磁石つけて擬似触覚的な機能を持たせる
スケッチ→モデリング→Audio Design→ファブリケーション（実際にはいろんな行き来がある）
何を使うか
- TinkerCad
- PureData / MetaSounds / Max
- Unity&LibPd
- Steam Audio for Spatialization
- Meta Quest2
例えば、加速度メーターとボタンの楽器のデモを3Dモデルを作ってからVR空間でまず試す
6人で実験 Pdパッチやモデルはあらかじめテンプレートを渡す
PyChiro: Real-Time Gesture Recognition System Supporting the Kodály Chironomic Method in Music Education, Therapy, and Performance
カメラをベースにした手のジェスチャーインタラクションシステム
ハンガリーにあるKodály method
コダーイっていうのね
音程を表すハンドサインがあるらしい
The Kodaly Method: Fun hand-signing Games for young Musicians
オクターブが腕の角度で変わるけど、それも検出
VibroTempo: Feel the Beat with Vibrational Metronomes for Musicians
振動メトロノーム
アクセント付きで鳴らせる 目的としては音楽教育っぽい
アクセント付きビートとかだと伝統的なメトロノームと結果が変わってくる
ZAP!: Bio-Inspired Large-Scale Multimedia Installation
電気ウナギにインスパイアされたサウンドインスタレーション
Music102: An D12-equivariant transformer for chord progression accompaniment
群論をコード進行の表現に使う
シューアの補題
2410.18151 Music102: An D12-equivariant transformer for chord progression accompaniment
結局メロディーの中からコード進行を抽出するっていうのでいいのかな
AI音楽パネル
中央音楽学院（CCOM）
AI音楽だけでセンターができてる（中にラボが6つあるとか）
規模的にかなわんわー
MUSIC Demixing challenge の2023もトップ取ったとか
diffusionモデルで音から弦の左手のポジションを推定（Vtuberとかには便利そうだな）