講演抄録/キーワード |
講演名 |
2024-02-10 13:00
モーションキャプチャシステムを使ったドラムアバターによるリズム演奏 ○上野雄大・宮川 勲(湘南工科大) |
抄録 |
(和) |
本研究は,エアパフォーマンスからの楽器演奏アバター生成の取り組みにおいて,ドラムアバターによるリズム演奏の実現を目標とする.ドラムセットを使ったリズム演奏では,両腕を交差する奏法を含めた複雑なドラムパフォーマンスを忠実に再現しなければならない.我々は,光学式モーションキャプチャシステムを導入して,ドラムアバターを生成する.我々のアプローチは,ドラムセットを使ったエアパフォーマンスに応じて,アバターが持つスティックとドラム/シンバルとの交差判定によりそれぞれの音を鳴らす.実験では,ドラム演奏者が譜面に従ってリズムを演奏したときのエア動作とアバターによる再現を比較する.その結果により,我々の方法は実時間でリズムを奏でるドラムアバターを忠実に再現することを示す.バーチャルバンド演奏では,ドラムアバターとギターアバターのセッション演奏を実演する. |
(英) |
We aim to realize a rhythm performance using a drum avatar in the work of generating avatars that play musical instruments from air performance. In rhythm performance using a drum set, our challenge is to faithfully reproduce complex drum performances including closed-hand technique. We introduce an optical motion capture system to generate a drum avatar. Our approach plays drum/cymbal sounds based on the avatar's stick hitting drum/cymbal models in response to air performances using a drum set. Our experiment compares the air movements of a drummer according to drum score with the avatar's reproduction of the rhythm. Our experimental results show that our method faithfully reproduces drum avatar that plays rhythm performance in real time. We demonstrate a session with a drum and a guitar avatars in the virtual band performance. |
キーワード |
(和) |
3次元人体姿勢 / モーションキャプチャシステム / 人型3Dモデル / ドラムアバター / リズム演奏 / / / |
(英) |
3D Human Pose / Motion Capture Systems / 3D Humanoid Model / Drum Avatar / Rhythm Performance / / / |
文献情報 |
映情学技報, vol. 48, no. 4, ME2024-9, pp. 32-35, 2024年2月. |
資料番号 |
ME2024-9 |
発行日 |
2024-02-03 (ME) |
ISSN |
Online edition: ISSN 2424-1970 |
PDFダウンロード |
|