講演抄録/キーワード |
講演名 |
2022-03-08 09:29
会話の流れを考慮した漫画における自動話者推定 ○山口理哉(東京理科大)・古田諒佑(東大)・谷口行信(東京理科大)・日並遼太・石渡祥之佑(Mantra) |
抄録 |
(和) |
漫画ではイラストで描かれたキャラクターが,テキストによって表現されたセリフを発話することによってストーリーが展開していく.そのため,どのキャラクターがどのようなセリフを発話したのかを対応付けることが,漫画の理解において重要になる.
そこで本研究では,会話の流れと漫画特有の表現方法の2つを考慮した話者推定手法を提案する.提案手法は,(i) 会話の流れを考慮するために,連続したセリフを合わせて入力し,話者推定を学習した自然言語処理モデルによって話者を予測する,(ii) 漫画特有の表現方法を考慮し,推定対象のセリフと各キャラクターの漫画画像上の距離によって発話者候補を定義する. |
(英) |
In manga, the story unfolds as the illustrated characters speak their lines expressed in text. Therefore, it is important for understanding manga to link each line to the character who speaks it.
In this study, we propose a context-aware speaker estimation method for manga that estimates the speaker of a line by taking consecutive lines as input. The proposed method considers the conversation context and the manga-specific expression by using the prediction results obtained by the natural language processing model and the candidate speakers defined by the distance between the target lines and each character in the manga image. |
キーワード |
(和) |
漫画 / 話者推定 / / / / / / |
(英) |
Manga / Speaker Estimation / / / / / / |
文献情報 |
映情学技報, vol. 46, pp. 67-70, 2022年3月. |
資料番号 |
|
発行日 |
2022-03-01 (AIT) |
ISSN |
Print edition: ISSN 1342-6893 Online edition: ISSN 2424-1970 |
PDFダウンロード |
|