画像をピボットとしたパラフレーズの抽出による自然言語と画像理解の高度化
体系的番号 |
JPMJPR17UH |
DOI |
https://doi.org/10.52926/JPMJPR17UH.17938466 |
研究代表者 |
チョ シンキ 大阪大学, データビリティフロンティア機構, 特任助教
|
研究期間 (年度) |
2017 – 2018
|
概要 | パラフレーズとは同じ意味の異なるテキスト表現です。本研究では、画像と関連する複数のテキストから、画像領域をピボットとしてパラフレーズを抽出します。画像をピボットすることによって特に具体的な概念を表すパラフレーズを正確に抽出できます。抽出したパラフレーズは情報検索などの自然言語処理タスクだけではなくビジュアル質問応答などのマルチモーダルタスクの精度向上に大きく貢献します。
|
研究領域 | 情報と未来 |