マルチモーダル学習

機械学習に関する用語

マルチモーダル学習とは?

マルチモーダル学習とは、複数のモダリティ(形態)のデータを活用して学習を行う手法のことです。モダリティとは、視覚(画像)、聴覚(音)、触覚(触感)、嗅覚(臭い)、味覚(味)などの感覚を指し、マルチモーダル学習ではこれらの感覚を組み合わせて情報を処理します。これにより、単一のモダリティでは得られないより豊かな理解と学習が可能となります。