개념

멀티모달 AI

글, 그림, 소리 등 여러 종류의 정보를 함께 이해하고 처리하는 AI.

글·그림·소리 여러 종류의 정보를 함께 이해하는 멀티모달 AI 그림소리 멀티모달 AI 통합 이해
멀티모달 AI 개념도

핵심 포인트

  • 글·이미지·소리 등 서로 다른 형태의 정보를 함께 입력받아 이해한다.
  • 한 종류만 다루는 모델과 달리, 사진을 보고 설명을 쓰는 식의 교차 작업이 가능하다.
  • 여러 정보를 같은 의미 공간(임베딩)으로 모아 연결한다.

예시

사진을 올리고 "이 음식 칼로리가 얼마야?"라고 물으면, 이미지와 글을 함께 이해해 답하는 것이 멀티모달 AI다.

관련 개념

역링크