최근 AI에 관심 가진 분이라면 멀티모달이라는 용어를 들어보셨을 텐데요. 멀티모달 AI는 다양한 데이터를 활용해 사람처럼 통합적으로 이해하는 것이 특징입니다.
오늘은 멀티모달 AI가 무엇인지 알아보고, 멀티모달 AI를 활용할 수 있는 분야를 자세히 소개해 드릴게요.
멀티모달 AI란?
출처: freepik
멀티모달(Multi Modal)은 AI가 텍스트부터 이미지, 음성, 비디오 등 다양한 형태의 데이터를 동시에 처리하고 학습하는 것을 말합니다.
기존의 AI는 텍스트나 이미지 등 단일 데이터 소스 중심으로 분석하고 처리했지만, 멀티모달 AI는 다양한 유형의 데이터를 융합해 사람이 생각하는 것처럼 더욱 정교하고 풍부한 분석 결과를 제공합니다. 대표적인 멀티모달 AI의 예시가 최근에 유행하는 지브리 스타일 이미지 변환이에요.
멀티모달 AI는 기존의 AI보다 다양한 데이터를 동시에 학습하고, 복잡한 상황이 주어지더라도 맥락에 따라 복합적으로 이해할 수 있으며, 부족한 데이터가 있더라도 다른 데이터로 보완할 수 있어서 주목을 받고 있어요.
멀티모달 AI 활용 분야
출처: freepik
멀티모달 AI는 헬스케어, 자율주행, 보안 및 안전 관리 등 다양한 분야에서 활용하고 있어요.
✅ 헬스케어
의료 분야에서는 MRI, CT, X-ray 등 의료 영상 이미지와 웨어러블 기기를 통해 수집한 환자의 건강 정보, 진료 기록 등 다양한 데이터를 활용할 수 있는데요. 멀티모달 AI는 이미지와 영상, 텍스트 등 다양한 데이터를 통합적으로 분석하기 때문에 진단 정확도를 향상하고 환자별 맞춤 치료 계획을 수립하는 데 도움이 됩니다.
✅ 자율주행
자율주행은 사물인터넷(IoT)와 초고속 통신, 인공지능(AI) 등 다양한 기술의 집약체로, 다양한 유형의 데이터를 통합적으로 분석하는 멀티모달 AI의 중요성이 특히 높은 분야입니다. 멀티모달 AI는 카메라가 촬영한 이미지와 각종 센서가 수집한 공간 인지 및 속도 데이터를 결합해 복잡한 환경에서도 더욱 정확하고 안전한 자율주행을 지원합니다.
✅ 보안 및 안전 관리
보안이 중요한 산업단지나 근로자의 안전 관리가 중요한 산업현장에서는 보안 및 안전 관리 목적으로 CCTV를 적극 활용하는데요. 멀티모달 AI는 CCTV로 촬영한 영상과 출입 기록 데이터, 임직원 명단 등을 분석해 보안이나 안전에 위협이 되는 상황을 빠르고 정확하게 예측하고 방지하는 데 도움을 줄 수 있습니다.
멀티모달 AI를 활용하는 기업 사례
멀티모달 AI는 실제로 다양한 현장에서 적극적으로 활용되고 있는데요. 최근 알려진 사례 몇 가지를 소개해 드릴게요.
✅ 멀티모달 의료지능 제공하는 닥터 AI
출처: 전자신문
한국전자통신연구원(ETRI)은 여러 병원이 보유한 전자의무기록(EMR) 기반 의료지능을 통합 및 활용해 환자의 건강 상태를 정확하게 진단하고 예측하는 닥터 AI를 개발했어요. 닥터 AI에 환자의 현재 정보를 입력하면 각 기관 의료지능이 분석한 결과치를 통합하고 오차를 조정해 최적의 예측치를 선별 제공하는 것인데요. 단일기관 의료지능만 활용하는 것보다 10% 더 높은 정확도를 나타낸다고 합니다.
✅ 멀티모달 AI로 자율주행 기능 향상시키는 웨이모
출처: 웨이모
세계 자율주행 1위 업체인 웨이모(Waymo)는 멀티모달 학습 방식으로 자율주행 시스템의 의사 결정 능력과 실시간 주행 성능을 향상시키는 AI 연구 모델 EMMA를 공개했어요. EMMA는 카메라 이미지와 텍스트 데이터를 포함해 다양한 정보를 종합적으로 분석하고 주행 명령을 생성할 수 있는데요. 멀티모달 모델의 도움으로 더 빠르고 정확한 정보 처리를 수행할 수 있어요.
✅ 건설 현장의 위험 신호를 파악해 알려주는 코오롱베니트
출처: 이코노믹리뷰
코오롱베니트는 자체 개발한 안전 관제 AI 솔루션인 ‘AI 비전 인텔리전스’를 건설 현장에 적용했습니다. 멀티모달 AI 기술을 적용해 건설 현장의 안전모 미착용, 위험구역 진입, 신호수 배치 유무, 중장비 접근 등 현장에서 탐지한 시각 위험 정보를 파악해 알려주는 솔루션인데요. 건설 현장에서 발행하는 여러 가지 안전사고 예방에 도움을 줄 것으로 기대하고 있어요.
오늘은 AI 업계에서 주목받는 용어인 멀티모달에 대해 알아봤습니다. AI 기술을 적용할 때는 텍스트부터 이미지, 영상 등 다양한 데이터를 통합적으로 활용하는 것이 중요해질 텐데요.
다빈치는 전 분야 IT 제작 및 컨설팅을 제공하는 개발 조직으로, IT부터 공공기관까지 다양한 업계에 AI 도입을 지원했습니다. 개발 비전문가도 쉽게 이해할 수 있도록 소통하며, 단순 외주가 아니라 기업의 CTO처럼 함께 고민하고 문제 해결에 집중합니다.
AI 도입이 고민되는 기업이라면 다빈치에게 무료 상담을 받아 보세요.
