"센서 이해도 향상"…KAIST, 멀티모달 AI '감각 혼선·환각' 감소 기술 개발

[디지털투데이 이진호 기자] 국내 연구진이 AI가 여러 감각 정보를 혼동하거나 존재하지 않는 정보를 생성하는 환각 현상을 줄이는 기술을 개발했다.한국과학기술원(KAIST)는 노용만 전기및전자공학부 교수 연구팀이 멀티모달 대형언어모델(MLLM)의 센서 이해 능력을 높이고 시각·청각 정보 간 혼선을 줄이는 두 가지 기술을 개발했다고 31일 밝혔다.멀티모달 AI는 텍스트뿐 아니라 이미지와 음성, 각종 센서 정보를 함께 처리한다.

기존 일부 모델은 센서별 특성을 제대로 구분하지 못하거나 한 감각에서 얻은 정보를 다른 감각에서도 확인된 것처 ...