AI의 영화 영상 설명 능력 평가 대회

김건희 서울대 컴퓨터공학부 교수 연구팀이 지난 23일 이탈리아 베니스에서 열린 ‘영화 질의응답 인공지능 챌린지’(The Large Scale Movie Description Challenge, LSMDC)에서 우승했다고 31일 밝혔다.

LSMDC는 2017 국제컴퓨터비전학회가 주최한 워크샵으로 인공지능이 10초 내외의 영화 영상을 보고 자연어로 영상 내용을 설명하거나, 자연어로 질문이 주어졌을 때 스스로 적절한 응답을 생성하는 능력을 평가하는 대회다.

김 교수 연구팀은 4종목에 모두 참가하여 3종목(주석달기와 검색하기, 객관식 문제 풀기, 빈 칸 채우기)에서 우승했으며, 나머지 1종목(묘사하기)에서 4위를 차지했다. 김 교수 연구팀은 지난해에도 이 대회에 참가해 올해와 동일한 3종목에서 우승했으며, 영화 질의 응답 기계학습 알고리즘에서 세계적인 기술력을 유지하고 있다는 평가를 받는다.

김 교수 연구팀은 LSMDC 뿐만 아니라 영화 줄거리 이해에 대한 질의 응답 대회인 ‘MovieQA’에도 참가해 2위를 기록했다. 이 대회는 처음 보는 영화 영상에 대한 자연어 질문이 주어지면, 인공지능이 스스로 영상과 질문을 이해해 답을 구하는 능력을 평가한다. 김 교수 연구팀은 우승팀인 중국의 텐진대와 1% 미만의 근소한 차이를 기록하며 2위를 차지했다.

김 교수는 “두 대회는 시각 인식이나 자연어 처리에 대한 매우 높은 수준의 인공지능 기술을 요구한다”며 “이 기술은 시각장애인에게 영화를 자동으로 설명해 주는 서비스나 영상에 대한 자연어 검색, 영화에 대한 인공 지능과의 토론 등에 활용될 수 있다”고 설명했다. 이번 대회에서 사용된 딥러닝 알고리즘은 2017 국제컴퓨터비전학회에서 논문으로 발표됐다.

박기석 기자 kisukpark@seoul.co.kr