확산 모델 ‘드리믹스’ 첫 공개

‘나무로 만든 길을 통해 불이 붙은 들판을 지난다.’

하얀 꽃이 만발한 들판을 지나는 화사한 영상이 이 말 한마디에 재난 영화의 한 장면으로 바뀐다.

구글이 사진이나 동영상을 첨부하고 텍스트로 설명하면 새로운 동영상을 만들어 주는 인공지능(AI) 기술을 공개했다. 최근 오픈AI의 챗봇 ‘챗GPT’가 등장한 뒤 구글은 감춰 뒀던 AI 기술을 서둘러 공개하고 있다.

지난 2일(현지시간) 구글리서치와 이스라엘의 예루살렘히브리대 개발팀은 개발자들의 오픈 소스 코드 공유 플랫폼인 ‘깃허브’에 ‘드리믹스’를 공개했다. 논문 형태로 공개된 드리믹스는 글로 된 설명으로 동영상을 만들 수 있고 기존 동영상에 요소를 추가, 변경, 제거해 새로운 동영상을 만들어 낼 수 있다. 사진을 동영상으로 만들 수도 있다. 영상을 편집할 때 일일이 다른 영상 소스를 찾아와 컴퓨터 프로그램으로 합성할 필요 없이 설명하면 배경에 등장인물을 추가하거나 소품을 없앨 수도 있다. 장난감 소방관을 찍은 사진 여러 장을 올려 움직이게 할 수 있고, 영상 속 원숭이를 곰으로 바꿔 춤을 추게 할 수도 있다.

드리믹스엔 최근 화두가 된 ‘생성’ AI의 새로운 형태인 ‘확산’(Diffusion) 모델이 적용됐다. 개발팀은 AI가 원본 동영상을 해체하고, 입력한 텍스트 설명에 맞춰 시공간 정보를 재합성한다고 설명했다. 개발팀에 따르면 텍스트 기반으로 동영상을 만드는 확산 모델은 세계 최초다. 기존 확산 모델 중엔 이미지를 생성하는 AI인 ‘스테이블 디퓨전’이 있다.

지난해 11월 말 오픈AI가 챗GPT를 공개한 뒤 세계적으로 폭발적인 반응이 일어나자 구글은 발등에 불이 떨어진 듯 움직임이 빨라졌다. 지난달엔 논문을 통해 텍스트 기반 음악 생성 AI인 ‘뮤직LM’을 공개했고, 지난 2일 실적발표에 이은 콘퍼런스콜에서는 올해 안으로 20개의 AI 서비스를 공개하겠다고 밝혔다. 지난 4일엔 오픈AI 창업 멤버들이 설립한 앤스로픽에 4억 달러(약 5000억원)를 투자했다고 밝히기도 했다. 다만 구글은 이번 드리믹스도 뮤직LM처럼 서비스를 개방하지는 않고 논문 형태로만 공개했다.