시각특수효과(VFX, Visual Effects) 전문기업 엠83(KOSDAQ 476080, 이하 M83)의 뉴미디어사업본부는 한국과학기술연구원(KIST, 키스트)과 협력해 디지털 영상 콘텐츠의 핵심 분야인 '실감 콘텐츠 핵심 기술 개발' 가속화에 나섰다. 과학기술정보통신부와 정보통신기획평가원(IITP)이 공모하고 주관기관인 KIST의 조정현 박사가 이끄는 본 연구는 '가변 시점 허용 실사 영상에서의 강인한 3D 객체 식별 기술'을 목표로 개발을 추진해, 연구 2년 차에 들어서는 현재 유의미한 성과를 이뤄내며 원천 기술 개발의 고도화에 박차를 가하고 있다.
연구팀이 개발한 '메타씬 크리에이터(MetaScene Creator)'는 3D 에셋 라이브러리 및 지능형 검색 API를 활용한 AI(Artificial Intelligence, 인공지능) 기반의 '영상 사전 연출 계획 프로그램(Pre-Visualization, 프리비즈 제작 프로그램)'으로 콘텐츠 제작 공정에 혁신을 가져올 것으로 기대되고 있다.
통상적으로 영화나 애니메이션과 같은 영상 콘텐츠 제작 과정에서는 본격적인 촬영과 제작에 들어가기 전에 완성될 장면을 사전에 미리 간단한 형태로 시뮬레이션 하는 프리비즈(사전 시각화) 과정을 거친다. 이는 각 파트별 제작진이 동일한 비전을 가지고 효율성 있는 의사소통과 제작을 할 수 있도록 하며, 제작 과정에서 발생할 수 있는 기술적 문제나 시행착오를 줄이고 작품의 완성도를 높이는데 필요한 필수 과정으로 여겨지고 있다.
이러한 프리비즈 제작은 연출하고자 하는 공간을 간단한 3D로 구성하는 데에도 상당한 시간과 공력이 투입된다. 메타씬 크리에이터는 AI에게 방대한 양의 데이터를 학습시켜 프리비즈의 공간을 구성하는 제작 공정을 획기적으로 단축시킬 수 있다. 메타씬 크리에이터는 3D로 제작하고자 하는 공간과 비슷한 2D의 사진을 프로그램에 업로드하는 것 만으로도 자동으로 이미지 안의 각각의 객체를 모두 식별하고, 3D 형태로 변환하여 똑같은 공간을 구성해낸다. 또한, 이렇게 구성된 3D 형태의 공간과 객체들은 자유로운 이동과 재배치가 가능하며, 다양한 각도의 가변시점에서 연출 활용이 가능하다.
M83의 자회사인 AI·딥페이크 R&D 전문기업 디블라트(DiBlAT)는 AI를 활용하여 구축된 3D 공간에 패턴과 색상, 질감 등을 바꾸고, 라이팅(Lighting) 수정이 가능하며, 사용자가 원하는 스타일로 디자인과 화풍을 변경하고, 데이터를 내보내 언리얼 엔진(Unreal Engine)에서 활용할 수 있도록 기술을 고도화하고 있다.
복잡한 프리비즈 제작 과정을 자동화함으로써 사용자는 쉽게 원하는 3D 환경을 구축할 수 있게 되었고, 이에 소요했던 시간과 노고를 연출과 제작에 더 투자할 수 있게 되면서 메타씬 크리에이터는 콘텐츠 제작의 패러다임을 변화시키는 게임체인저의 역할을 할 것으로 전망된다. 현재, 해당 기술과 관련해 국내 특허 출원 2건, 해외 출원 2건, 소프트웨어 등록 2건의 지적 재산권을 보유중이다.
연구 책임자인 KIST 조정현 박사는 "메타씬 크리에이터로 제작된 3D 공간은 언리얼과 같은 산업 표준 도구와 연동되면 다양한 분야에서 활용 가능성을 극대화할 수 있다"며, "영화, 애니메이션, 게임뿐만 아니라 가상 현실(VR) 및 증강 현실(AR)을 위한 메타버스(Metaverse) 플랫폼 등에서 활용될 수 있다. 또한, 웹툰, 스토리보드 작업, 무대 연출, 건축 설계, 인테리어 디자인 등에서도 확장성이 큰 기술이다. 앞으로도 지속적인 연구 개발을 통해 현장의 니즈를 반영하여, 더 많은 창작자들에게 새로운 가능성을 제시하겠다"고 말했다.
공동 연구기관인 M83의 정성진 대표는 "M83이 국내 최고의 연구진과 함께 산업의 제작 판도를 바꾸는 기술 발전에 일조할 수 있어서 뜻깊게 생각한다. 성공적인 서비스 상용화를 위해 현재 프리비즈 기능을 위한 카메라 설정 관련 플러그인을 추가 개발 중이며, 향후 원천 기술 개발 그룹(KIST)에서 개발 중인 인공지능 기반 '3D 공간 구성 기술'과 '3D 객체 식별 기술'의 API도 서비스에 적용 예정이다. 기술을 통해 국가 산업 발전에 기여하고, 한국이 글로벌 기술 강국으로 자리매김하는 데 핵심적인 역할을 할 수 있도록 최선을 다하겠다"고 덧붙였다.
한편, M83은 코로나19(COVID-19) 팬데믹 이후 침체되었던 중국 콘텐츠 시장에서 대규모 블록버스터 프로젝트를 연이어 수주하며 업계의 큰 주목을 받았다. 현재, 중국의 주요 대기업과 대형 테마파크 건설을 위한 실감형 콘텐츠 제작 협업을 논의 중인 것으로 알려져, 중국 시장의 재개 움직임 속에서 가장 큰 수혜 기업으로 부각되고 있다.
디스이즈게임 댓글 ()
디스이즈게임
