WHAT IS ZERO DENSITY? - XR SOULUTION

회사에서 사용하는 XR 솔루션은

ZERO DENSITY의 프로그램이다.오늘은 ZERO density 홈페이지를 이해한 내용을 작성하려고 한다.

zero density는 뭐하는 곳인가?

기술회사, 방송과 미디어 업계 송사한 사람들이 가상현실 제품을 개발함

언리얼엔진으로 구축했으며 실시간으로 언리얼엔진을 사용해서 방송을 송출할 수 있는 기술을 구현함

핵심기술(하드웨어): 리얼리티 키어+ 언리얼 엔진이 gpu로 있음 (실시간으로 노드기반으로 조합하는 툴)

* 언리얼엔진은 게임회사인 에픽게임즈가 만든 것으로 언리얼이란 1인링 슈팅게임을 시작으로 개발

어떤 기능이 있는가?

하드웨어 : Realilty Engine 이게 핵심 기술

렌더링(송출)엔진은 실시간으로 사진이 선명하게 전송이 되는 언리얼엔진을 사용한다.

특징

소프트웨어상에서 색차 베이스의 키잉을 실시하는 것이다.
크로마키 기반 키어는 하나의 RGB 값을 선택하고 그 선택된 색을 사용하여 키 신호를 작성한다.
예를 들어 그린백이라면 초록색 부분을 빼고 합성을 하지만 연한 그린이나 짙은 그린을 포함해 빼기 때문에 발밑의 얇은 그림자 등은 사라진다.

 

Reality는, 미리 설정된 텍스처와 비디오 입력을 1 픽셀 단위로 비교하는 색차 베이스의 키어를 탑재하고 있다.
그래서 미묘한 그림자를 남기거나 머리카락 같은 섬세한 합성도 실시간으로 할 수 있다.

이게 무슨 말인지 정확히 이해는 안됐는데
섬세한 합이 실시간으로 가능하다는 의미

 

소프트웨어 

1. Reality Engine (실시간 방송 합성 시스템)

 한 시스템에서 비디오 in/out, 이미지 합성, 송출 등 실시간 시각 효과 가능함
 전체 컴포지팅 파이프라인을 제어함으로써 모든 감마 및 색상 공간 변환이 올바르게 처리됩니다.
 이 기술을 사용하여 현실 세계와 가상 요소가 완벽하게 혼합됩니다.

 

특징
-> Unreal Engine을 3D 렌더러로 사용
-> 카메라 추적기술, 렌즈 보정, 3d 공간 합성 기능
-> 인재 추적: 사람을 정확히 반사하고 굴절을 자동으로 생성함

2. Reality Keyer

-> 제로덴시티의 중심
-> GPU에서 작동하는 실시간 이미지 기반 키어다. 즉, 실시간 이미지 기반 합성작업을 할 수 있는 소프트웨어다.
기존의 크로마키어와 이미지 기반 키어의 차이
기존의 크로마 합성은 크로마 뒷배경 톤이 일정하지 않고 이를 일정하게 하려면 그림자 디테일이 손상됨, 이미지 키어는 뒷배경 톤이 일정하기에 그림자 디테일에 영향을 받지 않아서 손상되지 않음

3. Reality editor

-> Unreal Engine 4 확장 버전 사용
3d로 가상현실내에 글씨크기, 글꼴, 영상 이미지 등을 변경할 수 있는 시스템
애니메이션의 반사된 빛, 위치, 색깔 다 조정가능

4. RealityHub

단일 허브에서 에코시스템 연결
사용자는 시스템과 작업 흐름을 쉽게 구성하고 사용자 정의할 수 있습니다.
제어 애플리케이션을 웹 기반 기술로 업그레이드하여 재정의합니다.
이를 통해 데이터에 대한 규칙을 정의하고, 데이터 소스를 구성하고, 디자인과 밀접하게 일치하도록 사용자 정의할 수 있습니다.

 

특징
실시간 데이터 통합 : 외부데이터(날씨, 금융, 스포츠 같은)
웹기술 가능
완전 모듈식 시스템 : 모듈과 도구를 사용자가 골라서 설정 가능함

 

용어

• 키잉: 이미지 합성작업이다. 합성하고자 하는 부분을 KEY로 설정하고
  이 부분에 다른 이미지, 동영상등을 합성해서 새로운 이미지 효과를 얻는 것이다.
  키잉 효과를 활용하면 하나의 이미지에 새로운 이미지를 덧대어 특정한 시각적 효과를 얻을 수도 있으며,
  하나의 이미지에서 특정 부분이나 배경색상 등을 제거하는 작업을 할 수 있다.
• 제거된 색상이나 배경을 다른 색상이나 이미지로 대체하는 작업도 가능하다. 블루/그린 스크린을 배경으로 크로마키(chroma key) 기법을 이용하여 촬영 후 키잉 작업을 통해 이미지를 합성하는 과정 등을 예로 들 수 있다.
  [네이버 지식백과] 키잉 [keying] (두산백과 두피디아, 두산백과)

• XR솔루션은 AR디바이스(스마트폰 /태블릿 )와 VR 디바이스가 하나의 가상 공간에서 같은 3D 콘텐츠를 공유하고 함께 작업 할 수 있도록 지원하는 서버 솔루션입니다.

XR로 어떤 문제를 해결하기에 솔루션이라고 하는 거 같습니다...걍 하나의 용어처럼 사용하는 듯

 

참고자료
https://www.unrealengine.com/ko/spotlights/zero-density-delivers-live-broadcast-virtual-production-solutions
https://www.zerodensity.tv/products/reality-hub/