세타(THETA) 네트워크, 앞으로 몇 주 안에 새로운 엣지노드 업그레이드에 3D 렌더링 작업이 추가될 예정

길어서..그냥 대충.. 열심히 하네 생각하면 됨.

글로벌 마켓 인사이트에 따르면 3D 렌더링은 2022년에 30억 달러를 돌파하고 2032년까지 매년 20%씩 성장하여 350억 달러 이상이 될 것으로 예상되는 거대한 산업입니다. 이 시장의 성장은 시뮬레이션된 3D 환경에서 제품 기능을 시연하고자 하는 여러 업계의 마케팅 전문가들에 의해 주도되고 있습니다. NVIDIA는 2023년 1월 이러한 요구를 해결하기 위해 3D 공간에서 산업적 발견과 디자인을 시각화하고 시뮬레이션하는 새로운 방법을 제공하는 플랫폼을 출시했습니다. 더욱 흥미로운 점은 차세대 텍스트-3D 및 스케치-3D 제너레이티브 AI 애플리케이션이 3D 렌더링 기능의 필요성을 더욱 높이고 그 어느 때보다 더 많은 GPU 리소스를 필요로 할 것이라는 점입니다.

이 두 가지 새로운 제너레이티브 AI 카테고리는 확산 모델, 신경 방사 필드(NeRF), 가우시안 스플래팅과 같은 딥러닝 기술을 활용하여 텍스트 입력 또는 손으로 그린 스케치를 기반으로 3D 오브젝트와 장면을 생성합니다. AI 모델은 기하학적 모양과 텍스처의 3D 텍스처 메시를 생성 및 조립하고 사실성, 정확성 및 디테일을 향상시키기 때문에 생성, 개선 및 최적화 과정에서 여러 번의 3D 렌더링 사이클이 필요합니다. NVIDIA는 최근 IEEE 컨퍼런스에서 이러한 개념을 담은 컴퓨터 비전 및 패턴 인식에 관한 연구 논문을 발표했습니다.

세타 엣지클라우드에서만 가능

올해 정식 출시되는 하이브리드 세타 엣지클라우드 아키텍처는 클라우드 호스팅 노드의 하이엔드 GPU 성능과 전 세계에 분산된 세타의 엣지 노드를 활용하여 오늘날에는 불가능했던 방식으로 이러한 3D 렌더링 작업을 독보적으로 지원할 수 있습니다. 백서에 설명된 대로, 엣지클라우드는 혁신적인 컴퓨팅 작업 스케줄링 및 할당 기술을 구현하여 컴퓨팅 작업을 가장 최적의 클러스터 노드에 실시간으로 지능적으로 할당하고 라우팅할 것입니다. 특히, 작업 할당 알고리즘은 규모에 상관없이 특정 온디맨드 작업의 효율성 점수를 최대화하려고 노력합니다:

efficiency_score = f(작업 유형, 가격, 지연 시간, 가용성, 컴퓨팅 용량, 공정성, 개인 정보 보호)

위의 NVIDIA 연구 논문에서 설명한 기술은 텍스트-3D 제너레이티브 렌더링 작업을 세타 에지 클라우드에서 효율적으로 실행하는 방법을 설명하는 데 사용할 수 있습니다. 제안된 텍스트-to-3D 기술은 기본적으로 두 단계로 나눌 수 있습니다:

1단계에서는 반복적인 샘플링과 렌더링이 필요한 저해상도 3D 메시 최적화를 수행합니다. 이 단계의 계산 요구량은 상대적으로 낮기 때문에 커뮤니티 샤드나 세타 에지 노드에서 더 낮은 비용으로 수행할 수 있습니다.
2단계는 고해상도 렌더링과 세부 텍스처가 포함된 최종 3D 메시 모델로의 최적화를 포함하며, 보다 집중적인 처리가 필요합니다. 따라서 이 단계는 고성능 EdgeCloud GPU에서 가장 효과적으로 실행할 수 있습니다.
EdgeCloud 작업 스케줄링 및 할당 알고리즘은 두 단계를 서로 다른 작업으로 취급하며, 위의 공식을 사용하여 이러한 작업을 EdgeCloud의 다른 노드에 매핑하는 효율 점수를 계산합니다. 계산된 점수를 기반으로 알고리즘은 효율성과 전체 비용을 모두 최적화하기 위해 최적의 작업 할당을 결정합니다.

팀 경험과 특허가 뒷받침

Theta 팀은 게임 업계에서 3D 렌더링 분야에서 오랜 경력을 쌓아왔습니다. 2016년 9월 초, Theta Labs(구 SLIVER.tv)는 엔비디아와 협력하여 뉴욕 바클레이스 센터에서 10,000명의 관중과 함께 ESL One의 주요 e스포츠 토너먼트의 VR 360 라이브 스트리밍을 최초로 개척했습니다. 당시 가장 빠른 NVIDIA GTX 1080 GPU 클러스터로 실행된 이 팀은 카운터스트라이크 3D 게임 엔진을 활용하여 게임 세계를 눈당 4K 해상도로 실시간으로 360 VR로 렌더링하고 전 세계 5만 명 이상의 시청자에게 라이브 스트리밍할 수 있었습니다. 이는 정말 획기적인 일이었습니다.

*“2016년 ESL One New York의 무대 뒤에서 CEO Mitch Liu, CTO Jieyi Long 및 Theta 팀”*

*e스포츠 시청의 미래는 라이브 VR입니다. 그리고 여기 있어요! ESL One New York”, NVIDIA GeForce Youtube*

당시에는 실시간 360 VR 렌더링에 필요한 대부분의 기술이 존재하지 않았기 때문입니다. 그래서 미치, 지에이, 그리고 세타 팀은 모든 기술을 직접 개발해야 했습니다. 이러한 혁신을 통해 세타 랩스는 360 렌더링 및 관련 기술에 대한 미국 특허 4개를 획득했습니다:

게임 비디오 녹화 및 가상 현실 리플레이 방법 및 시스템(US9473758B1)

다중 해상도 뷰를 위한 비동심 구형 투영 방법 및 시스템(US9998664B1)

컴퓨터 비디오 게임의 가상현실 스트리밍 및 리플레이 방법 및 시스템(US9573062B1)

컴퓨터 비디오 게임 스트리밍, 하이라이트 및 리플레이를 위한 방법 및 시스템(US9782678B2)

이 특허들은 세타가 중앙 시점에서 여러 개의 게임 내 2D 비디오 스트림을 렌더링하고, 이를 디지털 스티칭하여 사용자가 제어할 수 있는 360도 구형 비디오를 생성하는 방법을 설명합니다. 현재 시청자의 시야에 있는 구체의 일부는 고해상도로 렌더링되고, 현재 시야에서 벗어난 영역은 저해상도로 렌더링되어 대역폭 제약에 최적화됩니다. 사용자가 시야를 이동하면 다른 이미지가 실시간으로 고해상도로 렌더링됩니다.

3D 렌더링 테스트 작업을 시작하는 Theta 엣지 노드

현재 Theta 팀은 3D 360 렌더링에서의 경험을 활용하여 5월 1일에 AI 컴퓨팅 작업에 중점을 둔 EdgeCloud 출시를 향해 나아가고 있습니다. 향후 몇 주 내에 3D 렌더링 테스트 작업을 지원하도록 Theta 엣지 노드가 업그레이드될 예정이며, 이는 TFUEL에서 보상으로 제공되고 EdgeCloud 플랫폼으로의 통합을 준비할 것입니다. 올해 이후 릴리스에서는 대형 미디어 회사에서 요구하는 확장성과 안정성을 갖춘 3D 파이프라인을 활용하여 영화와 애니메이션의 복잡한 3D 시각 효과를 처리하는 등 전체 3D 렌더링 및 AI 애플리케이션을 지원할 예정입니다.