Reality Composer Pro 3로 더 빠르게 공간 장면 반복하기

안녕하세요, 여러분! 저는 JP입니다. Apple에서 Reality Composer Pro를 담당하는 엔지니어입니다. 이 세션에서는 공간 콘텐츠를 어떻게 Reality Composer Pro 3를 사용해 그 어느 때보다 빠르게 반복 작업할 수 있는지 이야기하겠습니다. Apple Vision Pro 출시 이후, 플랫폼에는 놀라운 공간 경험들이 선보이고 있습니다. Reality Composer Pro는 visionOS에 그 놀라운 콘텐츠를 구현하는 중심에 있었으며, 이 커뮤니티가 만들어 내는 것들을 보며 많은 영감을 받고 있습니다. 저희의 목표는 여러분의 아이디어를 더 많고 더 좋은 도구로 구현할 수 있도록 최대한 마찰 없이 실현할 수 있게 돕는 것입니다. 이를 위해, 여러분을 도울 수 있는 새로운 기능들을 소개합니다. 가장 야심찬 공간 프로젝트도 현실로 만들 수 있습니다!

Reality Composer Pro 3는 빠르고 반복적인 작업을 위해 처음부터 구축되었으며, 협업 워크플로우를 지원합니다. Xcode를 사용하지 않고도 개발을 더욱 진행할 수 있도록 도와줍니다.

이 세션에서는 새로운 기능들을 소개해 드리겠습니다. Live preview, Lightmaps, 그리고 Reality Composer Pro Assistant를 포함하며, AI를 사용하여 3D 콘텐츠를 생성할 수 있습니다. 인터랙티브 게임 Chaparral Village에 몇 가지 작은 기능을 추가하는 과정을 보여 드리겠습니다. 먼저 에디터의 핵심 기능에 대한 간략한 개요로 시작하겠습니다. 엔티티와 컴포넌트를 사용하여 씬을 구성하는 방법을 다루겠습니다. 새로운 프로토타입 및 인스턴싱 시스템을 소개합니다. 이 시스템은 여러분이 에셋을 효율적으로 구성, 재사용 및 관리할 수 있도록 설계되었습니다. Vision Pro에서 직접 콘텐츠를 미리보기하고 제작하는 방법을 시연해 드리겠습니다. Lightmaps를 사용하여 씬의 간접 조명을 베이크하겠습니다. 마지막으로, Reality Composer Pro Assistant를 소개하고, 이를 활용하여 여러분의 세계에 콘텐츠를 추가하는 방법을 알아보겠습니다. 우선 먼저 알아둘 것이 있습니다. Reality Composer Pro 3는 더 이상 Xcode 개발자 도구로 제공되지 않습니다. 이제 developer.apple.com에서 다운로드할 수 있으며, 응용 프로그램 폴더에서 바로 실행할 수 있습니다. Reality Composer Pro Editor 사용의 기본 사항에 익숙해지고 싶다면, Reality Composer Pro Editor를 다음 세션을 확인해 보시기 바랍니다. WWDC23의 "Meet Reality Composer Pro" 오늘 작업할 프로젝트에 대한 간략한 개요로 시작하겠습니다. 이것은 Chaparral Village의 Alchemy Area입니다. 이 씬의 모든 오브젝트는 Blender에서 모델링되었으며, USD 파일로 가져와서 Reality Composer Pro에서 배치되었습니다. 더 자세히 보기 위해 View 메뉴에서 Focus Mode를 사용하겠습니다. 씬을 둘러보겠습니다.

정말 아름다운 씬이네요.

프로젝트에 에셋을 추가하는 것부터 시작하겠습니다. 이를 위해 Project Browser에서 에셋 가져오기 아이콘을 사용하여 데스크탑에 있는 Cauldron USD 파일을 선택하겠습니다.

USD 파일을 가져오면 콘텐츠가 정리되고 임포트 번들로 최적화됩니다. 가져온 후에는 번들을 확장하여 검사할 수 있습니다.

번들 내에서 가져온 지오메트리, 머티리얼, 텍스처 등을 볼 수 있습니다. cauldron 에셋이 좋아 보입니다. 이제 실험실에 가져오기 위해 번들을 뷰포트로 드래그 앤 드롭하겠습니다.

추가된 에셋은 계층 뷰에 표시되며 엔티티라고 합니다. 오른쪽 인스펙터 패널에 표시되는 Transform Component가 있습니다. 엔티티와 컴포넌트는 Reality Composer Pro 3에서 만드는 모든 것의 핵심 구성 요소입니다. 더 자세히 살펴보겠습니다.

계층 패널에서 씬을 구성하는 모든 엔티티 목록을 볼 수 있으며, 필요에 따라 재정렬하고 중첩할 수 있습니다. fireplace를 확장하고 cauldron을 그 아래로 드래그하겠습니다.

cauldron 엔티티를 선택하고 Transform Component의 값을 조정하여 올바른 위치와 각도로 배치하겠습니다.

Add Component 버튼을 사용하여 엔티티에 더 많은 컴포넌트를 추가할 수 있습니다.

이 패널을 사용하면 엔티티에 조명, 물리, 오디오 등을 추가할 수 있습니다.

이러한 컴포넌트 중 몇 가지를 사용하여 씬에 흥미로운 시각 효과를 만들어 보겠습니다.

먼저 Table 엔티티 아래에 자식 엔티티를 만들겠습니다. 컨텍스트 메뉴를 사용하여 'Add Child Entity'를 선택하겠습니다. 이름은 'Magic Effect'로 하겠습니다.

엔티티를 프레임에 맞추려면 항상 'f'를 누르면 됩니다.

Magic Effect 엔티티에 'Glow'라는 자식 엔티티를 추가하겠습니다.

그리고 간단한 Point Light 컴포넌트를 추가하겠습니다.

조명의 위치를 조정하겠습니다.

감쇠를 조정하고,

색상을 조정하고,

강도를 조정하겠습니다.

Magic Effect에 새로운 Compute Simulation 컴포넌트도 추가하겠습니다.

인스펙터 패널에서 프로젝트를 위해 만든 Magic Graph를 선택하겠습니다. Compute Graph 선택기를 사용하면 됩니다. 이 프로젝트에서 사용 가능한 모든 컴퓨트 그래프가 표시됩니다. Magic Graph와 Brewing Graph가 있습니다. 지금은 Magic Graph를 사용하고, Brewing Graph는 나중에 사용하겠습니다. Compute Graph는 누구나 GPU 프로그래밍을 할 수 있게 합니다. 노드 기반 그래프를 통해 간단한 파티클 시스템부터 복잡한 유체 시뮬레이션까지 무엇이든 만들 수 있습니다. 이 주제에 대해 자세히 알아보려면 다음 세션을 시청하세요. "Supercharge your spatial workflows with Reality Composer Pro 3" Compute Graph가 지금 보이지 않는다는 것을 알아차리셨을 겁니다. 이 그래프는 시뮬레이션 단계에서만 실행되기 때문입니다. 테스트하기 위해 런치 컨트롤을 사용하여 게임을 실행하겠습니다. Play 버튼을 누르면 됩니다. 여기서 Reality Composer Pro 3가 진정으로 빛을 발하기 시작합니다.

Alchemy Area가 실행 중이며 Compute Graph가 시뮬레이션되는 것을 볼 수 있습니다. 더 자세히 살펴보겠습니다.

시뮬레이션 탭을 씬 탭 옆에 고정하겠습니다.

이를 통해 게임이 실행되는 동안에도 콘텐츠 제작을 계속할 수 있습니다. 이 Magic Effect를 테이블 위의 그릇에 배치하겠습니다.

그래프의 트위스트 양을 원하는 대로 조정하겠습니다.

시뮬레이션 탭을 통해 빠르게 조정할 수 있으며, 배포 과정 없이 바로 확인할 수 있습니다. 물리 시뮬레이션에서 스크립트 그래프, 애니메이션까지, Reality Composer Pro에서 제작하는 모든 것을 시뮬레이션 탭에서 실시간으로 미리 볼 수 있어, 여러분과 최종 경험 사이의 마찰을 크게 줄여줍니다. 다음으로 Reality Composer Pro에 추가된 'prototypes'라는 새로운 기능을 다루겠습니다. 강력하고 재사용 가능한 오브젝트를 만드는 데 사용할 수 있습니다. 엔티티를 프로토타입으로 만들려면 계층 탭에서 드래그하여 Project Browser로 바로 드롭하면 됩니다.

이렇게 하면 새로운 프로토타입 에셋이 생성됩니다. 이 새로운 프로토타입을 뷰포트로 드래그하여 인스턴스화할 수 있습니다.

새 인스턴스의 이름을 'Brewing Effect'로 변경하겠습니다.

이제 Magic Effect 프로토타입을 사용하는 두 개의 인스턴스가 생겼습니다. 이 인스턴스들에 오버라이드를 제공하여 각각 커스터마이즈할 수 있습니다. 먼저 brewing 인스턴스의 효과를 앞서 언급한 Brewing Graph로 변경하겠습니다...

그리고 색상을 조정하고,

감쇠,

Glow 엔티티의 폴오프를 조정하겠습니다.

이런... 안 좋아 보이네요. 컨텍스트 메뉴에서 Reset을 선택하여 오버라이드를 항상 소스 값으로 되돌릴 수 있습니다. Attenuation Falloff 속성을 우클릭하여 초기화하겠습니다.

네, 훨씬 좋아졌습니다. 원래 폴오프 값을 유지하겠습니다. 프로토타입을 사용하면 한 곳에서 콘텐츠를 편집하고 나머지는 시스템이 처리합니다. 프로토타입을 여러 번 인스턴스화할 수 있으며, 각 인스턴스를 개별적으로 오버라이드할 수 있습니다. 오버라이드가 마음에 들지 않으면, 원래 값으로 되돌릴 수 있으며, 오버라이드를 소스에 다시 적용할 수도 있습니다. 원하지 않는 한 영구적으로 변경되는 것은 없습니다. 다음으로 Reality Composer Pro의 또 다른 멋진 새 기능인 Live Preview를 소개하겠습니다. Vision Pro를 위한 경험을 만들고 있으므로, Mac에 연결된 모든 Vision Pro 기기에서 시뮬레이션을 실행할 수 있습니다. 런치 컨트롤 패널을 사용하여 Live Preview 세션을 시작하겠습니다. 올해 말에 출시될 예정입니다. 이렇게 하면 visionOS에서 컴패니언 앱이 열립니다. 이제 Reality Composer Pro에서 계속 제작하면서 업데이트가 즉시 반영되는 것을 볼 수 있습니다. 파란색 fill light에 새로운 물리적 공간 조명 기능이 활성화된 것을 확인하세요. 기기에서 이런 효과를 제작하면 공간 경험에서의 영향을 즉각적으로 느낄 수 있습니다. 공간 경험에서의 영향을 즉각적으로 느낄 수 있습니다.

이런 라이브 미리보기 방식은 반복 작업 시간을 크게 단축합니다. 제작 과정에서의 불확실성을 없애줍니다. 보이는 것이 정말 얻게 되는 것입니다. 잘 되어가고 있지만 조명 편집 후 씬이 완전히 맞지 않는다는 것을 느끼고 있습니다. 씬이 더 이상 완전히 맞지 않습니다. 이 씬을 위해 이전에 생성된 간접 조명이 새로운 조명과 더 이상 일치하지 않기 때문입니다. 이를 수정하기 위해 Reality Composer Pro의 새로운 Lightmaps를 사용하겠습니다.

간접 조명은 빛이 씬 주위에서 반사되는 방식을 포착하여 단일 조명으로 직접 보이지 않는 영역에도 기여합니다. 예를 들어 이 테이블 아래 공간에는 직접 조명이 없지만, 간접 조명을 시뮬레이션함으로써 미미하더라도 그 영역에 도달하는 은은한 빛을 포착할 수 있습니다. 예를 들어 제 씬에서는, Alchemy Area의 대부분이 fireplace에 의해 직접 조명되지 않습니다. 하지만 Lightmaps는 어두운 영역을 부드러운 바운스 조명으로 채워주어, 씬의 전반적인 모습을 크게 개선합니다. 간접 조명 시뮬레이션은 비용이 많이 들 수 있지만, Alchemy Area의 조명이 움직이지 않으므로 새로운 lightmapping 컴포넌트를 사용하여 간접 조명 항목을 미리 계산하고 결과를 Lightmap이라는 텍스처에 저장할 수 있습니다.

Alchemy Area 엔티티에는 Lightmap 컴포넌트가 연결되어 있습니다.

여기서 베이크할 조명 항목을 제어하고 품질 설정을 세밀하게 조정할 수 있습니다. Bake Settings에서 Lightmaps의 품질을 low에서 high로 변경하겠습니다.

베이크된 조명의 출력을 미리 보려면 Lightmap Preview 탭을 열겠습니다. Tab 메뉴에서 할 수 있습니다.

이를 통해 간접 조명이 씬에 미치는 영향을 실시간으로 볼 수 있습니다. Lightmap 설정을 조정하겠습니다.

미리보기 탭을 통해 전체 베이크를 확정하기 전에 최종 결과를 명확하게 확인할 수 있습니다. 이 설정에 꽤 만족합니다. 씬의 Lightmap을 재생성할 준비가 되었습니다.

조명이 베이크되는 동안 Lightmap 컴포넌트가 지원하는 다양한 조명 항목을 살펴보겠습니다. Indirect Lighting 외에도 Reality Composer Pro는 Ambient Occlusion 및 Beauty Lightmaps도 생성할 수 있습니다.

Ambient Occlusion은 씬의 각 지점이 주변에 대해 가지는 가시성을 나타냅니다. 그리고 Beauty는 씬에서 각 지점의 최종 색상을 나타내며, 간접 및 직접 조명 모두를 고려합니다. Lightmaps 상태를 확인하러 가겠습니다.

완료되었습니다! Lightmaps가 완전히 베이크되었고 씬이 아름답게 보입니다. 마무리하기 전에 이 씬에 한 가지 더 추가하고 싶습니다. 작업대 위에 몇 가지 아이템이 더 있으면 멋있을 것 같습니다. 이를 위해 완전히 새로운 Reality Composer Pro Assistant를 사용하겠습니다. 새로운 AI Assistant는 오른쪽 패널에서 항상 사용할 수 있습니다.

거기서 간단하게 어시스턴트에게 도움을 요청할 수 있습니다.

정말 멋지네요. 양초도 몇 개 추가해 봅시다.

씬이 완성되어 가고 있습니다. Reality Composer Pro Assistant는 강력한 생성 모델을 사용하여 필요에 따라 3D 오브젝트와 머티리얼을 제작하고, 더 빠르게 반복 작업하고 자유롭게 실험하며, 아이디어를 쉽게 현실로 만들 수 있게 합니다. 또한 여러분이 가진 Reality Composer Pro에 관한 모든 질문에도 답할 수 있습니다! 오늘 많은 내용을 다루었지만, Reality Composer Pro 3가 제공하는 것의 표면만 긁은 것입니다. Reality Composer Pro와 함께하는 여정을 계속하려면, 먼저 다음 사이트에서 다운로드하세요. developer.apple.com 방문하는 동안 사용 가능한 샘플 프로젝트도 꼭 살펴보세요. Reality Composer Pro에는 훨씬 더 많은 기능이 있어 이 세션에서 다루지 못했습니다. 더 알아보려면 Reality Composer Pro 세션들을 확인해 보시기 바랍니다. 팀 전체를 대표하여 말씀드리면, 여러분이 이것으로 만들어 낼 것들을 빨리 보고 싶습니다. 시청해 주셔서 감사합니다!