RealityKit5 컴퓨터 그래픽스 - Object Picking Picking 했을때 우리가 얻을 수 있는 것은 스크린에서의 2차원 Pixel좌표 (x,y)밖에 없었다. 어떻게 주전자가 하이라이트되어 색이 바뀔까? 각 픽셀은 어떤 영역에 속하는지 정보가 없다. 3차원으로 넘어가서 기하적인 추론을 해야할 것이다. 그림에 보이는 박스는 View Port 영역이다. 2차원 Screen 공간에서는 커서가 (X_s, Y_s) 2차원 좌표로 주어지지만, 클릭한 점이 3차원 공간에서는(X_s, Y_s, 0)일 것이다. 여기서 뻗어나가는 ray를 생각해보자. ray란 시작점이 있고 한쪽으로 무한하게 뻗어나가는 직선이다. 3차원 뷰포트에서 모든 Ray는 z축 방향으로 뻗어나간다고 생각하면된다. 이때 direction Vector는 (0,0,1)이다. 3차원 Ray가 뻗어나가면서 누구.. 2024. 3. 1. [iOS] RealityKit, ARKit - MotionCapture 예제 ARViewContainer SwiftUI는 기본적으로 UIKit 또는 AppKit 컴포넌트를 직접 지원하지 않는다. 즉, ARView와 같은 UIKit 컴포넌트를 SwiftUI에서 바로 사용할 수 없다. 따라서, UIKit의 ARView를 SwiftUI 뷰에서 사용하고자 할 때는 UIViewRepresentable 프로토콜을 채택하여 UIKit 뷰를 SwiftUI 뷰로 변환해야 한다. ARView, Entity란? struct ARViewContainer: UIViewRepresentable { typealias UIViewType = ARView //이 메서드는 SwiftUI 뷰가 생성될 때 호출. //여기서 실제 ARView 인스턴스를 생성하고 초기 설정을 수행. func makeUIView(con.. 2024. 2. 14. [iOS] SIMD3 현재 보고 있는 AR, 그래픽스 관련하여 3D모델의 위치를 추적하고 저장하는 과정에서 많이 보이는 타입이다. SIMD3는 단일 명령 다중 데이터(Single Instruction, Multiple Data, SIMD) 프로그래밍 모델을 따르는 벡터 타입으로, 세 개의 스칼라 값을 갖는 벡터를 표현한다. struct SIMD3 where Scalar : SIMDScalar SIMD3는 제네릭 구조체로, Scalar 타입의 세 개의 요소를 갖는다. 이때, Scalar는 SIMDScalar 프로토콜을 준수해야 하며, 이는 주로 기본 수치 타입(int, float 등)을 의미한다. 연산자와 메서드 SIMD3 구조체는 연산자를 통해 벡터 간 연산을 지원한다. 예를 들어, &* 연산자는 두 벡터의 요소별 곱셈을 수.. 2024. 2. 6. RealityKit - ARView, Entity RealityKit is… ARKit 위에 구축된, 증강 현실을 위한 고수준 프레임워크. 자체적인 ARView를 사용하여 AR 콘텐츠를 표시하며, 이 ARView는 내부적으로 ARSession을 사용하여 ARKit과 통신한다. ARView RealityKit에서 AR 경험을 제공하기 위해 사용되는 뷰이다. 뷰는 단일 Scene 인스턴스를 가지며, Scene 인스턴스에는 실제 세계의 어떤 것에 콘텐츠를 고정시키는 AnchorEntity 인스턴스를 추가할 수 있다. 각 AnchorEntity에는 Scene의 컨텐츠를 구성하는 Entity, Entity 계층이 추가될 수 있다. Entity RealityKit에서는 Scene 내의 모든 요소가 Entity라는 단 하나의 클래스에서 파생된다. Entity는 여러.. 2024. 2. 3. [iOS] ARKit(1) - OverView, Setting 요즘 그래픽스 관련 서적을 참고하고 Metal 관련 코드를 공부하고 있다. 그러다가 집중력이 흐려질땐 내부적으로 Metal 기능을 사용하고 있는 ARKit, RealityKit과 같은 프레임워크를 경험하면서 Top - Down 방식으로 접근해보는 것도 도움이 될 것이라 판단했다. ARKit ARKit 프레임워크의 주요 목적은 증강 현실(AR) 경험을 개발하는 것이며 제공하는 기능은 다음의 4가지다. motion trackingworld tracking환경의 표면, 크기, 형태를 파악디스플레이 편의성ARKit의 차별화된 기능: 마커리스 추적ARKit의 특징 중 하나는 markerless tracking 이다. 추적 카드(마커)도 필요 없이 주변 환경을 파악하고, 가상 콘텐츠를 실제 환경에 자연스럽게 어우러.. 2024. 1. 21. 이전 1 다음 728x90
