인공지능과 확장현실의 결합은 몰입형 지능형 컴퓨팅의 새로운 패러다임을 열 수 있는 잠재력을 가지고 있지만, 이 두 분야의 생태계 사이에는 상당한 격차가 존재합니다. 이러한 격차를 해소하기 위해 인간 중심의 AI 및 XR 혁신을 가속화하도록 설계된 크로스 플랫폼 프레임워크인 XR 블록 프레임워크가 도입되었습니다. XR 블록은 사용자, 세계, 인터페이스, AI 및 에이전트를 포함하여 AI 및 XR의 핵심 추상화를 위한 플러그 앤 플레이 구성 요소가 포함된 모듈식 아키텍처를 제공합니다. 이 프레임워크는 지각적인 AI 및 XR 앱의 신속한 프로토타이핑을 가속화한다는 사명으로 설계되었으며 WebXR, threejs, LiteRT 및 Gemini와 같은 접근 가능한 기술을 기반으로 구축되었습니다. XR 블록의 아키텍처 및 API 설계 선택은 단순성과 가독성, 제작자 경험 우선 순위, 완전성보다 실용주의라는 세 가지 원칙에 따라 결정됩니다. XR 블록 프레임워크는 데스크톱 시뮬레이터와 Android XR 기기에서 실시간 AI 및 XR 애플리케이션의 프로토타이핑을 가속화하며, 상호작용의 내용과 하위 수준 구현의 방법을 분리하는 높은 수준의 인간 중심 추상화 계층을 제공합니다. 이 프레임워크는 XR 상호 작용을 위한 교체 가능한 모듈로 구성된 XR 블록의 구현을 안내하기 위해 높은 수준의 추상화로 구성된 새로운 현실 모델을 제안합니다. 현실 모델은 개발자가 인식 및 입력 파이프라인, 핵심 유틸리티로서의 AI, 경험 및 시각화 툴킷과 같은 하위 시스템을 활용할 수 있도록 하는 고급 API를 제공하는 XR 블록의 모듈식 코어 엔진에 의해 구현됩니다. XR 블록의 목표는 제작자가 높은 수준의 인간 중심 아이디어에서 대화형 프로토타입으로 훨씬 더 빠르게 이동할 수 있도록 하고 선언적 프롬프트를 XR 블록의 높은 수준의 지침으로 직접 변환할 수 있는 미래를 가능하게 하는 것입니다. 전반적으로 XR 블록은 프로그래밍, 디자인, 대화 사이의 경계가 사라지는 미래를 향한 기본 단계로, 스토리를 스크립팅하는 것처럼 유동적으로 현실을 스크립팅할 수 있게 해줍니다.