스파게티 테이블 프로토콜 챌린지는 사용자가 AI의 물리적 현실 이해도를 테스트하도록 초대합니다. GPT-4o, Gemini 1.5 Pro, Claude 3.5 Sonnet에 대한 최근 파일럿 연구 결과는 물리적으로 일관된 이미지를 생성하는 데 있어 상당한 한계를 보여주었습니다. 완벽한 사실적 이미지 생성에도 불구하고, AI는 기본적인 물리학에 어려움을 겪었으며 구조적 일관성에서 낮은 점수를 받았습니다. Claude 3.5 Sonnet은 언어적으로 불가능성을 인지했지만, 여전히 결함 있는 이미지를 생성했습니다. GPT-4o와 Gemini 1.5 Pro는 문제에 대한 상징적 인식조차 부족했습니다. 이 프로토콜은 연속성, 중력 및 물리학, 사고의 가역성을 측정합니다. 인간의 체화된 인지는 즉각적으로 물리적 불가능성을 감지하지만, 이는 현재 AI에는 없는 능력입니다. 이 챌린지는 UX/UI 및 HCI 커뮤니티의 더 광범위한 테스트를 장려합니다. 참가자는 AI에게 특정 테이블을 생성하도록 프롬프트하고, 5초 후 테이블이 무너지는 것을 시뮬레이션하도록 요청받습니다. 결과는 AI가 불가능성을 플래그했는지 여부와 붕괴 시퀀스가 물리적 논리를 따랐는지 여부에 따라 채점됩니다. 이 연구는 또한 이전 프롬프트에서 의도하지 않은 요소 오염을 확인합니다. 이 협력 노력은 AI의 한계를 이해하기 위한 공개 데이터셋을 구축하는 것을 목표로 합니다.