라이트벌브 컴퓨터, 헤드셋 비전을 이기다

공간 컴퓨팅에는 마케팅 문제가 있습니다. 업계가 내놓는 '미래의 비전'은 거의 다 얼굴에 화면을 씌우는 것이죠. 안경, 고글, 헤드셋까지 판매 논리는 늘 같습니다. 당신이 직접 컴퓨터를 착용하라는 것입니다. 디자이너 기욤 아르도(Guillaume Ardaud)는 정반대에 베팅한 물건을 만들었고, 지난 몇 년간 본 앰비언트 컴퓨팅 데모 중 가장 설득력 있었습니다. 일반 에디슨 소켓에 끼우면 되는 전구 모양 기기로, 카메라로 방을 살피고 음성 명령을 듣고, 주변 표면에 인터페이스를 직접 투사합니다. 그는 이것을 '라이트벌브 컴퓨터'라고 부르는데, 솔직히 말해 헤드셋 진영이 엉뚱한 문제를 풀고 있는 것처럼 보이게 만듭니다.

얼굴에 화면을 씌울 때의 문제

무엇을 비판하는지 정확히 짚어야 합니다. “화면이 나쁘다”는 논거가 될 수 없으니까요. 화면은 훌륭합니다. 문제는 현대 화면 컴퓨팅이 강요하는 상호작용 방식이고, 그 문제는 세 겹으로 되어 있습니다.

• 구조적으로 개인용입니다. 노트북이나 폰은 한 사람에게 한 가지만 보여줍니다. 공유하려면 기기를 돌리거나, 몸을 붙이거나, TV에 화면을 미러링해야 하죠. 모두 어색하고 부차적인 해결책입니다. 헤드셋은 이를 더 악화시킵니다. 가상 객체를 함께 보려면 두 사람이 호환되는 소프트웨어를 실행한 헤드셋을 각각 써야 하고, 방에 있는 제3자는 허공에 대고 손을 흔드는 두 사람을 보게 됩니다.
• 주의력을 갉아먹습니다. 레시피를 폰으로 확인하려고 잠금을 풀었다가 알림 배지를 보고, 정작 레시피는 한 줄도 안 읽은 채 4분 뒤에 정신을 차립니다. 기기는 당신을 그 안에 붙잡아 두도록 설계되어 있습니다.
• 신체적으로 불편합니다. 젖은 손, 밀가루 묻은 손, 주방에서 토마토소스 병 위에 얹어 둔 폰. 고글은 김이 서리고, 안경을 누르고, 머리를 망치고, 얼굴에 장착하는 기기는 열과 배터리 예산이 빡빡해서 두 시간이면 꺼집니다.

헤드셋 진영은 디스플레이가 어디든 따라오게 해서 첫 번째 문제를 풀려 합니다. 하지만 두 번째 문제는 그대로 물려받고, 사회적 비용까지 더합니다. 광학적으로 당신이 주변 사람들을 무시하는 것처럼 보이니까요. 세 번째 제약도 더 강화됩니다. 모든 것을 얼굴에 들어갈 만큼 작게 만들어야 하니 전력, 연산, 발열이 모두 질 수밖에 없는 싸움을 벌입니다.

라이트벌브 컴퓨터가 실제로 겨냥하는 문제가 바로 이것입니다. '더 나은 AR 하드웨어가 필요하다'가 아니라 '정보가 방 안에 그냥 존재하면 어떨까?'라는 질문이죠.

프로젝터 컴퓨팅: 실패한 시도들이 오히려 흥미롭다

테이블과 벽에 인터페이스를 투사하는 것은 새로운 아이디어가 아닙니다. 아주 오래된 아이디어인데 계속 실패해 왔고, 그 실패 방식이 이번 시도가 어떻게 다른지 정확히 알려줍니다. 이 분야에 몇 년 있었다면 이 파도들이 부서지는 걸 지켜봤을 테니, 역사를 아는 것이 의미 있습니다.

1차 물결: 연구실 데모 (2000년대)

MIT 미디어랩은 프로젝터와 카메라 조합을 집중적으로 파고들었습니다. I/O Bulb와 LuminAR 프로젝트는 말 그대로 데스크 램프 형태의 카메라-프로젝터 쌍으로, 10년도 더 전에 투사형 인터페이스와 제스처 입력을 보여줬습니다. 훌륭한 작업이었고 영향력도 컸지만 소비자에게 닿지는 못했습니다. 이유는 간단합니다. 당시 컴퓨터 비전은 겨우 쓸 만한 수준이었고, 프로젝터는 어둡고 뜨겁고 비쌌으며, 그럴듯한 소프트웨어 스택도 없었습니다. 상호작용 개념은 맞았지만 물리적인 부분이 모두 틀렸습니다.

2차 물결: 거대한 테이블 컴퓨터

2008~2012년 무렵 마이크로소프트는 노트북이 아닌 테이블 형태의 오리지널 Surface를 내놓았고, 레노버도 테이블 크기의 멀티터치 PC를 실험했습니다. 공유 표면이라는 통찰은 옳았습니다. 커피 테이블 주위에 여러 사람이 같은 인터페이스를 만지는 경험은 실제로 훌륭하거든요. 하지만 가격, 무게, 그리고 전용 가구형 컴퓨터는 결국 구식이 되는 가구라는 점 때문에 무너졌습니다. 기기를 산 게 아니라 방 배치에 대한 약속을 산 셈이었죠.

3차 물결: 웨어러블 프로젝터

그다음은 소형화 전략이었습니다. 프로젝터를 몸에 붙이는 것이죠. 아마존은 어떤 표면이든 디스플레이로 바꾸는 프로젝터 개념으로 특허를 냈습니다. Humane AI Pin은 가슴에 착용하는 레이저 프로젝터 어시스턴트로 2024년 4월에 출시됐고, 몇 달 만에 반면교사가 되었습니다. 출력은 어둡고, 야외 햇빛에서는 제스처 제어가 제대로 작동하지 않았으며, 심각한 열 스로틀링이 있었고, 결국 폰을 그리워하게 만드는 제품이었습니다. 교훈은 분명합니다. 몸에 붙는 프로젝터는 얼굴 착용 컴퓨터의 전력 및 열 한계를 그대로 떠안고, 프로젝터 특유의 와트 소모까지 더해집니다.

한편 커뮤니티 프로젝트들, 오클랜드의 Dynamicland와 그 후속인 Folk는 사회적 논제를 철저히 증명했습니다. Dynamicland에서는 방 자체가 컴퓨터입니다. 프로그램은 테이블 위의 물리적인 종이 오브젝트이고, 카메라가 이를 보고, 프로젝터가 주석을 달고, 사람들은 공유 공간에서 함께 작업합니다. 방문했던 사람들에게 물어보면 미래를 본 것 같았다고 합니다. 다만 그 건물 밖으로는 나가지 못했을 뿐입니다.

실제로 통하는 것: 방 규모, 소켓 전원, 비전 중심

라이트벌브 컴퓨터의 설계 결정들을 이 실패의 역사와 나란히 놓고 보면, 알려진 지뢰를 하나씩 피해 간 흔적이 보입니다.

• 배터리가 아닌 벽 전원. 에디슨 소켓에 끼우거나 휴대용 베이스에 올려 둡니다. 에디슨 소켓은 인류 문명에서 가장 보편적인 전원 장착 지점입니다. 배터리 예산도, 뺨에 닿는 열에 대한 걱정도 없고, 가장 중요하게는 프로젝터에 충분한 루멘을 줄 수 있습니다.
• 방 자체가 디스플레이입니다. 기본이 방 규모라서 공유 상호작용이 페어링 기능이 아니라 기본 동작입니다. 벽 크기의 지도 앞으로 걸어가 여행을 계획하는 편이, 헤드셋을 쓴 두 사람이 마주 보는 것보다 어떤 사회적 기준으로 봐도 낫습니다.
• 입력 계층으로서의 최신 컴퓨터 비전. 포인팅, 손 추적, 손가락이 가리키는 선반 인식 등은 Apple의 손 추적 프레임워크와 최신 비전 모델이 최근에야 “의존할 만한 수준”을 넘어섰습니다. 2008년 버전은 자기 센서와 싸우는 프로토타입이었습니다. 이 데모는 소비자용 4K 레이저 프로젝터, 웹캠, 그리고 맥 한 대로 돌아갑니다.
• 음성은 하나의 모달리티이지 전체 UI가 아닙니다. 물어보면 그 자리에서 답합니다. 책등의 번호를 말해 주는 대신 선반의 책을 직접 강조하죠. 투사가 환경 안에서 루프를 닫습니다.

특히 주방 데모는 목표 시나리오를 정확히 보여줍니다. 타이머와 레시피가 조리대에 고정되어 있고, 손은 반죽으로 뒤덮여 있지만 잠금을 풀 필요도, 무언가를 쥘 필요도 없습니다. 이건 폰에 대한 사소한 개선이 아니라 기계와 맺는 관계 자체가 다른 것입니다. 이 지점에서 셸을 처음부터 만드는 일이 떠오릅니다. 컴퓨팅 환경에 쌓인 층들을 걷어내면, 어떤 부분이 실제로 하중을 받고 있었고 어떤 부분이 그냥 습관이었는지 드러나죠. 프로젝터 컴퓨팅도 기기를 걷어내고 쓸모 있는 잔여물, 즉 답변, 타이머, 지도, 알림을 찾아내 그것을 방 안에 놓습니다.

여기에는 제가 빼놓을 수 없는 역사적 공명도 있습니다. 범용 화면이 모든 상호작용을 삼켜버리기 전, 초기 산업 인터페이스 디자인에는 ‘대상 자체가 인터페이스라면?’이라는 실험이 가득했습니다. 주크박스, 자판기, 제어판 같은 것들이죠. 앰비언트 프로젝션 컴퓨팅은 묘하게도 그 시절로의 회귀입니다. 정보를 들고 다니는 빛나는 사각형에 추상화하는 대신, 관련 있는 사물이나 장소에 정보를 붙여 두는 것이니까요.

디자인이 먼저, 하드웨어는 그다음

기술자들이 이 프로젝트를 보면 대개 가장 먼저 스펙을 묻습니다. 기욤 아르도가 프로젝트 논의에서 한 답변은 이 프로젝트에서 가장 흥미로운 엔지니어링 발언입니다. 기술 스펙은 핵심이 아니라는 것이죠. 데모는 맥, 소비자용 4K 레이저 프로젝터, 웹캠, 그리고 맞춤형 프로젝션 매핑 및 렌더링 소프트웨어로 돌아갑니다. 이 프로토타입은 한 가지 디자인 질문에 답하기 위해 존재합니다. 이 상호작용이 애초에 그럴듯하고 바람직한가? 그렇다는 답이 나온 뒤에야 하드웨어를 역으로 설계합니다.

제 생각에 이것은 정확히 올바른 작업 순서이며, 업계가 보통 일하는 방식과 정반대입니다. 업계의 통상적 공식은 이렇습니다. 기술이 먼저 존재한다(소형 디스플레이! 웨이브가이드!), 그러니 헤드셋을 만들고 나중에 사용처를 찾자. Humane Pin은 기능 우선 사고의 전형적인 희생양입니다. 기술적으로는 인상적이었지만 경험적으로는 의미가 없었죠. 아르도의 순서는 역사적으로 진정으로 혁신적인 제품들을 만들어 낸 방식입니다. VisiCalc는 스프레드시트 하드웨어 데모가 아니었습니다. 너무나 명백하게 바람직한 상호작용이었기에 PC 산업 자체를 끌어냈습니다. 이 이야기는 VisiCalc가 하드웨어를 살 만한 이유를 만든 방법에서 다뤘습니다.

커뮤니티 반응에서 나온 세부 사항 하나는 실제 버전에 꼭 반영할 가치가 있습니다. 음성 제스처 경계에서의 지연입니다. 가리키면서 “여기에 놔”라고 말하면, 시스템이 처리하는 동안 잠시 멈춥니다. 제안된 해결책은 낮은 프레임레이트의 롤링 영상 버퍼를 유지하고, 오디오 스트림에서 “여기”라는 단어에 타임스탬프를 찍은 뒤, 처리가 끝난 시점의 손이 아니라 말한 순간 손이 실제로 가리키고 있던 프레임을 분석하는 것입니다. 우아한 방식입니다. 발화가 감지되는 즉시 포착된 위치에 작은 확인 점을 투사하면, 사용자는 손을 내려도 된다는 것을 알 수 있습니다. 데모와 제품을 가르는 미세한 상호작용 마감이고, 이것이 연구 문제가 아니라 풀 수 있는 엔지니어링 문제라는 점이 고무적입니다.

‘진(jinn)’ 문제와 다른 정직한 반론들

이제 반론을 다루겠습니다. 실질적인 문제들이고, 홍보 기사로 쓰고 싶지는 않으니까요.

가장 날카로운 비판은 이를 ‘진(jinn) 문제’로 봅니다. 이 설계는 집 안에 늘 지켜보고, 늘 듣고, 소원을 들어주는 존재를 들여놓으며, 자연어로 대화할 수 있게 해서 그 섬뜩함을 키운다는 것입니다. 침실과 욕실에 있는 카메라는 주머니 속 폰과는 근본적으로 다릅니다. 폰은 당신이 깨우기 전까지 꺼져 있죠. 이 불편함은 러다이트적 반감이 아니라 합리적인 위협 모델입니다.

완화 방법은 존재하지만, 마케팅 문구가 아니라 실제로 하중을 받는 구조여야 합니다.

• 기기 내 처리만. 비전 프레임이 집 밖으로 나가는 순간, 이 기기는 더 예쁜 갓을 씌운 감시 사업 모델의 한 사례가 됩니다. 한 댓글러의 우려, 즉 출시된 버전이 “클라우드 기반이 되어 더 나은 Flock 카메라가 될 것”이라는 예측은 반드시 깨야 할 예측입니다.
• 설정이 아닌 하드웨어 가드레일. 하드와이어드 카메라 표시등 LED, 물리적 셔터, 명시적인 사용자 동작이 있어야만 카메라가 켜지는 구조. 표시등이 소프트웨어로 제어된다면 결국 거짓말을 하게 됩니다.
• 설계 단계부터의 공간 구분. 주방과 작업실로 들고 다니는 휴대용 기기가, 모든 것을 보는 영구 설치형 천장 기기 여섯 대보다 낫습니다.

인접한 역사에서 얻는 기저율 우려도 하나 덧붙이겠습니다. 주변 소비자 센서와 데이터 처리의 이력은 형편없습니다. 로컬 처리를 약속하면서 몰래 외부로 신호를 보내는 기기들은 예외가 아니라 하나의 장르입니다. 이게 실제 제품으로 나온다면 프라이버시 구조가 게임의 전부가 될 것이고, ‘1차적 고려 사항’이라는 말은 이를 뚫어보려고 기다리는 사람들이 감사하는 상태를 의미해야 합니다.

두 번째 반론은 더 평범하지만 현실적입니다. 임의의 집에 투사하기는 어렵습니다. 벽지, 직사광선, 어두운 표면, 고양이. 데모는 통제된 환경에서 작동하지만, 실제 거실은 조명이 적대적이고 표면이 제각각입니다. 4K 레이저 프로젝터가 도움은 되지만 물리 법칙을 없애지는 못합니다. 밝은 방에서는 투사된 인터페이스가 바래는 것은 어쩔 수 없습니다. 헤드셋은 늘 디스플레이 표면(당신의 망막)을 스스로 통제하지만, 라이트벌브는 그 표면을 환경에서 빌려 씁니다. 이는 실제적인 트레이드오프이며, 이 기기를 대체재가 아니라 보완재로 한정시킵니다. 솔직히 괜찮습니다. 폰은 어디 가지 않고, 제정신인 사람이라면 그렇다고 주장하지 않습니다. 주장은 더 좁고 더 강합니다. 하루에 수십 번, 기기 의식 없이 정보 하나가 여기 필요한 순간들에 이것이 이깁니다.

설령 출시되지 않더라도 지금 이것이 중요한 이유

라이트벌브 컴퓨터가 영원히 프로토타입으로 남더라도 이미 가치 있는 일을 했습니다. 헤드셋 단일 문화가 필연이 아니라 선택이라는 것을 보여준 것이죠. 업계의 R&D 예산은 압도적으로 개인용 착용형 디스플레이에 쏠려 있고, 그 자본 배분이 필연처럼 위장되기 쉽습니다. 대안을 잘 구현한 데모 하나가 사람들이 무엇을 요구하는지를 바꿉니다.

여기에는 짚어둘 계보도 있습니다. 이 아이디어들은 수십 년간의 유비쿼터스 컴퓨팅 연구를 관통합니다. 제록스 PARC의 와이저(Weiser)가 말한 차분한 컴퓨팅, Dynamicland의 공동체 공간, MIT의 연구실 프로젝터들이 그렇습니다. 그중 대부분은 상업적 흐름을 타지 못했습니다. 바뀐 것은 비전이 아니라 기반 기술이 마침내 따라잡았다는 것입니다. 비전 모델은 장면을 밀리초 단위로 읽고, 레이저 프로젝터는 밝고 작고 비교적 저렴해졌습니다. 음성 인터페이스는 여전히 답답하지만 작동은 합니다. 라이트벌브 컴퓨터는 좋은 오래된 아이디어가 좋은 새 부품을 만났을 때 생기는 결과입니다.

제 예측입니다. 10년 안에 방 규모의 앰비언트 컴퓨팅 어떤 버전이든 출시될 것이고, 이 프로토타입과는 전혀 다른 모습일 겁니다. 아마 지루해 보일 테고, 온도조절기를 만드는 회사가 내놓은 천장 설치물쯤일 가능성이 큽니다. 그리고 이런 것들이 늘 그렇듯, 화려하지 않은 사용처를 통해 들어올 겁니다. 주방의 타이머, 복도의 공유 지도, 가리키면 켜지는 조명 같은 것들이죠. 얼굴 착용형 컴퓨터도 자기 자리를 지킬 겁니다. 하지만 웨어러블의 꿈을 30년 쫓아온 끝에, 주방 소켓에 꽂힌 전구 하나가 제게 확신을 준 것은 컴퓨팅의 미래가 얼굴이 아니라 방 안에 있다는 사실입니다.