방 안에는 두 개의 큰 테이블이 있습니다.
먼저, 한쪽 테이블에서 아이들은 마음에 드는 블럭을 하나 골라 원하는 악기의 그림 위에 얹습니다. 그리고 연주를 합니다.

그리고 다른 쪽의 테이블에 그 블럭을 놓으면 방금 연주한 음악이 연주됩니다. 친구들의 것과 함게 놓으면 각 블럭에 녹음된 음악이 함께 연주됩니다. 또한 블럭의 위치에 따라 연주의 속도가 빨라지기도 느려지기도 합니다.

이 작품은 아이들의 아날로그적 놀이감에 디지털 기술을 최대한 자연스럽게 적용시키고자 하는 꿈을 그리고 있습니다. 이 기술은 숨어 있어서 만지거나 느낄 수는 없습니다. 다만 철저히 실제 세계에 통합되어 있습니다.

TECHNICAL OVERVIEW

사실 이러한 것을 실현시키기에는 아직 기술은 너무 미비하거나 많은 비용이 듭니다. 그래서 이 작품에서는 일종의 속임수를 씁니다.

천정에는 카메라가 달려 있고, 각 테이블의 영상을 컴퓨터로 보내게 됩니다. 컴퓨터에서는 영상 속의 블럭을 그 색으로 인식하고 위치를 파악하게 됩니다. 어떤 색의 블럭이 악기가 그려진 위치에 놓이게 되면, 컴퓨터는 건반으로 연주되는 음악을 컴퓨터의 메모리 속에 저장을 하고, 후에 블럭을 가지고 연주할 때 재생을 하게 됩니다.

천정에 달려있는 카메라는 Apple iSight로 FireWire로 연결되며 640x480 해상도의 영상을 초당 30프레임 비압축 포맷으로 보내줍니다. 상당히 정확한 색감이 훌륭하며, 자동 촛점, 자동 노출 조정 등의 기능이 들어 있습니다.

음악을 연주하고 듣기 위한 장비들로는 MIDI 키보드들과 사운드 모듈 등이 쓰였습니다. 이 장비들의 대부분은 책상 밑에 숨겨집니다.

영상을 인식하기 위하여 Max와 Jitter를 사용했습니다. Max 및 Jitter는 두 대의 Apple PowerMacintosh Cube 컴퓨터에서 돌아가며, 이더넷을 통해 서로 정보를 주고 받습니다. 사진에 보이는 파워북은 실험용으로 일시적으로 사용되었습니다. 이 모든 장비들은 역시 테이블 밑에 숨겨집니다.

대략적인 Technical Overview를 그림으로 그리자면 다음과 같습니다:

--- 2004년 3월 ---