
VideoTrace: Rapid interactive scene modelling from video
VideoTrace is a system for interactively generating realistic 3D models of objects from video—models that might be inserted into a video game, a simulation environment, or another video sequence. The user interacts with VideoTrace by tracing the shape of the object to be modelled over one or more frames of the video. By interpreting the sketch drawn by the user in light of 3D information obtained from computer vision techniques, a small number of simple 2D interactions can be used to generate a realistic 3D model. Each of the sketching operations in VideoTrace provides an intuitive and powerful means of modelling shape from video, and executes quickly enough to be used interactively. Immediate feedback allows the user to model rapidly those parts of the scene which are of interest and to the level of detail required. The combination of automated and manual reconstruction allows VideoTrace to model parts of the scene not visible, and to succeed in cases where purely automated approaches would fail.
Further directions
We're currently developing further modelling interactions to increase both the power and flexibility of the modelling process. We're working on interactive dense reconstruction, de- and re-linghting for model-based video editing, deformable objects and dynamis scenes, amongtsh other ideas.
영상 주파수 대위 기술 빨리 기초를 두는 새로운 발생은 상호 작용하는 만들는 체계에 이다. 모형을 영상 주파수 게임, 가상 현실 또는 다른 영상 주파수 순서안에 사용한 일지모른다 완료한다. 사용자는 영상 주파수 순서를 사용할지도 모른다, (영상 주파수 대위 기술을 사용하여 목표가 다 모양을 짜맞추는 구조) 성냥, 처음부터 끝까지handpainted선, 계산 기회 자동 진단3D정보를..
. 따라서, 단 간단한 제 2handpainted, 진짜3D모형을 일으킨 할 수 있는다. VideoTrace은 지시하 보기를, 빨리 제공하고 강한 기능은 가동 교류를, 조합 이다 자동handpainted설명서 구조물 기능, 우리는 영상 주파수안에 명백하지 않게 부분적인 모형을 설치할지도 모른다... 건물과 건축 복잡한 생성하기 위하여 아주 넓을 것이 영상 주파수 순서, 신청 범위을 사용하여 빠른 만들 온, 및 예를 들면 이 소프트웨어를 이용한 위에, 우리는 도로 수평한 관점 높은 관점에 이 건물을 사진을 찍을지도 모른다... 우리는 교체로 계속하기 위하여 이 심상 자료를 이용할지도 모른다 운영한다, 생성3D반점 구름, 성냥 원시 심상... 대단히같이 보기 위하여3D자료를 모이는 사용 레이저 스캐너에 이것 (사본 수 미터) 방법. VideoTrace소프트웨어에 의하여... 가상 현실 환경, 건축 설계안에 그리고 이렇게 사용한 일지모른는 도시 모형 일으킨다 및 건축 은 또한 유사한 기술을 있을 전에, 이 것은 아주 강하게 닮는다, 그러나 이것이 가장 진보하다... 것 을 말한다 VideoTrace: 급속한 상호 작용하는
-_-; 엄청나군요;; 트레킹 프로그램 짱먹을듯;;;
기술 자체는 크게 새로울게 없는 건데, 아이디어를 잘 조합한 듯...
가만보니 포토샵의 매직완드, 즉 마술봉 툴을 3D 트레이싱으로 응용한 거네요.
포토샵에서 스틸 이미지의 명도, 채도값을 분석해서 트레이싱 하듯이, 동영상은 영상에다 기준 축만 잡아주면(이것도 자동화가 가능하겠죠), 공간 설정이 되고 일종의 그리드나 가이드가 세워지겠죠.
그 다음은 그 위에서 스냅이 이루어지겠고, 스냅들 중에 원하는 선만 잡아서 실체화를 시키는 거구요.
실제 제품화가 어찌 이루어질지는 모르겠지만, 당장은 가상현실이나 게임 쪽에서 응용해볼 수 있는 기술이네요.