Vibe Remote FSD v2.0 Technical Overview
1. 멀티 에이전트 & 원격 제어 (Remote Control)
- Troy Server 연동: 자체 개발한 Troy Server와 FSD(Full Self-Driving) 로직을 결합, Auth 기반의 에이전트 연결 제약을 극복했습니다.
- 복수 컴퓨터 제어: 한 곳에서 명령을 내리면 원격지에 연결된 여러 대의 컴퓨터(Mac, Win 등)가 동시에 작업을 수행합니다.
- 크로스 플랫폼 도구 제어: 로컬 앱의 한계를 넘어 Xcode, Antigravity 등 OS 전용 툴들을 원격으로 조작할 수 있습니다.
2. 비전 기반 레이아웃 분석 (X-Ray Vision)
- DOM 없는 세상의 DOM화: 웹의 DOM 구조에 의존하지 않고, PDF, 모바일 캡처, 일반 앱 화면 등 모든 시각적 요소를 레이아웃으로 구조화합니다.
- Machine Learning Vision: 아이패드나 아이폰의 비전 기능을 활용하여 시각 정보를 분석하고, 이를 기반으로 자동화 트리거를 발생시킵니다.
- 기기 간 워크플로우: 모바일 기기에서 캡처한 화면을 분석하여 원격 서버의 작업을 지시하는 하이브리드 워크가 가능합니다.
3. 네트워크 및 통신 아키텍처
- High-Speed Pipeline: **WebSocket(WS)**과 UDP 기능을 조합하여 원격 제어 시 발생하는 지연 시간(Latency)을 최소화했습니다.
- View & Control 분리: 원격 브라우저나 Native 환경에서 화면을 실시간 뷰잉(View)하고, 실제 조작(Control)은 별도의 독립 앱에서 처리하는 이원화 구조를 채택했습니다.
4. 리소스 최적화 및 상업화 가속
- 쿼터 우회 및 병렬 처리: 무료 계정들의 API 쿼터를 효율적으로 분배/사용하여, v0 등에서 디자인된 결과물을 빠르게 다운로드하고 Remix, Next.js 프로젝트를 Vite 환경으로 전환하는 등의 대규모 자동화 서비스를 즉시 구축할 수 있습니다.
- 자기 진화적 워크플로우: AI(Claude 등)가 스스로 입력창에 명령을 작성하고 다음 단계를 실행하는, 이른바 ‘AI가 AI에게 명령하는’ 루프를 구현했습니다.
현재 이 버전의 고도화를 진행중이고 IDE, 앱 모두 진행을 테스트가 끝나가고 있습니다. 그리고 원래 작업하던 Troy 서버와 클라이언트가 대부분의 작업을 처리하고 있어서 현재 작업하면서 업그레이드가 되고 있습니다
