TL;DR

  • Orcah Studio는 Apple Silicon Mac에서 영상 라이브러리를 로컬 인덱싱하고, 텍스트·시각·오디오 검색으로 원하는 장면을 찾는 도구임.
  • 음성 전사와 화자 식별, 얼굴·사물·화면 속 텍스트 분석, 장면 설명, 카메라 메타데이터 및 위치 정보 검색을 제공함.
  • 첫 영상에서 머신러닝 모델을 내려받은 뒤에는 전사·얼굴·장면·임베딩 처리를 Mac에서 수행하며, 인터넷을 끊어도 계속 작동함.
  • 에이전트 검색과 이미지 기반 시각 매칭을 지원하고, Final Cut Pro와 DaVinci Resolve에 클립을 전달할 수 있으며 Premiere Pro는 요청 기반으로 제공됨.
  • 공개 베타 평생 라이선스는 249달러이며, macOS 14.0 이상, 16GB RAM 권장, 로컬 모델용 여유 공간 20GB 이상 권장임.

원하는 장면을 파일이 아니라 내용으로 찾기

  • 자연어로 영상 라이브러리 전체를 검색하고 원하는 장면으로 바로 이동하는 Mac용 도구임.
  • Orcah Studio는 공개 베타로 제공되며, Apple Silicon Mac과 macOS 14.0 이상이 필요함.
  • 평생 라이선스 가격은 249달러이며, 구매 후 1년간 업데이트가 포함되고 30일 이내 환불을 요청할 수 있음.

영상 한 편에 담긴 모든 정보

  • 영상 속 사람과 사물을 감지하고, 각 장면의 내용을 분석해 검색 가능한 정보로 정리함.
  • 기본 처리는 Mac에서 이뤄지며 클라우드 모델을 사용하지 않음.

음성 전사와 화자 검색

  • 영상의 모든 음성을 전사하고 각 발화자를 표시해, 과거 영상에서 특정 문장을 말한 정확한 시점을 찾을 수 있음.
  • 누가 어떤 주제나 단어를 말했는지 기준으로 영상을 검색할 수 있음.

얼굴·사물·화면 속 텍스트

  • 얼굴을 사람별로 묶고 장면별 사물 수를 파악하며, 표지판·번호판·자막처럼 카메라에 찍힌 텍스트도 검색 대상으로 처리함.

장면 설명

  • 각 장면을 등장인물, 장소, 행동을 포함한 자연어 설명으로 나타냄.
  • 보트에서 뛰어내리는 장면처럼 행동을 설명하는 방식으로 검색할 수 있음.

텔레메트리와 카메라 데이터

  • 카메라가 기록한 메타데이터를 읽어 필터링에 활용함.
  • GoPro 영상의 주행 기록과 시네마 카메라 파일의 사이드카 메타데이터를 처리하며, 후자에는 T-stop, 초점거리, 색 과학, LUT, 초점 거리, 렌즈 일련번호 등이 포함될 수 있음.
  • 인덱스 화면에는 파일 상태, 장면 수, 해상도, 비디오 코덱, 프레임률, 길이, 파일 크기, 촬영일, 인덱싱 날짜, 처리 방식, 화자, 파일 경로 등의 정보가 표시됨.

에이전트 검색과 시각 매칭

  • 원하는 장면을 머릿속에 떠오르는 방식으로 설명하면 에이전트가 검색을 계획하고 전사·시각·장면 등 여러 정보 층을 검색해 해당 순간을 반환함.
  • 이미 가진 프레임을 입력하는 Visual Match는 라이브러리에서 시각적으로 유사한 장면을 순위와 타임코드와 함께 찾아냄.
  • 영상 라이브러리를 눈으로, 귀로, 자연어 질문으로 검색할 수 있음.

라이브러리 인덱싱 3단계

  • 1단계 — 폴더 선택: 내부 드라이브, SSD, NAS의 폴더를 지정하면 .mp4, .mov, .webm, 메타데이터 사이드카가 있는 .mxf 등의 영상을 자동으로 찾음.
  • 2단계 — 로컬 처리: 첫 영상에서 머신러닝 모델을 내려받고, 이후 전사·화자·얼굴·사물·장면·임베딩·텔레메트리를 Mac에서 계산함.
  • 3단계 — 영상에 질문: 라이브러리를 아는 에이전트에 장면을 설명해 정확한 장면을 찾음. 예를 들어 특정 인물의 자전거 영상이나 특정 거리에서 내리막길을 타는 순간을 요청할 수 있음.
  • 첫 영상 처리 후 인터넷 연결을 끊어도 인덱싱을 계속할 수 있으며, 영상 파일을 서버에 업로드하지 않음.

가격과 편집 도구 연동

  • 공개 베타의 평생 라이선스는 249달러이며, 다운로드에 모델이 포함되고 1년간 업데이트가 제공됨.
  • 음성 전사와 화자 식별, 시각·오디오 매칭, 얼굴 라벨링, AI 에이전트, Strava 및 GPS 연동, 편집기로의 원클릭 전달이 포함됨.
  • 현재 Final Cut Pro와 DaVinci Resolve에서 작동하며, Premiere Pro는 요청을 통해서만 이용 가능함.
  • Orcah Studio는 독립형 편집기가 아니라 기존 편집 도구와 연동하는 보조 도구임.

자주 묻는 질문

  • 영상의 개인정보 보호: 기본적으로 모든 처리가 기기에서 이뤄지며, 클라우드 인덱싱을 선택하지 않는 한 영상이 업로드되지 않음.
  • Mac 사양: 최신 Apple Silicon Mac을 대상으로 설계됐으며 영상 라이브러리를 저장할 로컬 공간이 필요함. 로컬 머신러닝 모델을 위해 RAM 16GB 이상, 여유 저장 공간 20GB 이상을 권장함.
  • Windows: 현재는 Apple Silicon 및 macOS 14.0 이상을 지원함. CUDA를 사용하는 NVIDIA GPU 기반 Windows 버전은 출시 예정이며, 이메일 대기자 명단을 통해 안내함.
  • 지원 형식: .mp4, .mov, .webm, .mxf를 지원함. MXF 변환에는 DaVinci Resolve Free 버전이 필요하며, 더 많은 형식을 계속 추가할 예정임.
  • MXF 처리: MXF를 MP4로 변환한 뒤 일반 영상처럼 인덱싱함. 변환 파일은 원본 MXF가 있는 폴더에 추가 저장 공간을 사용함.
  • 외장 드라이브와 NAS: Orcah Studio가 실행되는 Mac에 마운트된 드라이브나 NAS를 사용할 수 있음. 자체 호스팅 Docker 버전은 Docker와 로컬 머신러닝 모델 실행에 필요한 하드웨어를 갖춘 NAS에서도 실행 가능함.
  • 영상 파일 보관: Orcah Studio는 영상 파일을 복사하거나 이동하지 않고 원래 위치의 파일을 참조함. MXF처럼 인덱싱 전 변환이 필요한 형식은 추가 저장 공간을 사용함.
  • 편집기 연동: Final Cut Pro와 DaVinci Resolve Free 및 Studio에 직접 통합됨. Premiere Pro는 요청 기반으로 제공됨.
  • 새 Mac으로 이전: 같은 이메일로 다시 다운로드하고 로그인하면 라이선스를 옮길 수 있음.
  • 업데이트: 라이선스는 평생 사용할 수 있으며, 구매 후 1년간 업데이트가 포함됨. 이후에도 앱은 현재 상태로 계속 작동하며 최신 버전을 원할 경우 갱신은 선택 사항임.
  • 환불: 구매 후 30일 이내에 요청하면 전액 환불을 받을 수 있음.
  • 오픈소스 버전과 데스크톱 앱: 두 버전 모두 로컬 인덱싱과 자연어 검색을 제공함. 오픈소스 버전은 Docker로 실행하고 브라우저에서 사용하며 스택을 직접 관리할 수 있음. 데스크톱 앱은 Apple Silicon에 최적화돼 Docker가 필요 없고, 편집기로 클립을 원클릭 전달하는 기능을 추가로 제공함.
  • 오픈소스 프로젝트의 지속 여부: 데스크톱 앱 출시 후에도 오픈소스 프로젝트를 계속 지원하며, 상용 앱이 오픈소스 버전의 지속적인 개발에 필요한 자금을 보탬.

기기 내 처리와 공개 개발

  • 기본 설정에서 영상은 전부 기기에서 처리되며, 사용자가 내보내거나 공유하거나 속도를 위해 클라우드 인덱싱을 선택하지 않는 한 업로드되지 않음.
  • 모델을 한 번 내려받은 뒤에는 Wi-Fi를 끄고도 인덱싱할 수 있음.
  • 오픈소스 버전의 코드를 확인하고 이슈를 제출할 수 있으며, 라이브 데모 예약과 이메일 문의도 제공함.