TL;DR

  • Gemini 3.8 Live with Live Avatar가 Gemini Enterprise에서 정식 출시돼, 웹·모바일·인터랙티브 키오스크용 대화형 비디오 에이전트에 아바타 기능을 제공함.
  • 실시간 음성 대 음성, 대화 맥락을 유지하는 끼어들기 처리, 백그라운드 도구 호출을 통해 자연스러운 대화와 작업 수행을 지원함.
  • 97개 언어 이해·발화와 자동 언어 감지, 실시간 카메라 피드·화면 공유·오디오를 함께 처리하는 시각 이해 기능을 제공함.
  • 미국·유럽 엔드포인트와 프로비저닝 처리량, 엔터프라이즈 규정 준수, 엄격한 데이터 거버넌스를 지원하며, 맞춤 아바타는 허용 목록 등록이 필요함.
  • 생성된 오디오·비디오에 감지하기 어려운 SynthID 워터마크를 삽입하며, Cox Automotive·Equal AI·Salesforce·Specs가 활용 사례와 평가를 공유함.

Gemini 3.8 Live with Live Avatar 정식 출시

  • 지난주 Gemini 3.8 Live와 Gemini 3.8 Live Extended Thinking 발표에 이어, Gemini 3.8 Live with Live Avatar가 Gemini Enterprise에서 정식 출시됨. Google Cloud Next 2026에서 처음 공개된 기술이 엔터프라이즈 프로덕션에 공식 제공됨.
  • 엔터프라이즈 음성 인공지능(AI)의 우선순위가 속도와 비용 지표를 넘어 각 상호작용의 품질 향상으로 이동함. Gemini 3.8 Live는 유연하고 반응성 높은 대화를 위한 네이티브 음성 대 음성 기반을 제공하며, Live Avatar는 웹·모바일·인터랙티브 키오스크의 대화형 비디오 에이전트에 시각적 상호작용 기능을 더함.
  • 제공 기능은 다음과 같음.
  • 비디오 아바타: Live Avatar로 입 모양이 동기화된 대화형 비디오 아바타 생성 가능. 맞춤 아바타 기능은 허용 목록 등록을 통해서만 이용 가능.
  • 유연한 대화: 네이티브 음성 대 음성 처리로 대화 맥락이나 백엔드 트랜잭션을 놓치지 않으면서 끼어들기 이후 자연스럽게 대화를 이어감.
  • 도구 호출: 대화를 계속하면서 도구와 API 호출을 백그라운드에서 실행하고, 작업이 끝날 때까지 요청을 확인하고 대화를 이어감.
  • 언어 장벽 완화: 97개 언어를 이해하고 말하며 자동 언어 감지를 제공함.
  • 실시간 시각 이해: 실시간 카메라 피드와 화면 공유를 오디오와 함께 동시에 처리해 에이전트가 사용자가 보는 내용을 파악하도록 지원함.
  • Gemini 3.8 Live Extended Thinking은 비공개 프리뷰 상태이며, Gemini 3.8 Live with Live Avatar는 미국 및 유럽 엔드포인트, 프로비저닝 처리량, 엔터프라이즈 규정 준수, 엄격한 데이터 거버넌스와 함께 제공됨. Gemini Enterprise에서 모델과 기능을 사용하고 API로 개발을 시작할 수 있음.

신뢰와 투명성

  • 신원 보호와 오용 방지를 위해 고객은 엄선된 사전 제작 아바타 라이브러리를 배포할 수 있으며, 맞춤 아바타 생성은 엄격한 엔터프라이즈 허용 목록 등록 및 검증 절차를 거침.
  • 생성된 모든 오디오·비디오 스트림에 감지하기 어려운 SynthID 워터마크가 포함돼 AI 생성 콘텐츠의 투명성과 검증 가능성을 보장함.

Gemini 3.8 Live with Live Avatar 시연 3종

  • 1. 인터랙티브 맞춤 아바타: 시스템 지침을 추가하고 참조 사진 한 장과 오디오 파일 샘플을 업로드하는 단계별 과정으로 맞춤 아바타를 만드는 시연임.
  • 2. 음성 중심 보험금 청구 접수에서의 실시간 비디오 이해: 사용자가 말하면서 카메라로 손상 부위를 보여주면 청구 기록이 진행에 맞춰 작성됨. 백그라운드의 ADK 에이전트 팀은 보험 약관을 확인하고 접수 규칙을 적용하며 손해사정인용 자료를 구성함. 오픈소스 코드도 제공됨.
  • 3. Google ADK와 Gemini Live API를 이용한 실시간 음성 AI 에이전트: 개발자가 에이전트를 정의하고 실행기와 세션 메모리를 관리하며, 기존 음성-텍스트 변환 파이프라인 없이 실시간 오디오를 Gemini Live API로 직접 스트리밍하는 방식을 보여줌.

고객의 혁신 사례

  • Cox Automotive는 Autotrader용 AI 기반 쇼핑 도우미를 구축함. 실시간 화면 강조 표시와 도구 호출 기능으로 자연스러운 대화를 통해 차량 검색, 비교, 금융 이용을 실시간으로 안내함.

“쇼핑객은 필터와 메뉴를 따라가는 대신 필요한 것을 자기 말로 설명하기를 점점 더 기대함. Autotrader의 새로운 대화형 AI 아바타는 자연스러운 대화를 적절한 차량 재고와 연결해 차량 탐색 경험을 제공함. 모든 소비자 상호작용이 Cox Automotive 데이터의 깊이 전체를 활용하는 커넥티드 인텔리전스 비전을 향한 또 다른 단계임.” — Marianne Johnson, Cox Automotive 부사장 겸 최고제품책임자

  • Equal AI는 사용자를 알고 사용자의 언어로 말하며 사용자의 편에 서는 개인 AI를 구축 중임. 인도 9개 언어로 매일 100만 건이 넘는 실시간 통화를 처리하며, Gemini 3.8 Live를 통해 끼어들기 처리, 다국어 대화, 도구 호출의 신뢰성이 개선됨.

“이 AI는 통화에 답하기만 하는 것이 아니라 사용자를 위해 일을 처리함.” — Akhilesh Damaraju, Equal AI 최고경영자

  • Salesforce AI Research와 Google은 Gemini 3.8 Live와 Agentforce를 결합해 지능형 서비스의 가능성을 재구성하고, 실시간 멀티모달 기능과 에이전트형 AI를 활용해 첫 접촉부터 해결까지 더 풍부하고 직관적인 고객 경험을 만드는 새로운 방식을 탐색함.

“Gemini 3.8 Live와 Agentforce가 함께하게 돼 기쁨. 두 기술의 결합은 지능형 서비스에서 가능한 범위를 재구성함.” — Bob Van Osten, Agentforce 제품 담당 부사장

  • Specs는 테스트와 벤치마킹 전반에서 Gemini 3.8 Live에 깊은 인상을 받음. 음성 활동 감지(Voice Activity Detection) 업데이트와 전반적인 지연 시간 개선이 큰 진전이며 SPECS 플랫폼에서 최고 품질의 AI 어시스턴트를 제공하는 역량을 강화함.

“음성 활동 감지 업데이트와 전반적인 지연 시간 개선은 큰 진전임.” — Eric Walsh, Specs 소프트웨어 엔지니어

지금 개발 시작

  • Gemini 3.8 Live with Live Avatar를 엔터프라이즈 고객이 이용할 수 있음.
  • Gemini Enterprise에서 모델 사용
  • 통합 가이드를 위해 Gemini Live API 문서 확인
  • 가격 페이지에서 요금 확인
  • Gemini Live를 활용한 실시간 양방향 스트리밍 앱 구축을 위한 Skill
  • 특화된 모듈형 오디오 기능이 필요한 애플리케이션은 다음 오디오 모델을 확인할 수 있음.
  • Gemini 3.5 Transcribe
  • Gemini 3.5 Live Translate
  • Gemini 3.8 Flash-Lite TTS 및 Gemini 3.8 Flash TTS
  • 프로비저닝 처리량 활성화, 맞춤 배포 아키텍처 논의, 맞춤 아바타 허용 목록 등록을 위해 Google Cloud 영업 담당자에게 문의할 수 있음.