unleashed로 ChatGPT 앱에서 안드로이드폰을 제어한다

한 오픈소스 프로젝트가 ChatGPT와 안드로이드 앱을 연결해 휴대전화를 제어합니다. 대화가 답변으로 끝나지 않고 앱을 여는 동작으로 이어진다는 점이 흥미롭습니다. 동시에 사용자가 기기 권한과 계정 연결을 함께 맡겨야 하므로, 설치 버튼보다 권한 화면이 더 오래 마음에 남습니다.

SealGate는 안드로이드폰을 통해 AI 에이전트가 앱과 연결 기기를 조작하는 실험을 했습니다. unleashed는 ChatGPT 플러그인과 안드로이드 앱을 이어 AI 요청을 휴대전화 동작으로 가져옵니다. 사용자가 설치와 접근성 권한, 터널 연결을 직접 설정해야 한다는 점도 구체적으로 보여줍니다.

반가운 변화는 ChatGPT의 요청이 휴대전화 동작으로 이어진다는 점입니다. 프로젝트는 계산기를 열어 1+1을 계산하는 요청을 예시로 듭니다. 앱을 찾아 직접 여는 단계를 줄일 수 있습니다.

앱 스토어가 아닌 APK로 설치하고, 해당 출처의 앱 설치를 허용한 뒤 접근성 기능(accessibility)을 켜야 합니다. 같은 OpenAI 계정으로 OpenAI Platform에 들어가 터널(tunnel)과 비밀 키(secret key)를 만듭니다. 키 권한을 Restricted로 설정한 뒤 Tunnels의 Read와 Use를 활성화합니다. 비밀 키는 생성할 때만 확인할 수 있어 안전하게 보관해야 합니다. 앱 설치와 화면 제어 권한, 계정 키를 함께 맡기는 설정인 만큼 프로젝트 출처부터 확인하십시오.

시험한다면 먼저 APK의 출처와 요청 권한을 확인하고, 개인 정보가 적은 안드로이드 기기에서 접근성 기능을 허용하십시오. Restricted 키에 Tunnels의 Read와 Use 권한을 설정해 연결하십시오. 그런 뒤 ChatGPT에 계산기를 열고 1+1을 계산하게 해 보십시오. 계산기가 실행되고 결과가 요청대로 나오는지 확인하면 연결이 작동하는지 알 수 있습니다.

새 앱을 휴대전화에 설치할 때 출처와 권한 중 무엇을 먼저 확인하십니까?