
Buoy는 시험에서 14개 작업을 마치는 데 2분 56초가 걸렸고, Argent는 6분 26초가 걸렸다. Buoy 팀은 인공지능 비용도 Argent의 절반 수준이었다고 밝혔다.
Buoy 팀은 자사 도구 Buoy MCP가 Argent와 도구 없이 작업한 경우보다 빠르고 비용이 적게 들었다는 시험 결과를 공개했다. 앱을 다루는 인공지능 에이전트의 작업 대기 시간을 줄이고 싶은 개발팀이 참고할 만하다. 다만 Buoy 팀이 직접 설계하고 조정한 시험이며, 독립적인 비교 결과는 아니다.
Buoy는 앱을 어떻게 다루나?
앱 내부 데이터를 읽는 방식은 앱 바깥에서 화면을 보고 조작하는 방식과 달리, 앱의 데이터와 웹 요청 내용을 바로 확인한다. 앱의 안쪽을 들여다보는 창을 떠올리면 쉽다. Buoy 팀에 따르면 이 방식은 에이전트가 화면을 추측해 조작하는 횟수와 사용하는 토큰을 줄인다.
Buoy MCP는 Buoy의 앱 조작 도구다. 무료 기능은 화면 읽기, 탭·쓸기·텍스트 입력, 단계 실행, 스크린샷, 화면 방향 전환, 로그와 웹 요청 목록 읽기를 제공한다. 앱 내부 데이터와 웹 요청 본문을 보는 기능은 Pro에 포함된다.
시험에서 무엇을 비교했나?
Buoy 팀은 Claude Code에서 Claude Sonnet 5.5를 사용해 자체 음식 주문 시험 앱의 작업 14개를 수행했다. 각 작업을 도구 없이, Argent와, Buoy MCP와 각각 세 번 실행했다. 시험 앱은 iOS 시뮬레이터에서 동작했고, 각 실행에는 150초 제한을 뒀다. 스크립트가 실행 뒤 앱 상태를 확인했다.
전체 작업 시간은 각 작업 세 번의 중간값을 더한 것이다. 작업별 표에도 세 번 실행한 가운데 시간값을 실었다.
| 작업 | 도구 없음 | Argent | Buoy MCP |
|---|---|---|---|
| 화면에서 숫자 하나 읽기 | 5.5초 | 46.4초 | 7.1초 |
| 햄버거 3개 장바구니에 넣기 | 150.3초 | 20.8초 | 15.2초 |
| 결제가 거절되는 이유 찾기 | 112.2초 | 28.8초 | 20.6초 |
| 왕관 수를 1,000,000으로 설정하기 | 81.5초 | 40.4초 | 16.9초 |
| 마지막 웹 요청 읽기 | 31.6초 | 16.0초 | 6.8초 |
| 테스트를 저장하고 두 번 실행하기 | 150.3초 | 103.8초 | 44.8초 |
| 탭 누르기 | 30.7초 | 11.7초 | 5.6초 |
| 이름 입력하기 | 75.7초 | 29.1초 | 9.4초 |
| 화면 끝까지 스크롤하기 | 71.8초 | 14.7초 | 11.3초 |
| 지도를 확대·축소하고 회전하기 | 39.2초 | 14.2초 | 7.9초 |
| 휴대전화를 가로로 돌리기 | 150.2초 | 6.0초 | 4.3초 |
| 탭 동작 3개 기록하기 | 132.8초 | 21.2초 | 12.9초 |
| 손가락 아래에 있는 항목 말하기 | 15.0초 | 7.8초 | 6.2초 |
| 화면에서 달라진 부분 찾기 | 16.9초 | 24.8초 | 6.8초 |
Buoy 팀의 집계에서 Buoy는 14개 작업을 2분 56초에 마쳤다. Argent는 6분 26초, 도구를 쓰지 않은 경우는 17분 44초였다. 실행당 인공지능 비용은 각각 2.60달러, 5.71달러, 5.92달러 이상이었다. 시간 제한에 걸려 끝나지 않은 작업은 도구 없이 실행한 경우 10건이었다.
성공한 실행은 Buoy 42회 중 41회, Argent 41회 중 40회, 도구 없이 실행한 경우 42회 중 31회였다. Buoy는 14개 작업 모두에서 Argent보다 빨랐다. 하지만 쉬운 작업에서는 도구 없이 하는 편이 나을 수 있다. 화면에서 숫자 하나를 읽는 데 도구 없는 방식은 5.5초, Buoy는 7.1초, Argent는 46.4초가 걸렸다. 화면 변화 찾기에서도 도구 없는 방식이 Argent보다 빨랐다(16.9초 대 24.8초). Buoy는 6.8초였다.
비용과 시간 절감 추정은 어떻게 나왔나?
도구 없이 실행한 경우 시간 초과로 끝난 10건은 실제 청구액이 기록되지 않았다. Buoy 팀은 실행 로그의 토큰 사용량에 Sonnet 가격을 적용해 이 비용을 1.68달러로 추산했다. 완료된 실행에 같은 계산을 적용한 값은 실제 청구액과 0.2% 이내로 일치했다고 한다. 따라서 도구 없는 방식의 비용은 최소 5.92달러라는 계산이다.
Buoy 팀은 팀 규모별 절감액도 추정했다. 개발자 1명당 월 20일, 하루 앱 작업 20건을 수행하고, 개발자 시간당 비용을 연봉 15만 달러 기준 약 72달러로 잡았다. Argent와 비교해 작업당 평균 약 15초와 8센트를 아낀다는 시험 결과를 적용했다.
| 팀 규모 | 구성 | 연간 추정 절감액 | 월간 대기 시간 절감 추정 |
|---|---|---|---|
| 소규모 | 개발자 6명(웹 2명, 모바일 2명, 백엔드 2명) | 10,857달러 | 10시간 |
| 중간 규모 | 개발자 25명(몇 개 팀) | 45,238달러 | 42시간 |
| 대기업 | 개발자 75명(50~100명 규모) | 135,715달러 | 125시간 |
이는 시험 결과를 바탕으로 한 추정치이지 측정값이나 보장액은 아니다. 도구를 쓰지 않는 경우와 비교하면 소규모 팀은 월 약 42시간과 3,238달러를 아낄 수 있다고 Buoy 팀은 계산했다.
Buoy 팀은 시험에 15개 작업을 계획했지만, 앱의 오래된 코드 변경으로 세 도구 모두 이미 처리한 작업 하나를 제외했다. Argent는 검사 스크립트가 실패한 실행 하나를 점수에 포함하지 않아 총 41회로 집계됐다. Buoy는 해당 작업들에 맞춰 조정했다. 시험에는 Buoy의 무료 도구와 Pro 도구가 함께 쓰였으며, 무료 기능만 따로 측정한 결과는 없다. Argent는 무료 오픈소스 도구라고 소개됐다.
Buoy 팀은 Pro가 앱 내부 정보를 확인하는 기능을 제공하며 지원·품질보증·제품·개발 업무에 활용할 수 있다고 설명한다. 가격 페이지에는 Solo 월 30달러, Business 좌석당 월 60달러라고 적혀 있다. Buoy 가격 안내와 Buoy MCP 무료 기능 안내를 확인할 수 있다.
시험 결과를 적용하려면 사용 중인 에이전트와 앱 작업이 이 조건에 가까운지 살펴봐야 한다. Buoy 팀은 모든 실행 로그와 도구 호출·시간·비용 기록을 보관하고 있으며, 수치를 확인하고 싶다면 연락하라고 안내한다. Argent 저장소와 README와 Argent 도구 문서는 2026년 10월 9일 기준으로 확인했다고 적었다.
원문은 Buoy 무료 기능만 사용했을 때의 실행 시간과 비용, 다른 작업이나 앱에서의 결과를 밝히지 않는다. 팀별 절감액은 실측값이 아니며, 시험 도구를 직접 조정한 Buoy 팀의 비교 결과다.
댓글 (0)
로그인하면 이 기사에 내 생각을 남길 수 있어요