TL;DR

  • AI로 코드 제출 파이프라인을 가속한 한 은행 팀에서 검토 시간은 약 441%, 코드 제출 건당 사고는 약 243% 늘었으며, 병목을 넓히지 않은 가속은 가치가 아니라 다음 단계의 대기열로 이어짐.
  • Faros AI의 2026년 연구는 4,000개 이상 팀의 개발자 22,000명을 분석했으며, 여유 용량이 생기는 것과 그 용량이 가치로 실현되는 것은 다르다는 논지를 뒷받침함.
  • 등록된 AI 활용 사례 수보다, 제작자 외의 다른 사람이 정기적으로 사용하는 AI 산출물이 몇 개인지 묻는 두 번째 사용자 테스트가 실질적인 도입 지표임.
  • 자연어 인터페이스는 기존 로우코드·시민 개발의 번역 장벽을 낮추지만, AI 개발의 새로운 실패 양상은 관리되지 않는 산출물이 과도하게 늘어나는 것임.
  • 토큰 비용은 여유 용량에 따라붙는 비용이므로, 조직은 비용 규율을 설계 단계부터 적용하고 실제 병목과 산출물 활용 여부를 점검해야 함.

병목은 사라지지 않고 이동함

  • 한 은행의 한 팀은 AI로 코드 제출 파이프라인을 가속했지만 검토 시간은 약 441% 늘었고, 코드 제출 건당 사고는 약 243% 늘어남.
  • 팀이 느려진 것이 아니라, 잘못된 단계에서 더 빨라진 결과임. 파이프라인 다음 단계에 도달한 속도는 사라지지 않고 대기열로 다른 곳에 나타남.
  • IT Revolution의 *Enterprise Technology Leadership Journal* 2026년 가을호에 실린 논문 *AI-Driven Organizational Value*는 이 사례와 Faros AI의 2026년 연구를 바탕으로 논지를 전개함. 연구 범위는 4,000개 이상 팀의 개발자 22,000명임.
  • 논문의 핵심 주장은 여유 용량이 확보된 것과 가치가 실현된 것은 다르며, 대부분 조직은 이 등식에서 중요하지 않은 쪽을 측정한다는 것임.
  • 논문은 병목이 코드를 입력하는 속도에 있었던 적이 없다고 설명함.

“병목은 애초에 코드를 입력하는 일이 아니었다. 코드는 한계가 가장 쉽게 드러나고 가장 적은 비용으로 공략할 수 있는 곳이었을 뿐이다.”

  • 코드 검토 단계를 정리하면 대기열은 검증으로 이동하고, 검증을 정리하면 운영으로 이동함. 배포되는 모든 것을 책임질 담당자가 필요하기 때문임.
  • 그다음에는 무엇을 만들 가치가 있는지 결정하는 비즈니스의 역량과, 변화 자체를 받아들일 수 있는 고객의 역량이라는 가장 어려운 단계에 병목이 놓임.
  • 기업의 한계를 정하는 것은 엔지니어의 입력 속도가 아니라 속도를 안전하게 흡수하는 전체 시스템의 역량임. 나머지 파이프를 넓히지 않고 한 기능만 가속하는 조직은 속도가 아니라 혼잡을 사들이는 셈임.

모두가 주목하는 지표는 잘못된 지표임

  • 리더십 팀에 AI 도입 현황을 물으면 대개 AI를 사용하는 사람 수나 등록된 활용 사례 수를 제시함.
  • 논문은 등록된 활용 사례를 세는 일을 AI 시대에 라이선스 좌석 수를 세는 것과 같다고 지적함. 그 수치는 역량이 존재한다는 사실은 보여주지만, 그 역량이 필요한 사람에게 도달했는지는 알려주지 않음.
  • 논문이 더 정직한 측정 수단으로 제시하는 것은 두 번째 사용자 테스트임. AI로 만든 산출물 가운데 제작자가 아닌 다른 사람이 정기적으로 사용하는 것은 몇 개인가를 묻는 방식임.
  • 이 기준은 한 사람에게만 유용한 개인 스크립트와 실제 조직 역량을 구분함. 총량뿐 아니라 분포도 살펴볼 필요가 있음.
  • 소수의 열성 사용자가 개발을 독점하는 것은 도입 신호임. 개발이 재무·법무·운영 전반에 퍼지는 것은 역량이 실제로 누적되고 있다는 최적화 신호임.
  • 자연어 인터페이스가 중요한 이유는 과거 시도를 무산시킨 장벽을 조용히 없앴기 때문임. 로우코드 플랫폼과 시민 개발 프로그램은 약 10년 전에도 거의 같은 약속을 내걸었지만, 대부분 방치된 앱의 무덤을 만들었음.
  • 논문에 따르면 이번에는 이전 시도와 달리, 당시에는 제작자가 캔버스·스키마·제약된 언어 같은 정형화된 시스템을 배워야 했음. 이 장벽은 문제를 없애기보다 다른 곳으로 옮겼고, 도메인 지식이 가장 깊은 사람일수록 그 장벽을 넘을 가능성이 가장 낮았음.
  • 자연어는 번역 단계를 없애며, 이제 명세 자체가 산출물임. 이는 새로운 실패 양상도 예고함. 시민 개발은 중요한 산출물을 너무 적게 만드는 방식으로 실패했지만, AI는 관리되지 않는 산출물을 지나치게 많이 만들어 실패할 수 있음.

가치는 비용을 동반함

  • 이 여유 용량은 공짜가 아니며, 논문은 그에 수반되어야 할 규율을 분명히 밝힘.

“AI 청구서는 누군가가 내린 결정의 합계다. 비용 규율이란 그 결정들을 의도적으로 내리는 일이다.”

  • 토큰은 이 시대의 소비 단위이며, 확보된 여유 용량의 시간마다 비용이 붙음.
  • 비용을 사후 처리할 문제, 즉 분기 말에 정산할 항목으로 취급하면 확보한 여유 용량이 아무도 계획하지 않은 비용 항목으로 조용히 바뀜. 비용은 처음부터 설계 결정으로 다뤄야 함.

월요일 아침에 할 일

  • 현재 리더십 대시보드에 표시되는 AI 도입 지표를 골라 두 번째 사용자 질문을 던져야 함. 만들어지는 것 가운데 제작자가 아닌 다른 사람이 실제로 사용하는 것은 몇 개인가를 확인해야 함.
  • 그 수치를 모른다면 그것이 바로 격차임.
  • 같은 호에 실린 논문의 동반 글 *When Coding Is Free, Where Is the Bottleneck?*은 이 글에서 병목을 찾아낸 다음, 확대해야 할 작업이 어디인지 살펴봄.

출처

  • 이 글은 Rodo Abad, Jason Cox, Jeff Gallimore, Betty Junod, Tapabrata Pal, Brian Scott, Max Reele이 작성한 *AI-Driven Organizational Value*를 바탕으로 하며, 논문은 IT Revolution의 *Enterprise Technology Leadership Journal* 2026년 가을호에 게재됨.