Vercel Daemons로 Vercel에서 상시 백그라운드 작업을 실행한다

Vercel이 상시 백그라운드 워커를 내놨습니다. 새 기능 Vercel Daemons는 HTTP 서버 없이 큐나 다른 시스템에서 작업을 가져와 처리합니다. 웹 요청을 기다리지 않는 프로세스도 같은 플랫폼에 배포할 수 있다는 점이 눈에 들어옵니다. 요청을 처리하는 앱뿐 아니라, 작업을 찾아 실행하는 프로세스도 배포 대상으로 다루게 됐습니다.

Vercel의 Python 앱 정식 지원과 Daemons는 앱 배포 범위를 상시 작업까지 넓히는 같은 움직임입니다. 앱과 별도 작업자를 한 플랫폼에서 관리할 수 있다면 배포 환경을 나누는 부담도 줄어들 수 있습니다.

웹 요청을 받아 실행하는 배포에 더해, 큐를 살피며 작업을 가져가는 워커도 같은 Vercel 환경에서 실행할 수 있습니다. Vercel Queues, Celery, BullMQ, RabbitMQ, Kafka 소비자를 지원합니다. Temporal·Cadence 워커와 CI 러너도 대상입니다. 큐 소비자뿐 아니라 워크플로 워커와 CI 러너까지 지원 대상으로 든 점이 흥미롭습니다.

초기 버전에는 영구 파일 시스템 저장소가 없고, 워커가 HTTP 요청을 처리하지도 못합니다. 파일에 상태를 남기는 작업이라면 외부 저장소를 붙여야 하고, 같은 프로세스가 API 요청까지 맡는 구조라면 지금은 서비스를 나눠야 합니다. 큐에서 작업을 받아 처리하는 데 집중하는 워커와는 잘 맞지만, 이 두 조건은 배포 방식을 바꿉니다.

기존 큐 소비자 하나를 골라 Daemons에 배포해 보십시오. 인스턴스를 줄이거나 재시작할 때 종료 정리와 작업 처리가 예상대로 이어지는지, 관측 화면에서 활동과 오류를 확인하십시오.

마지막으로 웹 요청 없이 계속 돌아야 하는 작업을 별도 서버에 올렸을 때, 운영에서 가장 손이 많이 간 부분은 무엇이었습니까?