Project Timestamper가 Common Crawl에 보관된 웹페이지 스냅샷 3390억 건 전체의 암호학적 시각 증명을 완료했다. 각 스냅샷이 2026년 9월 26일 기준으로 수집본에 존재했다는 증거를 제공하며, 이후 변경 여부를 확인할 수 있다.

Common Crawl은 지난 18년간 웹페이지 스냅샷 3390억 건, 즉 3.39×10¹¹건을 수집했다. 전체 데이터는 10페타바이트가 넘는다. 이 수집본은 웹페이지를 각 시점의 상태 그대로 보존하며, 인터넷 아카이브의 Wayback Machine이 수행하는 연속 크롤링 다음으로 규모가 큰 웹 기록일 수 있다고 Project Timestamper는 설명한다.

Project Timestamper는 각 웹페이지 수집본의 해시를 연결해 비트코인 블록체인에 기록했다. 이에 따라 어느 시점에 수집된 페이지든 2026년 9월 26일 기준 Common Crawl에 바이트 단위로 존재했음을 증명할 수 있으며, 그 이후의 변경은 탐지할 수 있다.

개별 스냅샷을 하나씩 처리했다면 전체 시각 증명에 지나치게 오랜 시간이 걸렸을 것이다. 다행히 Common Crawl은 이미 스냅샷마다 해시를 계산하고, 최대 3000개의 색인 항목을 블록으로 묶어 두었다. Project Timestamper는 약 1억 3400만 개 블록의 해시를 몇 주 만에 계산한 뒤, OpenTimestamps 서비스를 이용해 한 번에 시각 증명을 기록했다.

증명 데이터는 스냅샷 하나를 검증하는 데 몇 초와 수백 KB의 다운로드만 필요하도록 구성됐다. 제공된 검증 도구로는 다음 명령을 실행해 스냅샷의 존재 여부를 확인할 수 있다.

```

npx tsx verify.ts --collection common_crawl_blocks --capture 0 https://en.wikipedia.org

```

성공 또는 실패 여부가 표시된다. 원문에 제시된 성공 응답은 다음과 같다.

```

Success! Capture 0 (https://en.wikipedia.org/ at 20260915155254) is in CC-MAIN-2026-39, its CDX block is attested by Bitcoin block 968666 (000000000000000000010fb95a4fa547171edc525077191cbb74dc54acfaf0aa) as of 2026-09-26T09:35:20Z, and the WARC payload SHA-1 matches 3I42H3S6NNFQ2MSVX7XZKYAYSCX5QBYJ

```

Project Timestamper는 Common Crawl Foundation의 수집본 구축·유지 작업과 공개 API 및 데이터 제공에 감사를 전했다. Common Crawl이 앞으로도 데이터를 추가하는 동안 새 자료의 시각 증명을 계속 기록할 계획이라고 밝혔다.