목차
수천만 레코드의 재빌드를 줄인 Cloudflare Zone Builder (2026-11)
원문 정보
- 원문: How we halved DNS build delay and cut memory use by 85%
- 매체 · 게시일: The Cloudflare Blog · 2026-11-02
- 저자: Alex Fattouche
- 원문 내용을 바탕으로 재구성한 요약입니다.
설정 하나에 수천만 레코드를 읽던 시절
영역 설정 하나를 바꿨는데 수천만 레코드를 다시 읽어야 했습니다. Cloudflare의 Zone Builder가 영역 전체를 다시 빌드했기 때문입니다. Universal SSL을 켜거나 끄는 경우를 예로 들면, 메타데이터가 바뀌고 영역 apex의 CAA 레코드가 달라질 수 있습니다. apex는 example.com처럼 하위 이름이 붙지 않은 도메인이고, CAA 레코드는 인증 기관이 해당 도메인의 인증서를 발급해도 되는지 알려 줍니다. 이런 변경에도 영역의 모든 레코드를 읽고 비교하는 비용을 치렀습니다.
처리할 이벤트도 늘었습니다. 2022년 DNS 전파 파이프라인을 소개한 글에서 Zone Builder가 받던 레코드 변경은 초당 약 250건이었지만, 지금은 약 700건입니다. 여기에 영역 설정 변경 같은 이벤트가 약 100건 더 들어옵니다. 그래도 더 큰 문제는 건수보다 작업의 크기였습니다. 일부 이벤트는 영역이 커지는 만큼 더 많은 일을 요구하는데, 이제 레코드가 2,000만 개를 넘는 영역도 있고 앞으로 수억 개까지 늘어날 것으로 예상합니다.
레코드 변경에서는 이미 답을 찾은 경험이 있었습니다. 2022년의 레코드 단위 빌드는 전체 빌드보다 평균 150배 빨랐고, 레코드 100만 개짜리 테스트 영역에서는 4,250배 빨랐습니다. 당시 글에서 다음 과제로 남긴 것이 영역 설정에도 같은 방식을 적용하는 일이었습니다. 이번 변경은 그 후속입니다.
해법은 바뀐 설정에 필요한 부분만 다시 만드는 것이었습니다. 어려운 일은 어디까지 줄여도 안전한지 증명하는 쪽에 있었습니다. Cloudflare는 그 범위를 정하는 타깃 빌드 플래너와 같은 영역의 작업을 합치는 통합 스케줄러를 만들었습니다. 너무 많이 읽으면 용량을 낭비하고, 너무 적게 읽으면 엣지에 오래되거나 잘못된 DNS 데이터가 남습니다.
Quicksilver에 쓰기 전까지의 빌드
DNS 영역은 한 도메인의 레코드와 설정을 모은 단위입니다. 고객이 DNS Records API나 대시보드에서 레코드를 바꾸거나 다른 Cloudflare 서비스가 영역 설정을 바꾸면, 변경은 데이터베이스에 저장됩니다. 데이터베이스 변경이나 다른 시스템이 Kafka 이벤트를 만들고, DNS Kafka Aggregator가 여러 토픽의 이벤트를 모아 Zone Builder로 보냅니다.
Zone Builder는 필요한 데이터를 읽어 권한 DNS 서버가 사용하는 키로 변환합니다. 레코드와 영역 설정을 결합하고 DNS 서빙 규칙을 적용한 결과입니다. 데이터베이스 행을 그대로 복사하는 작업과는 다릅니다. 만들어진 키를 분산 키-값 저장소인 Quicksilver의 기존 키와 비교해 바뀐 것만 쓰면 빌드가 끝나고, 이후 Quicksilver가 변경을 Cloudflare 네트워크 전체로 전파합니다.
처음의 전체 빌드 방식에는 분명한 장점이 있었습니다. 영역이 왜 바뀌었는지 몰라도 현재 데이터베이스 상태에서 원하는 결과를 다시 만들면 됐습니다. 영역과 설정, 모든 DNS 레코드를 읽고 키로 변환한 뒤 기존 키와 비교합니다. 오래된 키를 지우고 바뀐 키를 쓰며 메타데이터도 갱신합니다.
쓰기는 바뀐 키에만 한정됩니다. 하지만 그 결과를 얻기까지 모든 레코드를 읽고 인코딩하고 비교하며, 영역 전체를 메모리에 유지해야 했습니다. 작은 영역에서는 저렴한 작업입니다. 수천만 레코드가 있는 가장 큰 영역은 메모리에 들어가지도 않습니다.
같은 도메인을 가리키는 여러 영역
변경 범위를 좁히려면 먼저 레코드와 메타데이터의 관계를 알아야 합니다. Quicksilver의 레코드 키는 한 영역 안의 특정 DNS 이름에 대한 응답을 담습니다. 더 작은 공유 메타데이터 키는 권한 DNS 서버가 그 영역을 사용하는 방법과 네임서버·와일드카드 같은 특수 레코드의 위치를 알려 줍니다.
레코드 키는 영역마다 따로 있지만, 같은 도메인 이름을 가진 Cloudflare 영역들은 메타데이터 키 하나를 공유합니다. 이 키는 디렉터리 역할을 합니다. 권한 DNS 서버가 질의에 답할 때 사용할 수 있는 내부 영역 ID가 여기에 들어 있습니다.
고객에게 보이는 도메인은 하나여도 내부 영역 객체는 여럿일 수 있습니다. 온보딩이나 오프보딩 같은 수명 주기 변경 중에 잠시 생기는 상황입니다. Cloudflare는 우선순위 정책에 따라 게시할 영역을 제한된 수만큼 고릅니다. 예를 들어 example.com에 영역 101, 202, 303, 404가 있고, 메타데이터 키에는 101, 202, 303만 들어 있다고 가정합니다. 영역 404도 존재하지만 게시 대상으로 선택되지는 않은 상태입니다.
이때 영역 202의 www.example.com에서 TXT 레코드를 바꾸면 영역 202의 레코드 키만 달라집니다. 공유 메타데이터는 그대로입니다. 네임서버나 와일드카드를 바꾸면 이야기가 달라집니다. 메타데이터 키에도 이들의 정보가 들어 있으므로 레코드와 메타데이터를 함께 갱신해야 합니다. 설정 변경을 작게 처리하려면 이런 의존 관계까지 알아야 했습니다.
바이트 단위의 일치를 요구하는 타깃 빌드
Cloudflare는 이벤트 생산자부터 고쳤습니다. 바뀐 영역 필드와 설정을 이벤트에 넣고, 이전 값과 새 값을 알 수 있으면 함께 실었습니다. 이어 DNS 출력을 만드는 코드에서 각 설정을 추적해 어느 이름의 레코드와 공유 메타데이터에 영향을 주는지 분류했습니다.
판단 기준은 엄격합니다. 타깃 빌드가 쓰는 모든 키는 전체 빌드가 썼을 값과 바이트 단위로 같아야 합니다. 이를 증명할 수 없으면 전체 빌드를 선택합니다. 플래너가 고르는 작업 범위는 아래와 같습니다.
| 빌드 유형 | 처리 범위 | 해당 변경 |
|---|---|---|
| 리소스만 | 특정 DNS 이름의 레코드만 재빌드 | 보통의 A, AAAA, TXT, CNAME 변경 |
| 리소스와 메타데이터 | 특정 이름의 레코드와 공유 메타데이터 재빌드 | 네임서버·와일드카드 변경 |
| apex와 메타데이터 | 영역 apex와 메타데이터 재빌드 | Universal SSL 같은 설정에서 선택 가능한 경로 |
| 퍼지 | 더 이상 게시하지 않을 영역 제거 | 게시를 중단해야 하는 영역 |
| 전체 영역 | 모든 레코드 재빌드 | 더 작은 범위로 처리해도 안전한지 입증되지 않은 변경 |
여기서 리소스는 특정 DNS 이름을 뜻합니다. 새 값을 쓰는 것만으로는 작업이 끝나지 않습니다. 이전 상태도 지워야 합니다. 레코드 이벤트에는 삭제된 레코드와 갱신 전 버전이 들어 있고, Zone Builder는 재빌드하는 이름 아래의 기존 Quicksilver 키를 훑어 새 빌드가 쓰지 않은 키를 제거합니다. 이 방식은 2022년 레코드 단위 빌드에서도 사용했습니다.
이벤트를 자세히 만든다고 모든 모호함이 사라지지는 않았습니다. 일부 데이터베이스 함수는 타임스탬프만 갱신해 “이 영역의 무언가가 바뀌었다”는 신호를 남깁니다. 단순한 관리용 갱신일 수도 있고, 다른 곳의 데이터가 바뀌었으니 다시 읽으라는 뜻일 수도 있습니다. 이벤트에서는 둘이 똑같이 보입니다. 호출자와 목적을 알아내기 전까지는 이런 변경도 전체 빌드를 거칩니다.
세부 정보가 빠졌거나 알 수 없는 이벤트도 마찬가지입니다. 영역 어디의 레코드에든 영향을 줄 수 있는 변경은 모든 레코드를 확인해야 합니다. 플래너는 무엇이 바뀌었는지 모른다는 이유로 작업 범위를 줄이지 않습니다.
이 원칙 때문에 2022년에 세웠던 전체 빌드 제거 계획도 달라졌습니다. 영역을 처음 게시할 때는 모든 레코드를 써야 하고, 작은 영역에서는 전체 빌드 자체가 저렴합니다. 전체 빌드를 완전히 없애는 일은 현실적이지도 유용하지도 않다는 판단입니다. 앞으로도 더 많은 이벤트의 영향을 파악해 타깃 빌드로 옮기겠지만, 전체 빌드는 필요한 경로로 남습니다.
메모리에 담을 수 없는 초대형 영역
전체 빌드로 돌아간다는 원칙에는 의도적인 예외가 있습니다. 정해 둔 레코드 수 임계값을 넘는 영역입니다. 전체 빌드는 데이터베이스의 모든 레코드와 Quicksilver의 기존 키를 한꺼번에 메모리에 담는데, 가장 큰 영역에서는 이 작업을 끝낼 수 없습니다. 재시도를 이어 가는 동안 같은 Kafka 파티션의 다른 변경까지 막습니다.
이 영역들은 전체 빌드로 확대하지 않습니다. 대신 apex와 메타데이터, 대기 중인 이벤트가 가리키는 모든 이름을 다시 빌드합니다. 끝나지 못하는 전체 빌드가 다른 변경을 계속 지연시키는 상황을 피하려고 받아들인 절충입니다.
위험을 줄이는 조건도 있습니다. 전체 빌드가 필요해지는 사례 중 상당수는 같은 이름을 여러 영역이 공유하는 경우인데, 영역 홀드가 그 이름을 다른 계정에 추가하지 못하게 막습니다. 그래도 남는 드문 사례는 별도로 다룹니다. 예를 들어 영역을 다른 네트워크에서 활성화하는 경우에는 영역 안의 개별 이름을 수동으로 다시 빌드할 수 있습니다.
실행 직전에 다시 읽는 게시 상태
이벤트가 알려 주는 것은 과거입니다. 빌드가 대기하는 사이 다른 이벤트가 들어오고 데이터베이스 상태도 바뀝니다. 그래서 이벤트로 만든 작업 목록을 그대로 실행하지 않습니다. 먼저 보수적으로 계획을 세우고, 쓰기 직전에 최신 게시 상태를 읽어 다시 판단합니다.
이때 확인하는 정보는 현재 영역 설정, 이 Zone Builder가 해당 네트워크에 영역을 게시해야 하는지, 같은 이름의 어떤 영역 ID가 메타데이터 키에 들어가야 하는지입니다. 여기서 네트워크는 한 환경을 위한 격리된 Quicksilver 사본입니다. 각 Zone Builder 배포는 한 네트워크에 쓰며, 영역은 일부 네트워크에서만 활성화될 수 있습니다. Cloudflare 글로벌 네트워크와 China Network에서 함께 서비스되는 영역이 그 예입니다.
새로 읽은 상태에 따라 작업도 달라집니다. 전체 영역을 처리해야 하는 기능이 생겼다면 타깃 빌드의 범위를 전체 빌드로 넓힙니다. 해당 네트워크에 더 이상 게시하면 안 되는 영역은 퍼지 대상입니다. 변경을 일으킨 영역이 이제 메타데이터 키에 포함되지 않는다면 빌드를 건너뜁니다.
메타데이터를 쓸 때도 최신 후보 목록으로 키 전체를 다시 만듭니다. 오래된 사본의 일부만 고치지 않습니다. 쓰는 순서도 정해져 있습니다. 변경을 일으킨 영역의 레코드를 먼저 쓰고, 그 레코드를 가리키는 메타데이터를 나중에 씁니다.
최신 상태는 읽기 전용 데이터베이스 복제본에서 가져옵니다. 빌드가 고객의 쓰기와 경쟁하지 않게 하려는 선택입니다. 그런데 Kafka 전달과 데이터베이스 복제는 서로 독립적으로 진행되므로, 이벤트가 도착했어도 복제본에는 변경이 아직 보이지 않을 수 있습니다. DNS Kafka Aggregator는 정상적인 복제 지연을 감당할 만큼 이벤트를 늦춰 보냅니다. 마지막 데이터베이스 검사에서도 복제본이 뒤처져 있으면 읽기를 거부합니다.
작업을 합쳐도 남겨 두는 Kafka 메시지
작업 범위를 줄인 뒤에는 스케줄러를 하나로 합쳤습니다. 이전에는 레코드 작업과 전체 영역 작업이 서로 다른 스케줄러를 썼습니다. 각 스케줄러가 자기 작업끼리는 합칠 수 있었지만, 서로의 작업을 묶지는 못했습니다. 새 플래너가 무엇을 빌드할지 정하면 통합 스케줄러가 실행 시점을 정합니다.
빌드가 시작되기 전에 같은 영역의 이벤트가 여럿 도착하면 필요한 작업을 합칩니다. www.example.com의 A 레코드가 바뀌면 그 이름을 다시 만들어야 합니다. 이어 *.example.com의 와일드카드가 바뀌면 그 이름과 공유 메타데이터도 갱신해야 합니다. 스케줄러는 이를 두 이름과 메타데이터를 처리하는 빌드 하나로 묶습니다.
병합할 때 작업 범위는 넓어지기만 합니다. 전체 영역이 필요한 이벤트가 들어 있으면 합친 빌드도 전체 빌드가 됩니다. 퍼지는 모든 재빌드보다 우선합니다. 원하는 최종 상태가 그 영역을 더 이상 게시하지 않는 것이기 때문입니다.
개별 이름이 작업 목록에서 사라져도 Kafka 메시지는 남아야 합니다. 스케줄러는 수행할 DNS 작업과 확인 응답을 기다리는 메시지를 따로 추적하고, 재시도할 때도 모두 유지합니다. 전체 빌드나 퍼지가 개별 이름 목록을 더는 요구하지 않더라도 결과를 안전하게 쓸 때까지 관련 메시지를 보관합니다.
메시지 처리는 빌드 완료만으로 끝나지 않습니다. Kafka는 메시지를 순서가 있는 파티션으로 나누고, 파티션마다 앞선 메시지가 모두 끝났음을 나타내는 커밋 오프셋 하나를 저장합니다. 끝나지 않은 작업을 넘어 커밋하면 재시작 후 고객의 변경을 잃을 수 있습니다. 워커가 남아 있어도 느린 빌드 하나가 다른 고객의 변경 처리를 지연시키는 이유입니다.
Cloudflare는 이전 Secondary DNS 글에서 소개한 소프트 커밋을 사용합니다. 순서와 다르게 끝난 빌드는 메모리에서 완료로 표시하되, Kafka의 커밋 위치는 앞선 메시지가 모두 끝난 뒤에만 옮깁니다. 메시지 2가 아직 실행 중이라면 메시지 3부터 n까지 끝났어도 커밋할 수 없습니다. 이때 Zone Builder가 재시작하면 메모리의 완료 표시가 사라지고, Kafka는 메시지 2부터 n까지 다시 전달합니다. 변경을 잃는 것보다 이미 끝낸 작업을 반복하는 쪽을 택했습니다.
타깃 빌드는 가장 오래된 메시지가 미완료로 남는 시간을 줄입니다. 바쁜 영역 하나가 워커를 모두 차지하지 않도록 실행 간격도 둡니다. 한 번 빌드한 영역은 Cloudflare 플랜별로 다른 재빌드 간격을 기다리고, 그동안 도착한 변경은 다음 작업에 합칩니다. 오래 기다린 작업이 Kafka 파티션을 지나치게 오래 막을 때는 이 간격보다 먼저 실행할 수 있습니다. 영역 락과 재시도 지연은 계속 적용되므로, 실패하는 빌드가 쉬지 않고 재실행되지는 않습니다.
이 방식은 2022년에 계획했던 별도 배치 시스템도 불필요하게 만들었습니다. 배치를 채우려고 기다리는 시간이 없습니다. 같은 영역의 작업이 이미 대기 중일 때만 새 이벤트를 합칩니다.
미러에서 대조한 DNS 출력
작게 빌드해도 DNS 데이터는 같아야 합니다. Cloudflare는 네임서버, 와일드카드, apex 경로에 동등성 테스트를 추가했습니다. 같은 데이터베이스 상태로 전체 빌드와 타깃 빌드를 각각 실행하고, 시간에 따라 달라지는 값은 고정합니다. 그런 다음 타깃 계획이 담당하는 모든 Quicksilver 키를 바이트 단위로 비교합니다. 플래너와 스케줄러 테스트에서는 변경 분류, 같은 이름의 영역, 병합, 퍼지, 전체 빌드로의 확대를 검증했습니다.
롤아웃 중에는 모든 타깃 빌드와 함께 전체 빌드도 실행해 결과를 비교했습니다. 매번 영역 전체를 읽는 비싼 검증이었습니다. 미러 비교에서 같은 수준의 확신을 얻을 때까지만 이 방식을 유지했습니다.
테스트만으로 고객의 모든 조합을 재현할 수는 없습니다. 그래서 모든 릴리스를 미러 Zone Builder에도 적용합니다. 미러는 프로덕션 Kafka 스트림을 소비하고 프로덕션 데이터베이스를 읽지만, 고객 트래픽을 받지 않는 별도 Quicksilver 환경에 결과를 씁니다. 비교기는 영역의 20%를 표본으로 뽑아 빠진 키, 불필요하게 남은 키, 값이 다른 키를 찾습니다.
순간적인 차이를 곧바로 회귀로 판단하지는 않습니다. 두 환경이 같은 시각에 영역을 빌드하지 않기 때문입니다. 살펴보는 대상은 두 파이프라인이 모두 따라잡은 뒤에도 남는 새로운 종류의 차이입니다.
조사에는 DNS Mirror Dashboard를 썼습니다. 차이를 종류별로 묶고 확인할 예시를 보관하는 도구로, Cloudflare Developer Platform에서 돌아갑니다. Worker가 결과를 받고 Durable Objects가 상태를 유지하며 Cloudflare Access가 접근을 보호합니다. 원문 화면에 표시된 중요 그룹은 릴리스 전에 각각 검사해 안전하다고 확인했습니다.
대시보드의 차이 비율은 비교 순간에 키 하나 이상이 다른 영역의 비율입니다. 원문 화면의 예시는 0.31%입니다. 대부분은 양쪽 파이프라인이 따라잡으면 사라지는 시점 차이이므로, 비율이 낮게 유지되는지와 새로운 종류의 차이가 생기는지를 함께 봤습니다.
미러 결과가 안정적으로 유지된 뒤 새 스케줄러의 적용 범위를 늘렸습니다. 기준은 영역 이름의 해시였습니다. 영역 ID를 기준으로 나누면 같은 이름을 공유하는 영역들이 서로 다른 스케줄러로 갈 수 있습니다. 이름으로 묶어야 모두 같은 스케줄러를 사용하고, 서로 다른 스케줄러가 공유 메타데이터 키를 쓰는 일을 막을 수 있습니다. 무료 영역부터 비율을 높인 뒤 유료 영역에서도 같은 과정을 반복했습니다.
줄어든 전체 빌드 뒤의 메모리 여유
24시간 동안 측정한 빌드의 92.95%는 영역 전체를 다시 만들지 않았습니다. 리소스만 처리한 빌드가 86.81%로 가장 많았고, 전체 빌드는 7.04% 남았습니다. 남은 전체 빌드의 평균 시간은 0.35초입니다. 최초 게시처럼 레코드가 적은 새 영역에서 주로 필요한 작업이었기 때문입니다.
이번에 범위를 줄인 메타데이터 경로의 비중은 리소스와 메타데이터가 2.54%, apex와 메타데이터가 2.30%였습니다. 합계 4.84%에 여전히 전체 빌드인 7.04%를 더하면, 이전에 전체 빌드가 필요했던 비중은 11.88%입니다. 전체 빌드가 약 40% 줄어든 것입니다. 건수만으로는 절감한 작업량이 충분히 드러나지 않습니다. 타깃 빌드로 바뀐 작업에는 가장 큰 영역들도 포함되어 있습니다.
긴 전체 빌드가 줄자 Kafka 소비도 안정됐습니다. 이전에는 파티션의 커밋 오프셋이 오래 멈췄다가 초당 최대 1,550개 메시지를 처리하며 밀린 작업을 따라잡았습니다. 이제는 이벤트가 들어오는 속도로 소비합니다.
메모리 차이도 컸습니다. 배포 전체에서 실제로 사용하는 워킹셋 메모리는 평균 49GiB에서 7GiB로 86% 줄었습니다. 피크는 79GiB에서 12GiB로 85% 감소했습니다. 큰 영역 전체를 메모리에 담는 일이 훨씬 드물어진 결과입니다.
지연 비교는 같은 24시간 동안 나란히 진행했습니다. 프로덕션에서는 기존 스케줄러를, 미러에서는 통합 스케줄러를 실행했습니다. 코드를 제외한 환경은 같았습니다. 같은 Kafka 이벤트를 소비하고 같은 데이터베이스를 읽으며, 동등한 데이터를 Quicksilver에 썼습니다.
여기서 빌드 완료 지연은 DNS 레코드나 영역 설정을 바꾼 순간부터 Zone Builder가 Quicksilver에 쓰기를 마칠 때까지입니다. 이후 Quicksilver가 네트워크에 배포하는 시간은 포함하지 않습니다. 그 시간은 위치마다 다르며 이번 변경의 영향을 받지 않습니다. Zone Builder 이후의 경로는 원문에서 안내하는 별도 Quicksilver 글에서 다룹니다. 변경을 모든 Cloudflare 데이터 센터에 전파하는 과정입니다.
이 비교에서는 일반적인 지연이 거의 달라지지 않았습니다. 대부분의 빌드는 이미 작았고, 완료 지연의 상당 부분은 작업 시간보다 재빌드 간격을 기다리는 시간이었습니다. 차이는 오래 걸리는 이벤트에서 드러났습니다. 각 측정 시점에 이벤트의 99%가 완료되는 시간인 p99의 최대 스파이크가 14.6분에서 1.21분으로 12배 줄었습니다. 모든 빌드 유형과 고객 플랜을 합친 결과이므로 개별 영역의 지연을 보장하는 수치는 아닙니다.
확인 절차를 지키며 줄인 대기 시간
앞선 비교에서 확보한 여유는 기존 대기 시간을 줄일 근거가 됐습니다. 영역별 재빌드 간격은 바쁜 영역 하나가 계속 빌드하며 다른 영역의 처리 용량을 차지하지 못하게 하는 장치입니다. 빌드 비용이 낮아지고 전체 영역을 읽는 작업도 크게 줄었으므로, 대부분의 플랜에서 이 간격을 안전하게 단축할 수 있었습니다.
DNS Kafka Aggregator가 이벤트를 보류하는 시간도 줄였습니다. 이 대기는 데이터베이스 복제본에 변경이 도착하기 전에 빌드가 읽는 일을 막기 위한 것이었습니다. 뒤처진 복제본의 읽기를 데이터베이스가 거부하게 된 뒤에는 대기 시간을 더 짧게 잡아도 안전했습니다.
이 조정으로 빌드 완료 지연의 중앙값은 약 7.7초에서 약 3.3초로 절반이 됐습니다. 처음에는 Aggregator 변경으로 약 6.4초까지 내려갔습니다. 이어 재빌드 간격을 줄인 Zone Builder를 서버에 점진적으로 배포하면서 지연이 두 단계에 걸쳐 더 낮아졌습니다. 통합 스케줄러 도입 직후의 효과와, 그 여유를 바탕으로 대기를 줄인 효과는 이렇게 구분됩니다.
이때 사용한 차트에는 측정상의 단서가 있습니다. 히스토그램 버킷 경계가 1, 5, 10, 30초였고, 경계 사이의 백분위는 지연이 구간 안에 고르게 퍼져 있다고 가정해 추정했습니다. 실제 지연은 각 구간의 아래쪽에 몰려 있어 추정치가 높게 나왔습니다. p99는 30초 가까이, p90은 7초 넘게 표시됐지만 숫자가 보이는 만큼 정밀하지는 않았습니다.
버킷에 의존하지 않고 계산한 정확한 평균에서도 지연이 절반으로 줄었음을 확인했습니다. 이후에는 세밀한 버킷을 자동으로 고르는 네이티브 히스토그램으로 바꿨습니다. 이 측정에서는 p90이 약 5.5초, p99가 약 12초입니다.
빌드 유형 비율과 지연·메모리 수치
| 항목 | 값 |
|---|---|
| 레코드 변경 이벤트 (2022년 → 현재) | 초당 약 250건 → 약 700건 (설정 변경 등 약 100건 별도) |
| 큰 영역 규모 | 2,000만 레코드 이상, 수억 레코드까지 늘 것으로 예상 |
| 2022년 레코드 단위 빌드 속도 | 전체 빌드 대비 평균 150배, 100만 레코드 테스트 영역에서 4,250배 |
| 24시간 빌드 유형: 리소스만 | 86.81% |
| 24시간 빌드 유형: 리소스와 메타데이터 | 2.54% |
| 24시간 빌드 유형: apex와 메타데이터 | 2.30% |
| 24시간 빌드 유형: 퍼지 | 1.30% |
| 24시간 빌드 유형: 전체 영역 | 7.04% (평균 0.35초) |
| 전체 빌드 감소 | 11.88% 상당에서 약 40% 감소 |
| 미러 비교 표본 | 영역의 20% (대시보드 예시 차이 비율 0.31%, 일치 영역 234,313개) |
| Kafka 소비 속도 (변경 전) | 초당 약 300~1,550건 (생산은 약 600~800건) |
| p99 최대 스파이크 | 14.6분 → 1.21분 (12배 감소) |
| 워킹셋 메모리 평균 | 49GiB → 7GiB (86% 감소) |
| 워킹셋 메모리 피크 | 79GiB → 12GiB (85% 감소) |
| 빌드 완료 지연 중앙값 | 약 7.7초 → 약 3.3초 |
| 네이티브 히스토그램 기준 | p90 약 5.5초, p99 약 12초 |