클라우드플레어, 실제 사용자 웹 경험 데이터셋 'BEACON' 공개

BEACON 데이터셋 공개와 변화

기존에는 클라우드플레어 고객에게만 제공되던 실시간 사용자 모니터링(RUM) 데이터가 BEACON을 통해 일반에 공개되면서, 개발자, 브라우저 벤더, 표준 그룹 등 더 많은 주체가 웹 성능 개선에 기여할 수 있게 되었다. 이는 웹이 특정 고성능 환경에서만 잘 작동하는 것이 아니라, 다양한 하드웨어와 네트워크 환경을 가진 모든 사용자에게 빠르고 접근 가능한 인터넷을 제공하려는 목표의 일환이다.

실제 사용자 경험 데이터의 필요성

소프트웨어 개발 환경은 고성능 장비와 빠른 네트워크를 기반으로 하지만, 실제 최종 사용자들은 오래된 저가형 스마트폰, 제한된 데이터 요금제, 열악한 공공 인프라 등 다양한 제약 조건에 직면한다. 이러한 개발 환경과 실제 사용자 환경 간의 인식 격차는 기술 선택 및 우선순위 결정에 왜곡을 초래할 수 있다. BEACON 데이터셋은 이러한 격차를 객관적인 데이터로 해소하고, '내 기기에서는 잘 작동한다'는 인식을 넘어 '모두에게 잘 작동하는' 웹을 구축하는 데 필요한 통찰력을 제공한다.

BEACON의 핵심 지표와 분석 결과

BEACON은 웹 성능 측정의 사실상 표준인 Core Web Vitals의 세 가지 지표, 즉 Largest Contentful Paint(LCP, 로드 시간), Cumulative Layout Shift(CLS, 시각적 안정성), Interaction to Next Paint(INP, 상호작용 반응성)를 모두 보고한다. 특히, 단일 평균값 대신 전체 히스토그램 형태로 데이터를 제공하여 P75(75번째 백분위수)를 넘어선 장기적인 성능 저하 구간까지 분석할 수 있도록 한다. 이를 통해 업계가 모든 사용자에게 빠른 경험을 제공하는 데 어려움을 겪는 지점을 명확히 파악할 수 있다.

BEACON은 RUM Archive 표준을 확장하여 LCP 및 INP의 세부 구성 요소를 제공한다. LCP 서브 파트에는 Document TTFB, Load Delay, Load Duration, Render Delay가 포함되며, INP 서브 파트에는 Input Delay, Processing Time, Presentation Delay가 있다. 이 지표들은 각각 'Good', 'Needs Improvement', 'Poor' 임계값으로 분류되어 성능 최적화가 필요한 특정 단계를 식별하는 데 도움을 준다. 예를 들어, LCP의 경우 리소스 다운로드 자체보다 LCP 후보 발견 및 렌더링 차단 해제가 더 큰 최적화 기회로 나타났다.

데이터 분석 결과, iOS의 WebKit 브라우저 엔진이 전반적으로 우수한 성능을 보이지만, 46개국에서는 LCP 또는 INP가 Blink 기반 브라우저보다 최소 10% 이상 느린 것으로 나타났다. 산업별로는 정부/정치, 건강, 아동 친화적 웹사이트가 고성능을 보인 반면, 광고, 종교, 날씨 관련 웹사이트는 일반적으로 성능이 가장 낮았다. 또한, React, Vue 등 프레임워크로 구축된 단일 페이지 애플리케이션(SPA)에서 사용되는 소프트 내비게이션은 하드 내비게이션보다 2~3배 빠르지만, 초기 랜딩 페이지 로드 시간은 더 길어 아키텍처 선택 시 트레이드오프를 고려해야 한다고 지적한다.

개발자와 연구자를 위한 활용 방안

개발자들은 BEACON 데이터셋을 활용하여 자신의 웹사이트가 다양한 사용자 환경에서 어떻게 작동하는지 객관적으로 평가할 수 있다. LCP 및 INP 서브 파트 분석을 통해 로드 시간 및 상호작용 반응성 저하의 근본 원인을 파악하고, 구체적인 최적화 전략을 수립하는 데 필요한 정보를 얻을 수 있다. 클라우드플레어 고객은 Smart Hints로 리소스 발견 지연을, Zaraz로 서드파티 JavaScript의 성능 영향을 줄일 수 있다.

BEACON은 개방형 데이터셋이므로 다른 데이터 소스와 결합하여 새로운 연구 질문을 탐색할 수 있다. 예를 들어, 세계은행 그룹의 1인당 GDP 데이터와 결합하여 경제 상황이 국가별 웹 성능과 어떻게 상관관계가 있는지 분석할 수 있다. 클라우드플레어 레이더(Cloudflare Radar)는 BEACON 데이터와 자체 인터넷 품질 지수(IQI) 데이터를 연동한 새로운 웹 성능 섹션을 통해 웹사이트 성능과 네트워크 품질 간의 상관관계를 탐구할 예정이다. 초기 분석에 따르면 일반적으로 웹 성능과 네트워크 품질은 함께 움직이는 경향이 있다.

데이터의 신뢰성과 접근성

클라우드플레어는 BEACON 데이터셋의 공개에 앞서 개인 정보 보호를 최우선으로 고려했다. 데이터는 익명화 과정을 거쳐 도메인 이름 및 URL 경로와 같은 잠재적인 고객 웹사이트 식별자를 제거한다. 또한, 개별 사용자나 특정 사이트를 식별할 수 없도록 5개 미만의 데이터 포인트를 가진 기록은 폐기하는 등 엄격한 집계 기준을 적용한다.

데이터셋은 클라우드플레어 네트워크 내 1만 개 대형 웹사이트로 범위가 한정된다. 이는 트래픽 볼륨이 큰 소수 사이트가 데이터를 지배하거나, 너무 많은 사이트를 포함하여 데이터 레코드 수가 급격히 줄어드는 문제를 피하기 위함이다. 1만 개 사이트는 아키텍처, 기술, 지리적 다양성을 최대한 확보하면서도 정규화 후 수십억 건의 일일 기록을 대표할 수 있는 균형점으로 선정되었다. BEACON 데이터는 구글 빅쿼리에서 공개적으로 접근 가능하며, 분석에 활용할 수 있는 예시 쿼리도 함께 제공된다.