DZone.com의 RSS
팔로우
구글 클라우드 플랫폼(GCP)과 아파치 에어플로우(Apache Airflow)를 활용한 전국 규모의 실시간 원격 측정 분석 플랫폼 개발
저자는 TELUS에서 대규모 프로젝트를 진행하며 10만 개 이상의 셋톱 박스를 위한 실시간 텔레메트리 분석 플랫폼을 구축했습니다. 이 프로젝트의 목표는 운영 의사 결정과 고객 경험을 개선하는 것이었습니다. 기존 데이터 인프라는 노후화되고 비효율적이어서 실시간 데이터 분석에 지장을 주고 있었습니다. 이 프로젝트는 Google Cloud Platform (GCP)을 사용하여 인프라를 현대화했습니다. Apache Airflow와 Infrastructure-as-Code 도구는 이러한 현대화에 핵심적인 역할을 했습니다. 이전 시스템은 비효율적인 배치 지향 데이터 파이프라인을 사용했습니다. 이전 시스템으로는 실시간 진단이 불가능했습니다. 이 프로젝트는 데이터 인프라 제한과 관련된 상당한 어려움을 극복했습니다. 새로운 인프라를 사용하여 미래 지향적인 솔루션이 성공적으로 구현되었습니다. 전반적인 결과는 데이터 처리 및 분석 능력의 상당한 향상이었습니다.