실시간 분석 플랫폼 고도화
KT Skylife (750만 가구)
KT Skylife의 750만 가구 대상 실시간 분석 플랫폼을 CentOS 7에서 Rocky Linux 8 HA 아키텍처로 무중단 이전하고 20노드로 확장했다.
- 과제
- 750만 가구 대상 실시간 분석 플랫폼이 EOL인 CentOS 7 위에서 운영 중.
- 설계
- Rocky Linux 8 HA 아키텍처로 이전하고 분산 서버 20대를 확장. Kafka·Flume 수집 → Hadoop·Spark 처리 → ELK 모니터링.
- 근거
- RHEL 바이너리 호환 덕분에 기존 Hadoop/Kafka 빌드를 그대로 사용. 노드별 순차 전환으로 다운타임 0.
- 결과
- 무중단 OS 이전과 20노드 스케일아웃, ELK 기반 실시간 데이터·로그 대시보드.
- 스택
- Kafka, Flume, Hadoop, Spark, ELK Stack, Rocky Linux 8
관련 프로젝트
- PPAS 백업·복구 시스템 / 데이터 레이크하우스
- MartDB 생성형 AI 데이터 에이전트 (GPT-4o)
- Airflow DAG 배치 스케줄링 환경
- 보험 시스템 온프레미스 → AWS 마이그레이션
- iOS/Android QA 자동화
- 문서 플랫폼 PoC 시리즈 — localization.md의 전신
- GitHub 단일 파일 연산 라인 챌린지