통신·네트워크

빅데이터 환경에서의 효과적인 DW시스템 증설

초 저비용으로 기존 data warehouse의 용량을 증설하고 성능을 개선하기 위한 획기적인 대안

Customer Profile

고객사는 3천여만 명의 가입자를 보유한 한국의 Tier-1 모바일 서비스 사업자로서, 2G CDMA를 비롯하여 CDMA 2000 1X·EV-DO·WCDMA·HSDPA 등 이동통신 네트워크 기술의 진화에 능동적으로 대응하며 전국 단위 모바일 서비스를 제공하고 있습니다. 2011년 4G LTE 네트워크를 상용화한 이후, 조기 전국망 서비스 제공으로 모바일 브로드밴드 서비스 정착에 선도적인 역할을 하고 있습니다.

Business Challenge

고객사는 해외 기업으로부터 도입한 고가의 Data Warehouse 솔루션 기반 과금 분석 시스템을 운용하고 있었으나, 3G·4G LTE 가입자 증가와 폭발적인 데이터 서비스 이용으로 초기 설계 처리용량을 초과하는 데이터가 유입되어 시스템 안정성·가용성이 떨어지는 상황이었습니다.

  • 고가 DW 초기 설계 처리용량 초과: 650억 → 1,000억 record/day
  • 데이터 조회 성능 부족으로 가입자 단위 실시간 조회 불가
  • Mart 통계 생성을 위한 Exadata 과부하 (80~90% CPU 상시 부하)
  • 3개월 데이터 저장·검색 자원 부족: 5조 → 9조 record/3Month
  • 기존 DW 추가 증설 시 고비용 발생

mobigen Solution

고객사는 고비용 시스템 증설 대신 모비젠의 자체 개발 검증 솔루션인 대용량 데이터 처리·분석용 데이터베이스 IRIS를 도입하여 비용을 획기적으로 절감했습니다. 원시 데이터의 저장·검색과 가입자 단위 조회·분석 서비스를 IRIS로 이관해 고속 처리함으로써 시스템 성능을 극대화했습니다.

  • 내부 조직별 시스템과 백신업체·관제업체·ISP 등 약 100여 개 외부 보안 관련 시스템에서 데이터 수집
  • 일일 약 600억 레코드의 로그 데이터 압축 및 이중화 저장
  • 데이터의 실시간 색인 및 요약 테이블 생성
  • 3개월 분량(약 5조 레코드, 1.5PB) 데이터의 실시간 검색

Business Value

모비젠의 IRIS 도입으로 수개월 내에 저비용으로 필요한 용량을 증설하는 한편, 기존 시스템과 IRIS 간의 효과적인 역할 분담을 통해 기존 시스템의 운용 효율성까지 함께 개선한 성공적인 프로젝트였습니다.

구분항목결과
용량 증설Transactions / Day650억 record → 1,000억 record
용량 증설전체 record 저장용량5조 record → 9조 record
용량 증설전체 storage 저장용량2PB → 4PB (Oracle 2PB + IRIS 2PB)
성능 향상가입자 단위조회 성능 개선167 sec → 1.9 sec (87배 개선)
성능 향상연관조회 성능 개선208 sec → 1.0 sec (208배 개선)
성능 향상전체 시스템 부하기존 부하율 90% → 40%, IRIS 평균 부하 50%
비용 절감솔루션 도입비용외산 솔루션 증설 대비 70% 절감
비용 절감개발 비용ANSI SQL / JDBC / RDBMS 지원으로 오픈소스 대비 50% 절감
Tier-1 모바일 사업자 DW 시스템 증설 성과 시각화