Customer Case 06
국내외 사업장 데이터 통합 및 Azure Databricks 기반 분석 환경 고도화
프로젝트 개요
노후화된 데이터 분석 환경을 Azure Databricks 기반으로 개편하고 국내외 사업장 데이터를 통합 관리할 수 있는 환경을 구축한 프로젝트입니다.
폴라리스클라우드는 국내 사업장 데이터 분석 환경을 고도화하고 해외 사업 데이터 분석 환경을 새롭게 마련했으며 경영 지표 활용과 사용자 모니터링을 위한 Power BI 리포트를 구축했습니다.
| 업종 | 오락·서비스 |
|---|---|
| 수행 기간 | 2023.06.19 ~ 2023.11.30 |
| 프로젝트 유형 | 데이터 분석 환경 개편 및 BI 리뉴얼 |
| 적용 기술 | Azure Databricks, Azure Data Factory, Power BI, Lakehouse |
| 원천 데이터 | IBM DB2, MSSQL, Redis, 공공데이터 API 등 |
도입 배경
기존 시스템의 노후화와 글로벌 데이터 분석 수요에 대한 대응
- 서버·시스템 노후화: On-premise 기반 DB와 Windows 서버 간 호환성 문제가 발생했습니다.
- 서버 용량 부족: 사업 확장과 회원 증가로 기존 서버의 용량이 부족해졌습니다.
- 글로벌 분석의 한계: 해외 사업장을 포함한 데이터 관리 수요가 증가했지만 기존 시스템의 구축 범위에서는 글로벌 데이터 분석이 어려웠습니다.
- 분석 환경 개선 필요성: 노후 시스템을 클라우드 환경으로 전환하고 국내외 사업장 데이터를 통합 관리할 수 있는 분석 환경이 필요해졌습니다.
주요 구축 내용
Azure Databricks 기반으로 데이터 분석 환경을 개편하고 국내외 사업장 데이터 관리 및 시각화 체계를 구축했습니다.
- Databricks 기반 분석 환경 리뉴얼: 노후화된 기존 시스템을 Azure Databricks 기반으로 개편했습니다. 국내 사업장 데이터 리포트는 고도화하고, 해외 사업 데이터 분석 환경은 새롭게 구축했습니다.
- 계층형 데이터 관리: Bronze·Silver·Gold 계층 구조의 ELT 체계를 구성하여 데이터를 수집·정제했습니다. 계층별로 데이터 정제 수준을 구분하고 향후 데이터 증가에도 대응할 수 있도록 구성했습니다.
- 국내외 사업장 데이터 통합 관리: IBM DB2, MSSQL, Redis, 공공데이터 API 등의 데이터를 Databricks 계층 구조에서 통합 관리하도록 구성했습니다.
- Power BI 리포트 20종: 경영 지표 활용과 사용자 모니터링을 위한 Power BI 리포트 20종을 구축했습니다.
- 네트워크 환경 구성: Azure DNS Private Resolver와 Virtual Network를 기반으로 네트워크 환경을 구성했습니다. VM 기반 DNS 서버 없이 On-premise 환경에서 DNS Private 영역을 조회할 수 있도록 했으며 고가용성과 개발 확장성을 고려해 DevOps 파이프라인 구축 및 고성능 엔드포인트 지원이 용이하도록 설계했습니다.
구축 결과 및 변화
이번 개편을 통해 기존 데이터 분석 환경을 Azure 클라우드 기반으로 전환하고 국내외 사업장 데이터를 Azure Databricks에서 통합 관리할 수 있는 환경을 마련했습니다.
또한 국내 사업장 데이터 리포트를 고도화하고 해외 사업 데이터 분석을 확대했으며 Power BI 리포트 20종을 통해 경영 지표와 사용자 모니터링 정보를 확인할 수 있도록 했습니다.
| 구분 | Before | After |
|---|---|---|
| 인프라 | 노후 서버와 기존 시스템 간 호환성 문제 발생 | Azure 클라우드 기반으로 분석 환경을 전환하여 기존 인프라 개선 |
| 데이터 관리 | 기존 구축 범위에서 해외 사업장을 포함한 통합 데이터 분석이 어려움 | Azure Databricks에서 국내외 사업장 데이터를 통합 관리하고 계층별 데이터 수집·정제 체계 구축 |
| BI 성능 | 사업 확장과 회원 증가로 기존 서버의 용량 부족 | Bronze·Silver·Gold 계층 구조를 적용하여 데이터 증가에 대응할 수 있는 처리 환경 마련 |
BI 대시보드
국내외 사업장 데이터를 기반으로 경영 지표와 사용자 모니터링 정보를 시각화한 Power BI 리포트 화면입니다.

