빅데이터 기초지식 1 - 3. BI 도구와 모니터링

- 빅데이터 탐색에 있어 중요한 것은 우선 큰 그림을 파악한 후에

  점차 세부사항으로 깊게 들어가는 것이다.

 

1. 데이터의 모니터링

(프로젝트의 현재 상황 파악)

- 모니터링이란 보다 계획적으로 데이터의 변화를 추적해 나가는 것이다.

- 데이터의 변화가 예상과 다르다면, 행동을 해야되는 데 여기에는 사람의 판단이 중요

- 데이터로 상황 파악 후, 얻어진 통찰에 따라 세부 사항을 체크해서 문제를 해결해야 한다.

 

2. 데이터에 근거한 의사결정

(KPI - Key Performance Indicator 모니터링)

- KPI 수치 파악을 통해 현재의 수치가 다음 행동에 어떤 영향을 끼칠 것인지 파악하는 것이 중요

 

3. 변화를 파악하고 세부 사항 이해하기

(BI 도구 활용)

- BI 도구를 통해 변화를 파악하고, 세부 내용을 이해할 수 있음

- 변화를 파악하기 위해선 정기적인 보고를 통해 주용한 변화를 파악하는 것이 중요하다.

- 변화를 쉽게 파악하기 위해서 '시각화하기 위운 데이터' 를 만드는 것이 중요하다

 

4. 수작업과 자동화해야할 것의 경계 판별하기.

- BI 도구는 도구를 통해 나타내고자하는 데이터의 구조를 잘 설계해야 자신이 원하는 

  화면을 만들 수 있다는 단점이 존재

- 그때 그때 단순한 분석 등은 수동으로 수행을 해도 큰 문제는 없음

- 자주 업데이트 되는 데이터(로그 데이터 등)와 다수의 사람에게 공유되는 데이터 등 중요성이 

  높은 데이터는 차례대로 자동화를 해나가야 한다.

 

- 데이터 자동화의 방법 3가지

  1) BI 도구에서 직접 데이터 소스 접속 

   > 장점 : 시스템 구성이 간단

   > 단점 : BI 도구 측에서 지원하지 않는 데이터 소스에 접속 불가

 

   2) 데이터 마트를 준비, 그것을 BI 도구로 열기

    > 장점 : 어떤 테이블이라도 자유롭게 생성 가능

    > 단점 : 데이터 마트의 설치 및 운영에 시간 소요

 

   3) 웹 방식의 BI 도구 도입 과 CSV 파일 업로드

     > 장점 : 스크립트로 자유롭게 데이터 가공 가능

     > 단점 : 데이터의 생성 및 업로드에 프로그래밍 필요

 

--> 가장 범용성이 높은 방법은 2번 방법

--> 데이터 마트를 만드는 데 시간이 걸리지만, 한번 만들어두면, 전체적인 시스템 구축이 완료됨으로 일을 

      수월하게 진행할 수 있다.