빅데이터 결과해석 - 분석결과 활용 -분석모형 모니터링, 리모델링

반응형

분석 모니터링 필요성

  • 주변 환경과 데이터의 변화를 빅데이터 분석 모델에 지속적으로 반영하기 위함
    • 분석 모형을 지속적으로 모니터링하고 리모델링
  • 빅데이터 분석이 끝나면 각 현업부서에서 분석 결과를 활용, 이때 이전에 수립한 활용방안이 계획대로 잘 수행되고 있는지 모니터링
  • 분석 서비스의 안정적인 운영과 현행화된 데이터의 수집, 저장, 관리, 분석 결과의 활용 및 성과 공유 등을 위해 유지관리 필요
  • 조직의 담당자는 과제 종료 이후 제공되는 서비스 내용을 기반으로 유지관리 체크리스트를 활용하여 세부 유지관리 사항을 구체화하여 점검

분석 모니터링 대상

  • 빅데이터 분석은 한 번에 끝나는 프로젝트가 아니라 지속적인 모니터링과 유지관리가 매우 중요
  • 조직은 모니터링 및 유지관리를 위한 목표를 수립하고 필요한 활동을 도출한 후 각 활동별 투입공수를 산정하여 유지관리 예산을 수립/진행
  1. 분석 모니터링의 주요 대상
    • 서비스 : 분석 과제 발굴, 활용 방안 마련, 성과 관리 등
    • 분석 모델 : 분석 알고리즘 주기, 변수, 소스(데이터 원천) 등
    • 데이터 : 현 시점의 현행화 데이터 확인
  2. 분석 서비스 유지관리의 주요 대상
    • 정책/제도 : 조직의 정책/제도 개발 및 적용
    • 업무 : 신규 업무 반영, 기존 업무 업그레이드
    • 관련 시스템 : 관련 시스템 변경 사항 반영
    • 인력 : 업무 역량, 책임과 역할, 교육 훈련 등

분석모형 리모델링 과정

  • 재검토
    • 분석 서비스 운영과정에서 지속적으로 새로운 데이터가 들어오고 정책이나 환경이 변화함으로써 분석 모델의 성능이 떨어질 수 있음
    • 최악의 경우 전혀 다른 결과 생성
  • 개선방안 도출
    • 데이터의 수집, 전처리, 분석 방법론, 분석 결과까지 과제 전반에 대하여 보완
    • 새롭게 추가할 사항 정리
  • 분석 모델 리모델링 과정 진행
    • 도출된 개선 방안을 기반으로 리모델링을 위한 계획 수립

분석모형 리모델링 방법

분석 모형이 변화된 업무와 데이터를 지속적으로 수용할 수 있도록 다음과 같은 리모델링 과정을 진행

  1. 분석 목적에 기반한 가설 및 추정방법에 대한 재검토
  2. 분석용 데이터의 범위 및 품질 검토
  3. 과대적합과 과소적합 방지를 위한 알고리즘 개선
  4. 분석 알고리즘과 매개 변수 최적화
  5. 분석 모형 융합과 재결합

참고

반응형