본문 바로가기

Random Access

Data Mining 데이터 마이닝

Data Mining 데이터 마이닝
데이터 마이닝(Data Mining)은 대규모로 저장된 데이터 안에서 체계적이고 자동적으로 통계적 규칙(rule)이나 패턴(pattern)을 찾아 내는 것이다. 다른 말로는 KDD(데이터베이스 속의 지식 발견:knowledge-discovery in databases)라고도 일컫는다. 이를 위해서, 데이터 마이닝은 통계학에서 패턴 인식에 이르는 다양한 계량 기법을 사용한다.

종류

  • 계급 분류(classification hierarchies) - 데이터를 특정 그룹으로 분류하는 작업.
  • 연관 규칙(associative rules) - 데이터 사이의 관련성 표현.
  • 순차 관계(sequential patterns) - 순차적인 데이터 사이의 관계.
  • 시간의 흐름에 따른 방식(patterns within time series)
  • 분류 및 구분(categorization and segmentation)

데이터 마이닝 기법은 통계학쪽에서 발전한 탐색적자료분석, 가설 검정, 다변량 분석, 시계열 분석, 일반선형모형 등의 방법론과 데이터베이스 쪽에서 발전한 OLAP (온라인 분석 처리:On-Line Analytic Processing), 인공지능 진영에서 발전한 SOM, 신경망, 전문가 시스템 등의 기술적인 방법론이 쓰인다.

데이터 마이닝의 응용 분야로 신용평점 시스템(Credit Scoring System)의 신용평가모형 개발, 사기탐지시스템(Fraud Detection System), 장바구니 분석(Market Basket Analysis), 최적 포트폴리오 구축과 같이 다양한 산업 분야에서 광범위하게 사용되고 있다.

단점으로는, 자료에 의존하여 현상을 해석하고 개선하려고 하기 때문에 자료가 현실을 충분히 반영하지 못한 상태에서 정보를 추출한 모형을 개발할 경우 잘못된 모형을 구축하는 오류를 범할 수가 있다.

[참고]
 - http://kmoonki.tistory.com/128
 - http://en.wikipedia.org/wiki/Data_mining
 - http://www.dbguide.net/know/know101003.jsp?IDX=797&catenum=14