빅데이터의 이해

빅데이터

관점에 따른 정의

빅데이터의 정의는 빅데이터를 보는 관점에 따라 3가지로 정의한다.

1. 3V로 요약되는 데이터 자체의 특성 변화에 초점을 맞춘 좁은 범위의 정의가 있다.

2. 데이터 자체뿐 아니라 처리,분석 기술적 변화까지 포함되는 중간 범위의 정의가 있다.

3. 인재, 조직변화까지 포하만 넓은 관점에서의 빅데이터에 대한 정의가 있다.

 

출현배경

빅데이터 현상은 없었던 것이 새로 등장한것이 아니라 기존의 데이터, 처리방식, 다루는 사람과 조직 차원에서 일어나는 변화를 말한다.

 

기능

산업혁명의 석탄,철: 제조업뿐 아니라 서비스 분야의 생산성을 획기적으로 끌어올려 사회,경제,문화,생활,전반에 혁명적 변화를 가져올것으로 기대된다.

21세기의 원유: 경제 성장에 필요한 정보를 제공함으로써 산업 전반의 생산성을 한 단계 향상시키고, 기존에 없던 새로운 범주의 산업을 만들어낼 것으로전망된다.

렌즈: 렌즈를 통해 현미경이 생물할적 발전에 미쳤던 영향만큼이나 데이터가 산업 발전에 영향을 미칠것으로 기대된다.

플랫폼: 공동활용의 목적으로 구축된 유무형의 구조물로써의 다양한 서드파티 비즈니스에 활용되면서 플랫폼 역할을 할 것으로 전망된다.

 

변화

사전처리-사후처리:필요한 정보만 수집하고 핑요하지 않은 정보를 버리는 시스템에서 가능한 한 많은 데이터를 모으고 그 데이터를 다양한 방식으로 조합해 숨은 정보를 찾아낸다.

표본조사-전수조사:데이터 수집 비용의 감소와 클라우드 컴퓨팅 기술의 발전으로 데이터 처리비용이 감소하게 됐다. 이로인해 표본을 조사하는 기존의 지식발견 방식에서 전수조사를 통해 샘플링이 주지 못하는 패턴이나 정보를 발견하는 방식으로 데이터 활용방법이 변화됐다.

질-양:데이터가 지속적으로 추가될경우 양질의 정보가 오류 정보보다 많아 전체적으로 좋은 결과 산출에 긍정적인 영향을 미친 다는 추론에 바탕을 둔 변화가 나타나고있다.

인과관계-상관관계:상관관계를 통해 특정 현상의 발생 가능성이 포착되고, 그에 상용하는 행동을 하도록 추천되는 일이 점점 늘어나고있다. 이처럼 데이터 기반의 상관관계 분석이 주는 인사이트가 인과관계에 의한 미래예측을 점점 더 압도해가는 시대가 도래하게 될 것으로 전망된다.