빅데이터와 통계학의 활용

※ 빅데이터[ big data ] 데이터의 생성 양ㆍ주기ㆍ형식 등이 기존 데이터에 비해 너무 크기 때문에, 종래의 방법으로는 수집ㆍ저장ㆍ 검색ㆍ분석이 어려운 방대한 데이터를 말한다. 빅데이터는 각종 센서와 인터넷의 발달로 데이터가 늘어나면 서 나타났다. 컴퓨터 및 처리기술이 발달함에 따라 디지털 환경에서 생성되는 빅데이터와 이 데이터를 기반 으로 분석할 경우 질병이나 사회현상의 변화에 관한 새로운 시각이나 법칙을 발견할 가능성이 커졌다. 일부 학자들은 빅데이터를 통해 인류가 유사 이래 처음으로 인간 행동을 미리 예측할 수 있는 세상이 열리고 있 다고 주장하기도 하며, 이를 주장하는 대표적인 학자로는 토머스 멀론(Thomas Malone) 미국 매사추세츠공 과대학 집합지능연구소장이 있다. 빅데이터는 초대용량의 데이터 양(volume), 다양한 형태(variety), 빠른 생성 속도(velocity)라는 뜻에서 3V 라고도 불리며, 여기에 네 번째 특징으로 가치(value)를 더해 4V라고 정의하기도 한다. 빅데이터에서 가치 (value)가 중요 특징으로 등장한 것은 엄청난 규모뿐만 아니라 빅데이터의 대부분은 비정형적인 텍스트와 이 미지 등으로 이루어져 있고, 이러한 데이터들은 시간이 지나면서 매우 빠르게 전파하며 변함에 따라 그 전체 를 파악하고 일정한 패턴을 발견하기가 어렵게 되면서 가치(value) 창출의 중요성이 강조되었기 때문이다. 출처 : [네이버 지식백과] 빅데이터 [big data] (시사상식사전, 박문각) 오바마 승리의 숨은 교훈: 감으로 선거하는 시대는 끝났다 ☞ http://deulpul.net/3906306 박원순 시장 '최대 치적', 심야버스 성공의 비밀 ☞ http://www.asiae.co.kr/news/view.htm?idxno=2013092813114331501

 

● 통계학 활용의 예 (1) 자료의 요약 및 설명 • 인구가 어떠한 연령대로 분포되었는지 살펴봄 • 야구선수의 타율과 연봉의 자료를 가지고 타율이 높아질수록 연봉이 높아진다고 자료의 특징을 설명 • 어린이의 체중과 신장을 측정하여 정상발육곡선에 비추어 보았을 때 측정에서 그치는 것 이 아니라 발육정도를 설명 (2) 자료의 수집 • 시청률 조사를 위해 표본조사를 실시 • 실험쥐에게 새로 개발된 치료제와 기존약을 임의로 투여하여 치료효과를 분석 • 살충제의 살충효과를 비교하기 위해 밭을 몇 개의 블럭으로 나누고 살충제를 투여하고 수 확량을 가지고 살충 효과를 분석 (3) 자료로부터 결론 도출 • 선거 여론조사로 선거결과를 예측 • 경제성장률에 대한 시계열모형을 작성하여 내년의 경제성장률을 예측 • 직장에서의 직급별, 성별 임금자료를 이용하여 남녀 불평등여부에 대한 통계적 결론을 내 정보사회의통계활용 - 5 - 림 • 자동차 보유대수와 아황산가스양의 관계를 이용하여 미래의 10년후 또는 100년 후의 공 기 오염도를 예측