기술 발달 기존에 보지 못한 자료 제공 빅데이터는 왜 갑자기 등장했으며 그것이 주목받게 된 가장 중요한 포인트는 무엇일까? 빅데이터의 핵심은 데이터를 통한 세계에 대한 색다른 이해이며, 이것이 태어난 가장 중요한 배경은 디지털화다. 이런 식으로 기술의 발달은 우리에게 보지 못했던 데이터를 관찰하게 할 수 있는 기회를 제공하고, 이것을 통해 우리는 우리를 둘러싼 세계에 대한 이해를 넓힐 수 있다. 따라서 빅데이터 시대에는 단순히 데이터를 잘 분석하는 사람보다는, 새로운 통찰력을 제공할 수 있는 데이터를 찾아낼 수 있고 문제에 적용할 수 있는 능력이 있는 사람에게 큰 기회가 될 것이다.
이준기의 빅데이터 살면서 어떤 주제가 갑자기 뜨는 경우가 있다. 빅데이터라는 것이 그렇다. 2010년께 갑자기 ‘빅데이터는 21세기의 원유다’ ‘앞으로 데이터과학자는 세계에서 가장 매력적인 직업이 될 것이다’라는 예지적 글들이 등장하기 시작했으며, 15년이 거의 지난 지금 그 예언이 모두 사실이 돼 버렸다.빅데이터는 왜 갑자기 등장했으며 그것이 주목받게 된 가장 중요한 포인트는 무엇일까? 빅데이터의 핵심은 데이터를 통한 세계에 대한 색다른 이해이며, 이것이 태어난 가장 중요한 배경은 디지털화다. 우리는 2000년대 이후 상품 구매, 드라마 시청, SNS를 사용한 다른 사람과의 소통, 가전제품의 이용 등 모든 생활의 영역에서 디지털을 경험하게 됐다. 기존의 생활 경험은 흔적이 남지 않는 행동이었지만 디지털로 옮겨 가며 온라인 쇼핑, 채팅, 사물인터넷 등을 통해 데이터라는 흔적을 남기게 됐다. 이렇게 만들어진 데이터는 이제 우리에게 새로운 이해의 창을 제공하고 있다.
당연한 이야기이지만, 갈릴레오의 관측과 데이터가 없었다면 태양은 지구를 중심으로 돌고 있었을까? 아니다. 우리가 1000년여 동안, 또한 지금 어떻게 생각하고 있는 것과 상관없이 자연과 사회는 자신의 법칙대로 움직이고 있다. 천동설에서 지동설로의 사고 변환에서 중요한 계기는 천체망원경의 발명이라는 새로운 기술이었고 이 기술은 우리에게 기존에 존재하지 않았던 데이터를 제공했다. 이런 식으로 기술의 발달은 우리에게 보지 못했던 데이터를 관찰하게 할 수 있는 기회를 제공하고, 이것을 통해 우리는 우리를 둘러싼 세계에 대한 이해를 넓힐 수 있다. 지금까지 우리의 생각을 근본적으로 바꿀 만큼의 데이터 생성에 도움을 준 기술은 망원경, 현미경 그리고 지금의 디지털 기술이다.
교수로서 처음 몇 번의 수업을 하고 난 후 이 학생은 성적을 잘 받을 것 같다는 느낌이 오는 학생들이 있다. 하지만 솔직히 고백하건대, 내 예측은 반만 맞았던 것 같다. 최근에는 온라인 강의가 증가함에 따라 학생들이 언제 온라인 강의를 들었는지, 숙제는 언제 제출했는지, 무슨 질문을 올렸는지, 처음에 강의를 어디까지 들었는지 등의 세세한 디지털 정보를 분석할 수 있다. 이런 데이터 분석을 통해 최종 성적을 예측한 최근 논문들을 보면 5등급 성적 분포에서 보통 90% 이상의 정확도를 보인다. 이렇듯 빅데이터는 누구에게나 큰 기회로 다가오고 있다. 이런 데이터를 통해 세계관을 통째로 바꿀 수도 있지만 현재 갖고 있던 데이터에 조금만 더 설명력만 높여도 경쟁에서 큰 우위를 만들어 나갈 수 있다. 빅데이터 분석에서는 이것을 약한 신호라고 부르는데 대부분의 경쟁자가 모두 같은 강한 신호를 갖고 분석을 할 때 나만의 약한 신호를 더해 예측률을 조금만 올려도 시장에서 선두에 나설 수 있는 것을 의미한다. 예를 들어, 남들이 재무제표를 보면서 기업의 부도 예측을 하고 있을 때 남이 생각하지 못하던 SNS상의 소비자 댓글, 인터넷의 채용 정보를 모델에 첨가할 수 있다. 경기를 예측할 때에도 모두들 소비자 물가지수나 신규 고용 등의 변수를 보고 분기별로 예측할 때 구글 검색 내용과 기업의 전기 사용량 등의 실시간 데이터를 분석해 경기 예측의 정확도를 높일 수 있다.
대한민국 최근 뉴스, 대한민국 헤드 라인
Similar News:다른 뉴스 소스에서 수집한 이와 유사한 뉴스 기사를 읽을 수도 있습니다.
김포 편입 서울은 ‘접경 도시’…수도 사수 작전계획 혼선 불가피수도 서울이 박격포 사거리 노출되는데,신원식 “군사작전 측면 유불리 없어” 강변
더 많은 것을 읽으십시오 »
내년 선거용 ‘공매도 때리기’…文정부도 대선까지 금지하기도국힘, 총선 앞두고 이례적 공매도 금지 文정부도 지난해 대선까지 공매도 제한 금융계 “외국인 등돌릴 수도” 우려
더 많은 것을 읽으십시오 »
‘김포 서울 편입’ 때 입시 전망…“목동·강남 쏠림, 자사고 경쟁↑”김포 ‘농어촌특별전형’ 혜택 사라질 수도
더 많은 것을 읽으십시오 »
올해 공공주택 인허가, 민간보다 더 줄었다… 지난해 대비 -44%올해 7월까지 주택 인허가·착공 물량이 민간보다 공공 부문에서 더 크게 감소한 것으로 나타났...
더 많은 것을 읽으십시오 »
못 버는 것도 힘겨운데…저소득층, 못 먹는 설움까지10월까지 식료품 물가 5.1% 올라, 외식물가는 6.4% 더 가파른 상승소득 하위 20%, 생활비 44....
더 많은 것을 읽으십시오 »
민주당 ‘이태원 특별법, 노란봉투법’ 여당 협조 촉구...“유엔 권고 이행해야”“윤 대통령, 참사 더 이상 외면 말고 진심 어린 사과 하라”
더 많은 것을 읽으십시오 »