티스토리 뷰
-빅데이터 기술의 발전-
최근 몇 년간 IT분야에서 빅데이터 기술에 대한 이슈가 많이 화제가 되었습니다. 그 중 빅데이터 분석 기술, 빅데이터 처리 기술은 다양한 개념을 탄생시키며 많은 발전을 이룩하였습니다. 이러한 IT빅데이터의 발전과 더불어 데이터를 관리하고 처리할 수 있는 '데이터 분석가'라는 새로운 직업이 탄생하였습니다. 그리고 데이터 분석가는 IT분석 알고리즘의 고도화를 위해 기계학습, 실시간 분석, 딥러닝 등의 인공지능 분석기술을 현장에 적용하기 시작하였습니다. 여기에 구글 알파고와 제 4차 산업혁명과 같은 트렌드는 해당 기술의 발전을 더욱 가속화 시킨 것 같습니다.
빅데이터 기술
최근 관심이 폭증되고 있는 기술들의 중심에는 언급한 것처럼 빅데이터 기술이 있습니다. 정리해보면 보다 스마트한 서비스를 위해서는 더 많은 데이터의 분석과 정밀한 분석 알고리즘이 필요하게 되었고, 이러한 많은 데이터의 수집과 처리를 병행할 수 있는 기술이 빅데이터 기술이기 때문입니다. 물론 컴퓨팅 파워와 같은 하드웨어 기술, 네트워크의 발전도 역할이 컸다고 생각됩니다. 본격적으로 빅데이터 기술의 발전사항을 이야기 해보도록 하겠습니다.
최근 화두가 되고 있는 빅데이터 기술은 바로 실시간으로 발생하는 데이터로부터 패턴을 찾아내거나 이벤트를 처리하기 위해 예측을 하는 기술이 많은 관심을 받고 있습니다. 예를 들면 동영상 콘텐츠를 다른 나라에 유통하는데 있어 동영상의 국내 조회수, 동영상의 품질, 해당 국가의 성향 등을 분석하게 됩니다. 그렇게 되면 예상되는 반응이나 특정기간까지의 조회량과 같은 새로운 정보를 추출 가능합니다. 또한 무인자동차에서도 실시간으로 운전제어에 빅데이터 분석기술이 사용할 수 있습니다.
이러한 빅데이터 기술은 최근 클라우드 기술과 연계하여 소셜네트워크에 있는 정보도 활용하여 단순 IT분야가 아닌 마케팅 분야에서도 많은 성과를 낼수 있다고 생각됩니다.(생산과 구매활동 및 경영활동에서 수집되는 정보를 분석하면 마케팅 전략을 짜는데 있어 효과적일 것입니다.) 가장 많이 활용되고 있는 IT분야에서 빅데이터 기술은 빅데이터 플랫폼, 프레임워크 , 시맨틱 검색, 인공지능 분야에서 다양한 형태로 활용됩니다.
국내동향을 살펴보면 한국전자통신연구원(ETRI)가 주도적으로 빅데이터 연구를 하고 있으며, 국가과제로도 다양한 연구기관에서 진행 중입니다. 국내 대기업도 많은 관심을 가지고 연구 진행 중입니다. 국외에서는 구글와 IBM이 빅데이터 기술을 주도하고 있는 현황이라고 합니다.
결론적으로 빅데이터 기술의 시장성은 다양한 형태로 가치를 가질 것으로 예측되며 데이터의 종류를 한정하지 않는다면 그 활용범위는 무궁무진할 것입니다. 또한 기존 산업을 더욱 성장하는 경제적, 사회적 효과도 이룩할 것 입니다. 이를 위해서는 빅데이터를 이용한 새로운 시장과 차별화된 전략이 필수적이겠죠. 앞으로 빅데이터 기술이 어느 분야에 효과적으로 활용되는지 지켜보는 것도 무척 재미있을 것 같습니다.