파프리 블로그

제 7회 어드밴스드 컴퓨팅 콘퍼런스 안내

소셜 네트워크와 모바일 디바이스가 일반에 대대적으로 보급되면서 데이터를 쉽게 만들어 내게 되었습니다. 모바일 디바이스의 다양한 센서는 단순 멀티미디어 데이터뿐만아니라 위치 정보 같은 추가적인 정보도 다량 생산해 낼 수 있게 했습니다. 또 웹에 연결되어 있는 수 많은 센서들은 지금 이시간에도 쉬지 않고 데이터를 만들어 내고 있습니다.

이렇듯 데이터의 증가량은 '폭발적이다'라는 말로 부족할 정도로 엄청난 규모입니다. 문제는 이런 데이터가 의미있는 정보를 담고 있음은 분명한데, 그 데이터가 워낙에 크기 때문에 감당하기가 쉽지 않다는데에 있습니다. 그 동안 제한적인 규모의 데이터에서 제한적인 시간내에 정보를 추출해내는 분야가 주요 영역이었다면, 이제는 상상할 수 없을 정도의 어마어마한 규모의 데이터, 이른바 빅 데이터의 분석에 관한 연구가 주를 이루게 됩니다.

실제로 IT 전문가들이 소셜과 모바일이라는 키워드를 이을 차세대 키워드로 빅 데이터를 뽑고 있습니다. 그 만큼 빅데이터는 미래 지향적이고 꼭 분석해야 하는 분야입니다.

마침 이런 빅데이터에 대한 컨퍼런스가 있어 소개해 드리겠습니다.

 

모바일과 소셜을 넘는 빅데이터의 세계. IT 전문가 분들의 많은 참여 바라겠습니다.

구글 서치 글로브 - 무엇을 어떻게 보여 줄 것인가

구글이라는 기업은 참 재미있는 기업입니다. 기업이 하는 일, 미래를 내다보는 관점도 재미있지만 구글이 서비스하고 있는 것들 중에는 소위 경제성이 전혀 보이지 않는 것들도 많이 있습니다. "이게 돈이 되겠어?" 라고 의문을 던지게 만드는 것들 투성이인 기업이라고 할 수 있지요.



돈은 안 되지만 재미는 있는 서비스들이 많은 구글, 그 중에 하나가 바로 오늘 소개해 드릴 구글의 서치 글로브입니다.


참고로 웹 브라우저의 버전이 낮거나 3D 그래픽을 지원하지 않는 브라우저에서는 실행이 안 될 수도 있습니다. ( WebGL 이었나요. 자세한 기술은 잘 모르겠습니다. 만약 실행이 안되면 브라우저를 갈아타시는걸 권장합니다. +_+ )

구글은 기본적으로 검색엔진입니다. 자사의 데이터 베이스 안에 전세계의 수 많은 웹 페이지들의 정보들이 들어 있어, 검색을 원하는 사용자가 검색어를 입력하면 그 검색어와 가장 관련이 있을 법한 문서를 관련도 혹은 최신순으로 정렬해서 보여주는 역할을 하지요.

아마도 구글의 가장 큰 서비스이고 가장 기본이 되는 서비스가 바로 이 검색 서비스라는 것에는 이견이 없을 겁니다.

그렇다면 여기서 궁금한 것이 전세계 어느 곳에서 검색 요청이 이루어지고 있으며 어느 도시에거 가장 많이 발생할까요? 즉, 국가별로 구글을 사용하는 빈도, 도시별로 구글을 사용하는 빈도를 알아 볼 수 있다면 재밌겠지요. 그래서 나온 서비스가 구글 서치 글로브입니다.

위에 제가 걸어 놓은 링크를 따라가 보시면 위와 같은 지구본 모양이 나오게 됩니다. 지구본은 지구본인데 고슴도치처럼 뭐가 뾰족뾰족 튀어 나와있지요? 바로 구글 검색엔진에 날아오는 검색 요청들의 빈도수를 하루에 한번씩 계산해서 시각화 해 놓은 것입니다.

좀 더 자세 설명을 하자면,

- 튀어나온 막대기의 길이는 그 지역의 검색 횟수입니다.
- 막대기의 색은 언어의 종류입니다.

좀 더 자세한 내용은 구글의 공식 블로그에 가보시면 잘 설명이 되어 있습니다. ( 단, 영어라는거... )



이 지구본에서 흥미로운 것은 바로 아프리카 부분입니다. 전세계의 여러 나라에서 활발하게 구글로의 검색 요청이 들어오고 있는 가운데 아프리카 지역은 검은 색을 유지하고 있습니다. 문명의 전파가 아직 활발히 되지 않은 곳이라는 증거가 되겠네요. 인터넷이 계속 성장해서 아프리카 부분에도 밝은 색의 점들로 가득하기를 바란다는 구글의 메시지도 있었습니다.

The FlickrVerse, April 2005 poster: flickr's social network by GustavoG moved to http://23hq.com/GustavoG

▶ 이제는 어떻게 보여줄 것인가도 중요

21세기, 우리 주변에는 엄청난 수의 디지털 기기들이 있습니다. 그와 더불어 더 많은 수의 센서들이 있습니다. 이 센서들은 매초, 혹은 매 밀리초마다 데이터를 생산해내게 됩니다. 기상청이 설치해 놓은 기상관련 센서들은 계속해서 기상관련 데이터들을 수집하고 있으며, 구글의 경우에도 사용자가 어떤 요청을 했는지에 대한 어마어마한 양의 데이터를 가지고 있으며 그 데이터들은 매순간 엄청난 양으로 불어나고 있습니다.

이러한 데이터의 홍수에 빠져 있는 가운데, 중요해지고 있는 것이 데이터의 요약 기술입니다. 수 많은 데이터에서 의미있는 정보를 뽑아내기 위해서는 데이터의 요약이 필요한 경우가 있습니다. 예를 들어, 전 세계에 퍼져있는 기온 관측 센서에서 기온을 수집하여 해당 지역의 평균 기온을 계산해 낼 수 있지요.

binary easter egg by Rakka

하지만 이렇게 요약을 해서 데이터를 정리한다고 해도 인간의 두뇌는 선천적으로 숫자와 친하지 않은 모양입니다. 말로 설명을 하면 쉽게 알아 들을 것도 숫자로 써 놓으면 헷갈릴 때가 있습니다.

이럴때 필요한 기술이 시각화 기술입니다. 구글 서치글로브의 예에서도 단순히 국가의 이름과 검색 횟수를 정리한 표 형태의 데이터를 보여줬다면 공감하기 힘들고 분석하기도 힘들었겠죠.

하지만 그런 데이터 들을 지구본과 연결시켜 이해하기 쉽고 보기 좋게 시각화 하여 보는이로 하여금 이해하는데 필요한 노력을 줄여 줄 수 있습니다. 지구 온난화의 경우 수온 데이터를 그냥 숫자로 표현하는것 보다 높은 온도를 빨간색으로, 낮은 온도를 파란색으로 색칠한 지도 형태로 보여주는게 이해가 더 빠르지요.

What It Feels Like for an Uncle by qthomasbower

앞으로 수집되는 데이터 양이 갈 수록 더 많아 집니다. 이러한 가운데 데이터의 시각화 기술이 더 중요해지고 있는 것입니다. ^^

Information Superhighway by nickwheeleroz