1.8 클라우드 컴퓨팅과 빅데이터

학습목표

본 장에서는 과거에는 상상조차 불가능했던 수천만 건의 거대한 빅데이터(Big Data)를 자유자재로 요리할 수 있게 만든 현대 인프라의 핵심, 클라우드 컴퓨팅(Cloud Computing)과 GPU의 혁명적 역할을 꿰뚫어 봅니다.

목차

이 장에서는 다음의 주제들을 학습합니다:

1.8.1 개요 및 도입

IT 기술과 스마트폰의 폭발적 보급으로 인해, 전 세계의 데이터 댐이 완전히 붕괴되어 쏟아지는 ‘초연결 시대’의 서막을 엽니다.

1.8.2 빅데이터와 데이터 분석의 관계 (광산과 광부)

페타바이트 급의 압도적인 거친 돌더미(데이터 광산) 속에서 파이썬과 통계라는 곡괭이를 들고 인사이트(지혜)라는 다이아몬드를 캐내는 분석가의 존재 이유를 비유로 학습합니다.

1.8.3 기존 분석을 가로막던 장벽

방대한 데이터를 집어삼키고 동시에 수만 개의 연산을 병렬로 처리하여 과거 컴퓨터 병목 한계를 산산조각 낸 최고 공신인 ‘클라우드와 엔비디아 GPU’의 강력한 위력을 이해합니다.

정리

뛰어난 분석 이론과 알고리즘은 과거에도 존재했습니다. 그러나 그것이 빛을 보지 못했던 이유는 거대한 빅데이터를 뒷받침해 줄 하드웨어의 체력이 턱없이 부족했기 때문입니다.

오늘날 우리는 수억 원 호가하는 슈퍼컴퓨터를 구매할 필요 없이, 마우스 클릭 몇 번이면 아마존이나 구글의 클라우드 서버(컴퓨팅 파워)와 막강한 GPU를 빌려 쓸 수 있는 진정한 기술의 대통합 르네상스 시대를 누리고 있습니다.