비약적으로 발전을 거듭하는 ‘빅데이터’ 기술. 하루가 멀다하고 이를 기반으로 한 새로운 상품들이 등장하고 있고, ‘빅데이터 홍수’란 말이 나올 정도로 산업 전반이 앞을 다퉈 도입하는 상황이다. 기업이 빅데이터를 경쟁적으로 활용하고 있는 이유는 명확하다. 비즈니스 상의 이득을 확보할 여지가 남아있는 블루오션이기 때문이다.
실제 이를 기반으로 한 상품은 우리의 일상을 저울질하고 있다. 가령 오픈마켓에 접속해 전날 장바구니에 담아둔 물건을 훑어보고 주문 버튼을 누르려던 찰나에 등장하는 연관 상품과 할인쿠폰. 행위 자체는 일종의 마케팅 활동이지만, 이의 기조는 빅데이터가 관여한다.빅데이터는 우리가 남긴 일종의 발자국이다. 트렌드를 파악할 수 있으며 누적된 데이터로 예측할 수 있고 기업은 수익이 나는 방향으로 사업을 집행할 수 있다. 기업들이 대규모 전산시스템을 구축하고 HDD를 기반으로 한 스토리지 시스템에 데이터를 저장하고 관리하기 위해 천문학적인 비용을 투자하는 이유도 이와 같다.이 글을 읽는 지금 이 순간에도 현대인의 모든 일상은 데이터로 기록되고 다시 활용되는 그 날만을 향해 누적되고 있을지 모른다. 두 번째 시리즈에서는 빅데이터를 이끄는 원천 기술이자 모든 데이터의 집합소인 HDD의 과거부터 미래모습을 진단해 봤다.글: 김현동 테크니컬라이터(cinetique@naver.com)HDD의 태동과 현재
오늘날 HDD는 사실상 표준화된 기록 장치이자 스토리지 시스템의 근간으로 그 역할을 해내고 있다. 데이터 저장을 위한 목적으로 HDD 외의 저장장치에 대해 뚜렷한 대안을 찾을 수 없는 이유는 명확하다. 폭주하는 데이터를 효과적으로 수집하고 관리 가능한 스토리지는 HDD만 한 것이 없기 때문이다.대표적인 SNS 서비스인 페이스북 이용자들이 하루 동안 주고받는 사진의 수는 무려 20억 장에 달한다. 이들 데이터를 실시간으로 저장하기 위해서는 속도, 용량, 비용의 3가지 조건 중 어느 한 가지도 허투루 할 수 없다.HDD와 함께 오랜 기간 공존하며 대량의 데이터를 저장하는 데 사용된 또 다른 저장장치로는 테이프 드라이브(Tape Drive)가 빠질 수 없다. 다만 큰 용량에 비해 상대적으로 느린 속도는 ‘실시간’이라는 키워드와는 어울리지 않는다.한풀 꺾인 블루레이 드라이브(Bluray Drive) 또한 매한가지이며 현대 기술이라고 총아라 불리는 SSD도 HDD를 대적하기에는 여전히 부족한 용량이다. 이후 이의 기술을 보완한 제품이 씨게이트에서 등장했는데, SSD의 용량 한계를 극복한 솔리드스테이트 하이브리드 드라이브(Solid State Hybrid Drive, 이하 SSHD)가 그것이다.시스템의 증설이 이뤄지는 상당수 환경은 용량 부족 해결을 이유로 꼽는다. 가장 효과적인 저장장치이자 가장 명확하게 이유를 설명할 수 있는 유일무이한 제품으로 그 가치는 HDD만 한 것이 없다. 속도는 물론 활용성까지 두말할 필요 없다. 그렇지만 분위기가 이렇게 HDD를 향해 기운 것은 불과 반세기도 안 된 최근의 일이다.HDD는 무려 58년이 넘은 기간 동안 진화를 거듭했다. HDD의 뿌리이자 태동이라 할 수 있는 ‘라맥350(RAMAC 350)’이 처음 공개된 시기가 1956년 9월 4일이다. 당시에는 가장 앞선 기술이었지만 한계는 너무 명확했다. 초기 제품의 용량은 5MB에 불과했지만 방 한 칸을 차지할 정도로 크기가 거대했고, 무게 또한 971kg에 달했다. 오늘날의 HDD를 떠올리면 상상하기 힘든 형태를 하고 있어 사실상 특별한 용도 이외에 거의 활용되지 않았다. 그러나 이 기술은 오늘날 테라바이트에 달하는 용량의 스토리지로 진화하며 우리에게 데이터를 기반으로 한 스마트혁명을 선사하는데 주효했다.오늘날의 HDD와 가장 근접한 HDD는 1980년에 들어와서야 가능해졌다. 씨게이트가 선보인 ‘ST-506’ 모델을 기반으로 그 가능성이 예견됐다. 방 한 칸에 달하는 크기에서 5.25인치 크기로 대폭 축소됐고, 회전 속도는 3,600rpm으로 다양한 분야에 접목 가능성을 열었다. 이후 수요의 증가와 함께 코너(Conner Peripherals)와 맥스터(Maxtor)가 등장하며 스토리지 시장을 키웠으나, 순차적으로 씨게이트에 합병되면서 사실상 스토리지 업계는 씨게이트를 중심으로 재편되며 오늘에 이르게 됐다. 방대한 저장 공간과 빠른 성능을 제공하는 효과적인 저장장치라는 타이틀도 자연스럽게 HDD에 넘어가게 됐다.하지만 데이터는 HDD의 발전 속도보다 더욱 빠르게 증가하며 방대한 공간을 찾고 있다. 4K 해상도의 멀티미디어 콘텐츠면 충분할 줄 알았던 영상 분야는 한발 더 나아가 더욱 고해상도를 추구하기 시작했다. 그 결과 저장 공간의 수요는 기하급수적으로 늘어났으며, 같은 시각 각종 SNS의 대두와 함께 단위 시간당 생산되는 데이터의 양 또한 엄청난 속도로 증가하며 HDD의 발전을 재촉하고 있다.빅 데이터 시대, 왜 HDD 인가?
다양한 루트를 통해 수집된 데이터는 다양한 분야에 활용된다. 누적된 통계가 다양할수록 예측 가능한 확률은 더욱 신뢰성이 높아지고 가치 또한 상승한다. 우리가 일상에서 쉽게 마주하는 CCTV 등의 보안관제 시스템이 대표적인 운용사례다.
얼마 전까지만 해도 방대해 가치가 없을 것으로 취급받던 데이터가 지금은 황금알을 낳는 노다지로 탈바꿈해 귀한 몸값을 자랑한다. 그러다 보니 ‘정보를 리드하는 자가 세상을 이끈다.’는 말이 나올 정도로 데이터의 효과적인 관리가 중요해졌다. 단적으로 보자면 최근 화두인 빅데이터를 효과적으로 운용하기 위해서라도 스토리지는 그 어느 때보다 중요하다.고화질∙고음질로 진화한 각종 멀티미디어 콘텐츠는 잘 발달한 인터넷을 통해 실시간으로 PC나 스마트폰으로 전송된다. 대표적인 SNS는 사용자 개개인이 주체가 돼 생산하는 콘텐츠를 전송하는 통로의 역할을 하며, 소통 창구로써 제 임무를 다하고 있다.우리의 관심을 끄는 디지털 콘텐츠와 가공된 파생상품도 결국 데이터를 기반으로 발전했다. 그리고 이렇게 생성된 데이터는 효율적으로 운영되는 저장 공간을 요구하고 있다.이것이 우리가 느끼지 못하는 사이 데이터 스토리지 솔루션이 거대해지고 시장이 더욱 확대되고 있는 이유다. 수십억 세계인이 무심결에 이전과 다른 방법으로 과거와 비교할 수 없는 막대한 양의 데이터를 실시간으로 생산하는 시대가 온 것이다.
누적된 DB는 필요에 의해 2차 가공돼 새로운 부가가치를 창출하기도 한다. 빅데이터를 기반으로 한 신규 서비스의 등장이 가능해진 것이다. 현대인의 생활에 깊숙이 파고든 다양한 이벤트의 기반이 곧 빅데이터를 근간으로 파생된 결과물이라는 사실은 인지하기 어려울 정도로 대중화 됐다.
다만 눈에 보이지 않았기 때문에 ‘PC 시장의 축소 = HDD의 입지 축소’로 이해했고, 이것을 시장 전체 상황의 축소로 확대해석하는 인식의 오류를 범한 것도 있다. 디지털 시대를 살아가며 우리가 사용하는 데이터는 어딘가에 보관돼야 한다는 간단한 원리를 잠시 망각한 것이다. 바야흐로 HDD는 PC라는 비좁은 테두리를 벗어나 빅데이터를 활용하기 위한 기본 플랫폼으로써의 역할에 충실할 채비를 갖춘 것이다.미래의 HDD
언뜻 보기에 별 차이가 없어 보이는 HDD는, 태생별로 용처가 구분돼 설계 단계부터 특별한 대우를 받으며 차별화된 몸값을 내세우는 것이 현실이다. 이를 무시하고 NAS 등과 같이 개인이나 기업 내부용으로 구축하는 프라이빗 클라우드 또는 365일 ‘무중단·무정전’이라는 더 엄격한 조건을 따지는 보안감시(CCTV)를 목적으로 한 DVR(Digital Video Recorder) 시스템에 적용되는 모습을 찾는 것이 그리 어려운 일은 아니다. 하지만 이의 부작용은 예측할 수 없으며 사고로 이어질 경우 회복 가능 여부는 누구도 대답할 수 없다. 그래서 이와 같은 사용법에 경종을 울리고 늦기 전에 HDD의 선택에 대해 심각하게 고민해볼 필요가 있다.
이 같은 문제를 제기하는 가장 큰 이유는, 이들 시스템은 PC용 HDD에 적용되는 것보다 더욱 높은 신뢰성이 요구되며, 실제 NAS, DVR 등에 사용되는 HDD는 기술적으로 다른 환경에서 특별한 관리를 받고 있기 때문이다. 그리고 이 차이는 결국 스토리지 시스템의 안정성, 신뢰성과 직결된다.HDD의 구분은 크게 두 가지로 구분된다. PC에서 지금까지 사용해왔던 데스크톱 드라이브,그리고 서버나 데이터센터 등에 사용하는 엔터프라이즈 드라이브로 구분할 수 있다. 이 중 365일 24시간 동작하는 것을 염두에 둔 엔터프라이즈 드라이브는, 일반 PC 사용자들을 대상으로 제조된 데스크톱 HDD 보다 요구하는 조건이 까다롭다.최근 개인이나 기업이 내부 보안을 이유로 클라우드 시스템을 자체적으로 구축하는 것이 일반적이며, 24시간 감시하는 CCTV도 일상으로 스며들었다. 그러나 대개의 소비자는 별다른 고민 없이 데스크톱 드라이브를 선택하기 마련이다. 이런 시스템에 엔터프라이즈 드라이브를 사용하기엔 비용이 너무 많이 든다는 이유 때문이다.분명한 것은 개인 사용자의 패턴에 맞춰 제작된 데스크톱 드라이브는 안정성을 담보할 수 없다는 사실이다. 최고의 비용대비 효과를 기대한다면 데이터의 신뢰성은 빠뜨리면 안 되지만 이를 간과한 오류를 범한 것.제조사에 따라 차이는 있지만 HDD 제조사는 급변하는 시장의 흐름에 맞춘 제품을 선보이고 있다. 씨게이트의 NAS HDD나 서베일런스(Surveillance) 시리즈, WD의 클라우드 시리즈 등의 제품이 그 예시. 엔터프라이즈 드라이브만큼 큰 비용을 들이지 않아도 사용 환경에 맞는 수준의 높은 성능과 안정성을 기대할 수 있는 제품이다. 그리고 사용 환경의 변화와 시장의 요구는 HDD의 진화 속도를 더욱 재촉하고 있다. 향후 어떤 제품이 등장할지 아무도 예측할 수 없지만, HDD가 추구하는 가치는 분명하다. ‘사용자의 니즈 충족’이라는 명제의 해결이 그것이다.당신의 상상 그 너머
영화 ‘월터의 상상은 현실이 된다’ 속의 주인공과 같은 삶을 꿈꾼 적이 있는가? 이미 세상은 우리의 상상보다 더욱 빠른 속도로 변화하고 있다. 손안의 작은 휴대 단말기로 들어온 세상은 시간과 장소에 구애받지 않고 진화를 거듭하고 있다. 마음먹은 대로 내 뜻을 펼칠 수 있는 온라인 환경에서 빅데이터와 클라우드는 현시점을 대변하는 대표적인 트렌드로써 막강한 영향력을 발휘하는 상황이다.
HDD는 이들 서비스를 구축하기 위해 가장 베이스가 되는 스토리지 시스템의 핵심이자 데이터를 통해 부가가치를 창출하기 위해 갖춰야 하는 필수적인 장비로써 변함없이 가치를 인정받고 있다. 하지만 HDD의 변화와 달리 시장의 움직임은 안일하게 진행되고 있다. 용처를 고려하지 않는 제품의 선택, 그리고 그 결과로 발현되는 각종 부작용에 데이터복구 서비스가 우후죽순 범람했지만 이의 신뢰성은 누구도 담보할 수 없다. 오죽했으며 씨게이트가 자체적으로 데이터복구 서비스인 ‘레스큐’(+Rescue)를 선보이고 사용자의 피해를 줄이기 위해 서비스를 선보였을까 싶다.
빅데이터 시대에 사는 우리에게 중요한 것은 데이터의 가치 실현이고 이를 위해서는 올바른 데이터 보관이 선결 과제다. 아무리 좋은 데이터가 우리 곁을 스쳐 지나간다 해도, 이를 적재적소에 보관하고 관리할 수 없다면 트래픽만 유발하는 더미 데이터에 불과하다.
지금까지 데이터가 안착하는 최종 도착지이자 지금까지 무심했던 HDD의 현재부터 미래를 진단해봤다. 그렇기에 남는 한 가지 의문점은, 그토록 중요한 HDD이지만 정작 이의 선택은 무심했던 현대인에게 필요한 ‘선택’ 기준이다. 그 해답은 다음 편에서 확인할 수 있다.