"엄준일"과 함께하는 소프트웨어를 위한 플랫폼 이야기

R-Studio 입문 갑자기 뭔가 분석을 하고 싶었다. 하나의 큰 용량이 아닌 작고 많은 데이터를 분석을 하고자 했다. 이에 가장 적합한 도구는 무엇일까?빅데이터 트랜드를 대표하는 하둡(Hadoop)의 대용량 분산 파일 시스템(Distributed File System)과 맵리듀스(Map Reduce)는 하나의 큰 용량을 처리하는 데 적합한 플랫폼이다. 왜냐하면 하둡의 분산 파일 시스템은 읽기에 적합하며 추가하여 쓰기 작업을 하기에 매우 비효율 적이다.맵리듀스를 간단히 설명하면 맵(Map)은 매핑하는 작업, 즉 키 값이 되고, 리듀스(Reduce)는 처리 작업, 즉 키의 값(Value) 이 되겠다. 빅데이터에 접근하기에 앞서 잘 정제된 데이터가 필요하다. 하둡은 정제된 데이터를 만들기에 적합하다. 물론 ..