빅데이터 기획 및 분석, 주해종 외

빅데이터 특징 빠른의사결정을 덜 요구하며, 복잡하면서 양은 방대하고, 비정형데이터의 비중이 높고, 유연성이 높으며, 즉각적 대응이 가능하나 동시처리가 힘든 특징을 지니고 있다. 오픈 데이터 통계 프로그램 : 오픈소스 - CKAN, DKAN, OGPL 상용서비스 - SOCRATA, JUNARSAS, SPSS, R Program 빅데이터 시스템 클라우드 - 퍼블릭, 프라이빗, 하이브리드 오픈소스인 자바 소프트웨어 프레임워크의 하둡 Hadoop, 분산파일시스템 HDFS, 병렬분산처리 및 프로그래밍모델(Input -> Map -> Shuffle & Sort -> Reduce -> Output)의 맵리듀스로 시스템 구성 빅데이터 처리 과정 생성 : 내부데이터 - Database, File Management System 외부데이터 - 인터넷으로 연결한 파일, 멀티미디어, 스트림 2. 수집 : 내부데이터 수집 ETL - 추출 Extraction, 변환 Transformation, 전송 및 적재...

원문링크 : 빅데이터 기획 및 분석, 주해종 외