[빅분기 1과목] 빅데이터 저장기술


[빅분기 1과목] 빅데이터 저장기술

빅데이터 저장 기술 대용량의 저장공간, 빠른 처리 성능, 확장성, 신뢰성, 가용성 등을 보장해야함 - 분산 파일 시스템 - 데이터 베이스 클러스터 - NoSQL 분산 파일 시스템 1. 구글 파일 시스템(GFS; Google File System) 파일을 64MB의 고정된 크기, 청크로 나눠서 각 청크와 여러 개의 복제본을 청크 서버에 분산하여 저장 <구성요소> - 클라이언트 - 마스터 - 청크 서버 2. 하둡 분산 파일 시스템(HDFS; Hadoop Distributed File System) 테라바이트, 페타바이트 이상의 대용량 파일을 분산된 서버에 저장하고 저장된 데이터를 빠르게 처리할 수 있게하는 분산 파일 시스템 구글 파일 시스템 논문에서 -> 또 논문을 낳아서 2006년에..........



원문링크 : [빅분기 1과목] 빅데이터 저장기술