[기술 블로그] 로플랫의 대용량 데이터 처리

1. 로플랫의 대용량 데이터 활용 오프라인 데이터를 다루고 있는 로플랫에서는 월간 4.5TB의 로그 데이터가 쌓이고 있습니다. 이는 매달 외장하드 하나를 위치 로그로만 채우는 어마어마한 용량인데요. 이처럼 방대한 양의 데이터를 다루기 위해서는 많은 사항을 고려해야 합니다. 예를 들어 한 사용자가 로플랫이 제공하는 서비스를 통해 일주일간의 데이터를 분석한다고 가정해보겠습니다. 이를 위해서는 지난 일주일간 쌓인 데이터 약 1TB를 모두 검색하는 과정이 필요합니다. 혹여 과거 90일간의 데이터를 확인한다고 가정하면 그간 쌓인 13.5TB의 로그 데이터에서 원하는 조건으로 검색해야 하는데, 결과를 보기 위해 소요되는 약 1분도 기..........

[기술 블로그] 로플랫의 대용량 데이터 처리에 대한 요약내용입니다.

자세한 내용은 아래에 원문링크를 확인해주시기 바랍니다.

원문링크 : [기술 블로그] 로플랫의 대용량 데이터 처리