[Elastic] 스터디 - 데이터 수집 엔진 로그스테시 특징


[Elastic] 스터디 - 데이터 수집 엔진 로그스테시 특징

Logstash 실시간 파이프라인 기능을 가진 오픈소스 데이터 수집 엔진 (Data Flow Engine) 플러그인 기반(ex. elastic beats)의 데이터 수집 및 처리 엔진 광범위한 플러그인이 구비 -> 다양한 아키텍처에서 손쉽게 데이터를 수집, 처리, 전달 가능 서로 다른 소스의 데이터를 탄력적으로 통합하고, 사용자가 선택한 목적지(ex. elastic search)로 데이터를 정규화 프로세싱은 하나 이상의 파이프라인으로 구성 각 파이프라인에서 하나 이상의 입력 플러그인이 내부 대기열에 배치된 데이터를 수신하거나 수집 메모리 구성 또는 디스크 구성 사용 가능 메모리 구성 기본구성으로 가볍게(작게) 구성 디스크 구성 안정성과 복원력을 향상시키도록 구성 (더 크고 영구적) 다양한 데이터를 통합하고 정규화해서 필요한 부분의 데이터를 Filtering, Streaming 가능 포맷이나 스키마에 관계없이, 모든 데이터를 수집하고 강화 및 통합하기 위한 Elastic Stack의 ...


#csv #수집 #스택 #스터디 #아키텍처 #엔진 #엘라스틱 #입력 #출력 #코덱 #파이프라인 #플러그인 #설정 #사이언스 #elastic #elk #json #log #log4j #logstash #데이터 #데이터수집 #디스크 #로그스테시 #메모리 #필터링

원문링크 : [Elastic] 스터디 - 데이터 수집 엔진 로그스테시 특징