실전비급 엘라스틱 스택 6.4

엘라스틱서치, 로그스태시, 비츠, 키바나로 데이터 수집부터 분석, 시각화까지

김동우 , 김흥래 , 권택환 , 박진현 , 최용호 , 지음

한빛미디어 2018년 12월 05일 출간

작품소개

책소개

루씬, 엘라스틱서치 사용자를 위한
가볍고 빠르게 시작하는 엘라스틱 스택 입문서

개론부터 엘라스틱서치(Elasticsearch), 그다음에야 엘라스틱 스택(Elastic Stack)을 다루는 대신, 이 책은 데이터를 수집, 분석, 시각화하는 실무에 필요한 엘라스틱 스택의 활용에 집중한다. 이 책은 엘라스틱 스택을 이루는 로그스태시(Logstash), 비츠(Beat), 엘라스틱서치, 키바나(Kibana)를 데이터 수집, 분석, 시각화 파이프라인 관점에서 주요 개념을 간단, 명료하게 제시하고 실습으로 체득하도록 구성되었다. 아파치 웹 로그, 서버 및 네트워크, 시스템 상태 모니터링, 사용자와 행동 감사 파일럿 프로젝트는 엘라스틱 스택을 실무에 적용하는 데 좋은 지침이 될 것이다.

목차

CHPATER 1 로그스태시
1,1 로그스태시와 파이프라인
_1.1.1 입력 플러그인
_1.1.2 필터 플러그인
_1.1.3 출력 플러그인
1.2 파일럿 프로젝트로 아파치 웹 로그 데이터 수집
_1.2.1 파일럿 프로젝트 개요
_1.2.2 사전 준비
_1.2.3 파일로부터 데이터 수집
_1.2.4 데이터 가공
_1.2.5 엘라스틱서치로 인덱싱
_1.2.6 키바나로 시각화
1.3 로그스태시와 모니터링
_1.3.1 로그스태시와 모니터링 개요
_1.3.2 모니터링을 위한 환경 구성
_1.3.3 모니터링 기능 활성화
_1.3.4 로그스태시 모니터링

CHAPTER 2 비츠
2.1 Filebeat로 아파치 웹 로그 수집
2.1.1 Filebeat 개요
2.1.2 Filebeat의 구조
2.1.3 Filebeat의 Apache2 모듈로 아파치 웹 로그 수집
2.1.4 아파치 웹 로그 파일에서 데이터 수집
2.1.5 로그스태시 결합
2.2 Metricbeat로 호스트 메트릭 수집
_2.2.1 Metricbeat 설정
_2.2.2 Metricbeat로 데이터 수집
_2.3.3 키바나로 시각화
2.3 Packetbeat로 호스트 메트릭 수집
_2.3.1 Packetbeat 설정
_2.3.2 Packetbeat로 데이터 수집
_2.3.3 키바나로 시각화
2.4 Heartbeat로 호스트 메트릭 수집
_2.4.1 Heartbeat 설정
_2.4.2 Heartbeat로 데이터 수집
_2.4.3 키바나로 시각화
2.5 Auditbeat로 호스트 메트릭 수집
_2.5.1 Auditbeat 설정
_2.5.2 Auditbeat로 데이터 수집
_2.5.3 키바나로 시각화

CHAPTER 3 카바나
3.1 Discover
_3.1.1 타임 피커
_3.1.2 툴바
_3.1.3 도큐먼트 테이블
3.2 시각화
_3.2.1 영역, 라인, 막대형 차트
_3.2.2 히트맵
_3.2.3 파이 차트
_3.2.4 데이터 테이블
_3.2.5 메트릭
_3.2.6 게이지 / 골
_3.2.7 좌표 지도
_3.2.8 지역 지도
_3.2.9 태그 클라우드
3.3 Timelion
_3.3.1 Timelion 함수 사용
_3.3.2 조건 설정
_3.3.3 값 변환
3.4 Dashboard
_3.4.1 대시보드에 오브젝트 추가
_3.4.2 대시보드 차트 설정
_3.4.3 대시보드 저장 및 공유
_3.4.4 대시보드 임포트와 익스포트

부가기능
_Dev Tools
_머신러닝
_APM
_그래프
_모니터링

출판사 서평

☆ 이 책의 구성
1장에서는 로그스태시에 대해 알아보고 아파치 웹 로그 파일럿 프로젝트를 통해 각 기능을 따라하며 데이터 수집의 전 과정을 익힌다. 또한 수집한 데이터를 엘라스틱서치로 인덱싱하고 분석해본다.
2장에서는 로그스태시보다 경량화된 데이터 수집 도구인 비츠 제품군(Filebeat, Metricbeat, Packetbeat, Heartbeat, Auditbeat)과 다양한 예제를 통해 현업 환경에 적합한 비츠 제품을 선택하고 활용하는 시각을 키운다.

> 아파치 웹 로그 수집, 분석, 시각화
> 호스트 시스템 및 서비스 상태 모니터링, 분석, 시각화
> 네트워크 데이터 수집, 분석, 시각화
> 서버 상태 수집 및 알림
> 시스템상의 사용자와 프로세스를 감사하는 APM 구축

3장에서는 키바나로 지금까지 수집한 데이터로 라인, 영역, 막대 차트, 파이 차트, 좌표/지역 차트, 태그 클라우드 등으로 시각화하는 방법을 배우고 대시보드를 만들어본다.



☆ 이 책의 독자
> 데이터 수집, 분석, 시각화를 원하는 루씬, 엘라스틱서치 사용자
> 엘라스틱서치의 기초 이론은 건너뛰고 실무에 빠르게 활용하고 싶은 데이터 분석가, 엔지니어, 개발자
> 엘라스틱서치를 모니터링, 이상징후 탐지 APM 구축을 원하는 분

작가정보

저자(글) 김동우

저자_ 김동우검색엔진 컨설팅 회사의 컨설턴트이자 자바카페 커뮤니티의 운영진이다. 쇼핑몰, 음악 추천 앱, 도서관 검색 시스템, 마케팅 검색, 맛집 추천, 브랜드에 따른 감성동향 통계 등 검색엔진과 머신러닝 알고리즘을 활용한 콘텐츠 개인화 추천 서비스 개발을 담당하고 있다.

저자(글) 김흥래

저자_ 김흥래자바카페 커뮤니티의 운영진이다. 심심할 틈 없이 신기술이 쏟아지는 IT와 사랑에 빠진 개발자로, 개발자간의 소통과 교류를 즐긴다. 현재 네이버 비즈니스 플랫폼에서 다양한 서비스를 개발하고 있다.

저자(글) 권택환

저자_ 권택환네이버 쇼핑 플랫폼에서 백앤드Backend와 서버 개발을 맡고 있다. 자바카페 커뮤니티 운영진이기도 하다. 배우는 것을 좋아해 하루하루 성장함을 느낄 때가 가장 행복한 천상 개발자다.

저자(글) 박진현

저자_ 박진현군 복무 시절 SW 개발 장교로 임관한 게 계기가 돼 현재 국방 자원관리 전문 SI 업체를 운영하고 있다. 자바카페 커뮤니티의 운영진이며, 백앤드뿐 아니라 임베디드, 컴퓨팅, 사물인터넷 등 다양한 IT 분야에 많은 관심을 가지고 있다.

저자(글) 최용호

저자_ 최용호게임 서버 개발자로 열혈강호2 온라인, 화이트데이, 다함께 차차차, 어스토니시‘아 VS, 와리가리 삼총사, 하이브 등 다수의 게임 개발에 참여했다. 현재 넥슨에서 데브옵스DevOps 업무를 맡고 있으며 자바카페 커뮤니티의 운영진으로도 활동하고 있다. 클라우드와 자동화에도 관심이 많고, 이종격투기 선수로 활동했을 만큼 운동을 좋아한다. 항상 일과 삶의 균형을 맞추려고 노력하고 있다.

저자(글)

저자_ 황희정SK엔카닷컴에서 근무했었으며, 현재는 게임을 개발하고 있다. 자바카페 커뮤니티 운영진으로, 개발자와 소통하며 기술 공유하기를 좋아한다. 취미로 여행, 요가를 즐기고 있다. 즐거운 삶이 인생의 목표다.