스파크로 배우는 빅데이터 분석

씨익북스 편집부 2팀 지음

리브라북 2025년 05월 02일 출간

작품소개

책소개

"스파크로 배우는 빅데이터 분석은 현대 데이터 분석의 핵심 기술인 Apache Spark를 중심으로 대규모 데이터 처리의 원리를 심도 있게 탐구하는 책입니다. 이 책은 분산 컴퓨팅의 기본 개념부터 시작하여, Spark의 다양한 기능과 그 활용 방법을 단계별로 설명합니다. 데이터가 기하급수적으로 증가하는 시대에, 효율적으로 데이터를 처리하고 분석하는 기술은 필수적입니다. 이 책을 통해 독자들은 Spark의 RDD(Resilient Distributed Dataset)와 데이터프레임을 활용하여 대량의 데이터를 손쉽게 다루는 방법을 배우게 됩니다.

또한, 머신러닝과 실시간 데이터 처리에 대한 심층적인 내용을 다루어, 데이터 분석의 폭을 넓히고 실무에서의 적용 가능성을 높입니다. Spark MLlib를 활용한 머신러닝 모델 구축 및 평가 방법을 학습함으로써, 데이터 사이언스의 기초를 탄탄히 할 수 있습니다. 실시간 데이터 처리의 중요성이 커짐에 따라, Spark Streaming을 통해 실시간 데이터 분석을 수행하는 방법도 소개됩니다.

이 책은 초보자부터 중급자까지 모두에게 유용하며, 실제 사례를 통해 이론을 실무에 어떻게 적용할 수 있는지를 보여줍니다. 데이터 시각화 기술 또한 강조되어, 분석 결과를 효과적으로 전달할 수 있는 방법을 배울 수 있습니다. 독자들은 이 책을 통해 빅데이터 분석에 대한 포괄적인 이해를 얻고, 실질적인 기술을 습득하여 자신만의 데이터 분석 프로젝트를 추진할 수 있는 역량을 기르게 될 것입니다.

스파크로 배우는 빅데이터 분석은 데이터 과학의 미래를 선도할 수 있는 기회를 제공하며, 데이터 기반의 의사결정을 내리는 데 필요한 필수적인 지식과 기술을 갖출 수 있도록 돕는 훌륭한 자원이 될 것입니다. 데이터의 힘을 활용하여 혁신적인 솔루션을 창출하고자 하는 모든 이들에게 이 책을 추천합니다.

*생성형 AI를 활용하여 제작되었습니다.

*생성형 AI를 활용하여 제작되었습니다."

목차

"1. 스파크의 기본 개념 이해하기
2. 대규모 데이터의 정의와 중요성
3. 분산 컴퓨팅의 원리
4. RDD(Resilient Distributed Dataset)의 구조
5. 데이터프레임과 RDD의 차이점
6. 스파크 설치 및 환경 설정
7. 스파크의 아키텍처 개요
8. 데이터 로딩과 저장 방법
9. 스파크의 변환과 액션 연산
10. 필터링과 변환: 데이터 처리 기초
11. 머신러닝 개요 및 스파크 MLlib
12. 실시간 데이터 처리: 스트리밍의 이해
13. 스파크 스트리밍으로 실시간 분석하기
14. 데이터 시각화의 중요성
15. 스파크로 데이터 시각화하기
16. 데이터 탐색과 전처리 기법
17. 스파크 SQL을 이용한 쿼리 작성
18. 대규모 데이터의 샘플링 기법
19. 파이프라인 구축을 통한 데이터 분석
20. 클러스터 관리와 스케일링 전략
21. 성능 최적화를 위한 튜닝 기법
22. 스파크와 Hadoop의 차이점
23. 데이터 마이닝 기법 소개
24. 예측 모델링을 위한 기초 통계
25. 데이터 품질 관리 및 검증
26. 비정형 데이터 처리와 스파크
27. 스파크의 머신러닝 파이프라인
28. 모델 평가 및 선택 기준
29. 대규모 데이터의 시계열 분석
30. 스파크에서의 그래프 처리
31. 정형, 반정형, 비정형 데이터의 이해
32. 데이터베이스와의 연동: JDBC 활용
33. 스파크에서의 데이터 캐싱 전략
34. 배치 처리와 실시간 처리의 차이
35. ETL 프로세스와 스파크 활용
36. 하둡과 스파크의 통합 활용법
37. 스파크와 Python: PySpark 소개
38. 스파크에서의 데이터 시각화 도구
39. 데이터 전송과 통합 기술
40. 스파크에서의 오류 처리 및 디버깅
41. 대규모 데이터의 분산 저장 기술
42. 스파크의 커스터마이징 방법
43. 머신러닝 모델의 배포와 운영
44. 스파크의 최신 기능 및 업데이트
45. 데이터 인사이트 도출을 위한 전략
46. 클라우드 환경에서의 스파크 활용
47. 스파크의 보안 및 데이터 보호
48. 데이터 분석 프로젝트 관리 방법
49. 스파크를 활용한 사례 연구
50. 향후 빅데이터 분석의 트렌드와 전망"

작가정보

저자(글) 씨익북스 편집부 2팀

"세상을 아름다운 지식으로 물들이자" 위 모토를 바탕으로 다양한 지식 서적을 보급하고 있다.