스파크

책 이미지

eBook 미리보기

책 정보

· 제목 : 스파크 (빅데이터 관리자를 위한 클러스터 테크닉)
· 분류 : 국내도서 > 컴퓨터/모바일 > 프로그래밍 개발/방법론 > 데이터베이스 프로그래밍 > 데이터베이스 구축
· ISBN : 9791186697238
· 쪽수 : 256쪽
· 출판일 : 2016-09-29

책 소개

스파크의 기초적인 내용에서 그치지 않고, 스파크를 실무 운영 환경에 적용할 수 있는 실제적인 방법까지 알려준다.

1장. 스파크 작업 마무리하기
- 필요한 컴포넌트 설치
- 스파크로 이어지는 분산 컴퓨팅의 역사
- 스토리지로 다양한 포멧 활용하기
- 모니터링과 계측 이해하기

2장. 클러스터 관리
- 배경
- 스파크 컴포넌트
- 스파크 스탠드얼론
- 얀
- 메소스
- 비교

3장. 성능 튜닝
- 스파크 실행 모델
- 파티셔닝
- 데이터 셔플
- 시리얼라이제이션
- 스파크 캐시
- 메모리 관리
- 공유 변수
- 데이터 로컬리티

4장. 보안
- 아키텍처
- ACL
- 네트워크 보안
- 암호화
- 이벤트 로깅
- 커베로스
- 아파치 센트리

5장. 폴트 톨러런스 또는 작업 실행
- 스파크 작업의 라이프사이클
- 작업 스케줄링
- 폴트 톨러런스

6장. 스파크의 확장
- 데이터 웨어하우징
- 머신 러닝
- 외부 프레임워크
- 향후 과제
- 기업 적용 사례

저자소개

카이 사사키 (지은이) 정보 더보기

Treasure Data의 소프트웨어 엔지니어. 데이터를 가치 있게 만들기 위해 대규모의 분산 시스템을 개발하는 업무를 맡고 있다. 대규모 데이터를 처리하여 인공지능을 만드는 일에 대한 열정이 그를 머신러닝 분야로 이끌었다. TensorFlow.js 초기 개발진 중 한 명이기도 하며, 새로운 종류의 머신러닝 모델에서 요구되는 새로운 연산자를 추가하는 업무를 계속해서 맡고 있다. 2018년에 Google Open Source Peer Bonus를 받기도 했다.

펼치기

카이 사사키의 다른 책 >

브레넌 요크 (지은이) 정보 더보기

에어쇼의 파일럿을 부업 삼아 하고 있는 컴퓨터 사이언티스트다. 정말로 좋아하는 분야는 분산 컴퓨팅, 확장 가능한 아키텍처, 프로그래밍 언어다. 2014년부터 아파치 스파크의 핵심 기여자이며, 더 강력한 커뮤니티를 만드는 목표와 그래프X와 핵심 개발 환경을 개발함으로써 협업을 촉진하려는 목표를 가지고 있다. 기여 활동을 시작할 때부터 스파크를 접하고, 그때부터 이 프레임워크를 이용하여 애플리케이션을 운영 환경으로 이관해 왔다.

펼치기

브레넌 요크의 다른 책 >

일리야 가넬린 (지은이) 정보 더보기

원래 로봇 공학자였지만 데이터 전문가로 분야를 옮겼다. 미시건 대학에서 몇 년 동안 자동 탐사 로봇을 개발하였고, 또 몇 년간은 보잉에서 휴대폰과 라디오에 임베드된 DSP 소프트웨어를 개발하였으며, 캐피탈 원 데이터 이노베이션 랩에서 빅 데이터 세계에 발을 들였다. 차세대 분산 컴퓨팅 플랫폼을 개발하기 위해 필요한 것을 배운다는 목표를 가지고 있는 일리야는 아파치 스파크의 핵심 컴포넌트 기여자이자 아파치 에이펙스의 커미터다. 일리야는 제빵에 관심이 많으며, 요리사이자 스키어, 레이싱카 드라이버다.

펼치기

일리야 가넬린의 다른 책 >

에마 오리안 (지은이) 정보 더보기

확장 알고리즘에 깊이 빠져 있는 열정적인 빅 데이터 엔지니어다. 그녀는 빅 데이터 커뮤니티에서 컨퍼런스를 조직하고 발표하는 일과 오픈 소스 프로젝트에 기여하는 일 등에서 왕성한 활동을 하고 있다. 그녀는 조스-스파크-시퀄-레스트(jaws?spark?sql?rest)의 핵심 커미터이며, 스파크 SQL 기반의 데이터 웨어하우스 탐색가다. 에마는 빅데이터 분석을 의료 산업 분야에 도입하기 위해 노력해 왔으며, 거대한 데이터세트 기반의 통계적 지표 계산을 위한 전 과정을 개발해 왔다.

펼치기

에마 오리안의 다른 책 >

정동식 (옮긴이) 정보 더보기

경북대학교 경영학과를 졸업하였으며, 현재 LG CNS 빅데이터사업담당에서 일하고 있다. 금융, 물류, 제조 등 다양한 분야에서 빅데이터, 데이터웨어하우스, 비즈니스인텔리전스, CRM, SCM 등 데이터 관련 다수의 프로젝트를 수행하였다. 역서로 <하둡 애플리케이션 아키텍처>, <랄프 킴벌의 데이터 웨어하우스 툴킷 >, <머신 러닝 인 파이썬>등이 있다.

펼치기

정동식의 다른 책 >