교육문의

02-587-5180

평일 09:00~18:00

(토,일,공휴일 휴무)

1:1 온라인 상담
  1. 재직자교육
  2. 교육일정 및 신청

교육일정 및 신청

페이스북 트위터 구글

아파치 스파크기반 실시간 빅데이터 분석 플랫폼 구축

아파치 스파크기반 실시간 빅데이터 분석 플랫폼 구축
차수 교육기간 시간 교육장소 신청하기
1 2020년 02월 10일(월) ~ 02월 12일(수) 종료
  • 주간
  • 09:00~18:00
NCIA양재교육장(대면) 마감
2 2020년 05월 28일(목) ~ 05월 30일(토) 종료
  • 주간
  • 09:00~18:00
NCIA양재교육장(대면) 마감
3 2020년 10월 23일(금) ~ 10월 27일(화) 종료
  • 주간
  • 09:00~18:00
협약기업 방문교육 마감
4 2020년 12월 11일(금) ~ 12월 14일(월) 종료
  • 주간
  • 09:00~18:00
협약기업 방문교육 마감

교육목표

 

• 빅데이터 생태계의 기술들을 알아보고 기능들을 알 수 있다.
• 대용량 데이터를 처리하고 분석하기 위해 스칼라로 스파크 애플리케이션을 개발.
• 스파크아키텍처를 이해하고 애플리케이션을 개발할 수 있는 스파크코어를 이해하고 스파크쉘을 
 이용하여 대화형 데이터를 분석.
• 스파크 애플리케이션을 개발하고 실행할 수 있으며 스파크 스트리밍을 이용한 고속 데이터 
 스트림 처리방법을 이해하고 활용.
• 스파크SQL을 이해하고 상호대화형 대용량데이터를 분석할 수 있으며, 머신러닝을 이해하고 
  MLlib스파크 ML을 이용하여 머신러닝 애플리케이션을 개발.
• GraphX를 이용한 그래프 지향 데이터 분석과 그래프 알고리즘 구현방법을 이해하고
  다양한 클러스터매니저를 이용한 스파크 디플로이방법, 스파크 애플리케이션 모니터링방법을 이해.

 

교육내용

 

일차과목내용
1일차

빅데이터 생태계

• 하둡, 데이터 직렬화
• 칼럼기반 스토리지
• 메시징시스템
• No SQL, 분산 SQL 쿼리 엔진

스칼라 프로그래밍

• 함수형 프로그래밍
• 스칼라 기본
• 스칼라 애플리케이션
2일차

스파크 코어

• 스파크 아키텍처

• 스파크 애플리케이션 개발

• 스파크 쉘 

스파크 애플리케이션

• 애플리케이션 컴파일 및 실행
• 애플리케이션 모니터링 및 디버깅
• 스파크 스트리밍 애플리케이션
3일차

스파크 SQL 머신러닝

• 스파크 SQL 이해
• 스파크 SQL JDBC서버를 이용한 대화형 분석
• 머신러닝 이해
• 스마프 머신러닝 라이브러리 이해 및 실습
• 스파크 ML 이해 및 실습

스파크 그래프

 

디플로이와 모니터링

• GraphX 이해 및 실습
• 클러스터 매니저 (스탠드얼론 클러스터 매니저, 아파치 메소드, )
• 모니터링 (스탠드얼, 스파크애플리케이션)


   ​ 

교육대상

 

• 프로그래밍 경험자
• 실시간으로 데이터를 저장하고 분석하는 방법을 습득하고자 하는 개발자

 

특이점

 

• 스파크 주요한 모듈의 기능을 살펴본다.

 

수/강/후/기