IT 대기업, 소셜 미디어 서비스 등에서 빅데이터 분석 및 처리에 하둡(Apache Hadoop)을 앞다투어 사용하고 있습니다. 하둡은 대량의 자료를 적은 비용으로 수집 및 가공처리할 수 있도록 만들어진 자바(Java) 언어 기반의 프레임워크로, 대규모 데이터 세트를 분산 저장하고 처리해 줍니다.
기업들은 데이터 분석을 통해 새로운 시장을 개척하고 희소성있는 가치를 부여하며, 소비자들에게 필요한 정보를 적기에 제공할 수 있게 될 겁니다. 중소기업 또한 빅데이터는 꼭 다뤄야 할 필수 사항인 만큼, 빅데이터 관련 직무로 취업/이직을 꿈꾸는 분들께는 희소식이 아닐 수 없습니다.
커리큘럼 총 20차시
1차시Hadoop, HDFS 그리고 YARN
2차시Linux 설치 및 환경설정
3차시Hadoop 설치
4차시Hadoop 실행 및 HDFS 명령어
5차시Map Reduce를 이용한 Word count 구현 1
6차시Map Reduce를 이용한 Word count 구현 2
7차시CDC COVID-19 데이터를 이용한 월별 확진자 통계 1
8차시CDC COVID-19 데이터를 이용한 월별 확진자 통계 2
9차시CDC COVID-19 데이터를 이용한 연령별 확진자 통계
10차시사용자 정의 옵션 사용 1
11차시사용자 정의 옵션 사용 2
12차시사용자 정의 카운터 구현 1
13차시사용자 정의 카운터 구현 2
14차시MultipleOutputs 구현
15차시사용자 정렬 구현 1
16차시사용자 정렬 구현 2
17차시HIve 소개 및 설치
18차시HiveQL을 이용한 Map Reduce 연산 1
19차시HiveQL을 이용한 Map Reduce 연산 2
20차시Hive Java Client
수료 기준 · 유의사항
수료기준 — 진도율 100% 이상 · 총점 60점 이상 과 과정별 수료 처리 조건을 확인해 주세요.
본인인증 — 휴대폰 본인인증을 입과 시 (최초 1회), 진도학습 시 (1일 1회), 시험·과제·진행평가 시 수행합니다.
1일 진도제한 — 1일 최대 8시간까지 학습할 수 있습니다.
진도율 산정 — 학습한 차시가 아닌 학습시간 기준으로 산정되며, 차시별 인정시간의 50% 이상 학습 시 인정됩니다.