login
79009
Big Data Hadoop and Spark Developer 1년 수강 - 시험 제외
Big Data Hadoop and Spark Developer 1 년 수강 - 시험 제외 온라인 과정 영어로 제공 iLEARN Innovative Learning에서 제공
이 빅데이터 Hadoop 과정에서는 HDFS, YARN, MapReduce를 포함한 Hadoop과 Spark를 사용하는 빅데이터 프레임워크를 배웁니다. 또한 이 과정에서는 HDFS에 저장된 대규모 데이터 세트를 처리 및 분석하고 데이터 수집을 위해 Sqoop 및 Flume을 사용하는 Pig, Hive 및 Impala를 다룹니다.
Spark의 함수형 프로그래밍, Spark 애플리케이션 구현, Spark의 병렬 처리 이해, Spark RDD 최적화 기술 사용 등 Spark를 사용한 실시간 데이터 처리를 보여드립니다. 또한 Spark의 다양한 대화형 알고리즘을 배우고 데이터 양식을 생성, 변환 및 쿼리하는 데 Spark SQL을 사용합니다.
마지막으로, 은행, 통신, 소셜 미디어, 보험 및 전자상거래 분야에서 CloudLab을 사용하여 실제 산업 기반 프로젝트를 실행해야 합니다.
Big Data Hadoop and Spark Developer 과정은 ILX Group에서 제공합니다.
Big Data Hadoop and Spark Developer 온라인 과정 세부 정보
- 12개월 온라인 과정*에 대한12개월 온라인 액세스
- 이 과정을 완료하는 데 약 15시간이 소요될 것으로 예상됩니다
- 16개의 강의
- 무료 코스 포함 - 아파치 카프카
- 무료 과정 포함 - 핵심 Java
- 5개의 실제 산업 프로젝트
- 공식 모의고사 2회 제공
*사용 가능한 모든 코스 리소스는 코스 내 리소스 메뉴에 있습니다. E러닝 콘텐츠 자체의 다운로드 가능한 사본은 제공되지 않습니다. 사용자 가이드 PDF에는 코스 내레이션의 대본이 포함되어 있습니다.
온라인 과정 형식 및 특징
- 시험은 없지만 과정의 85%를 완료하고 최소 60%의 점수로 시뮬레이션 시험 1회를 완료해야 자격증을 취득할 수 있습니다.
Objectives
이 과정이 끝나면 여러분은 이해할 수 있을 것입니다:
- Hadoop 2.7, Yarn, MapReduce, Pig, Hive, Impala, HBase, Sqoop, Flume 및 Apache Spark와 같은 Hadoop 에코시스템의 다양한 구성 요소
- Hadoop 분산 파일 시스템(HDFS) 및 YARN 아키텍처
- 맵리듀스와 그 특성 및 고급 맵리듀스 개념 이해
- 다양한 유형의 파일 형식, Avro 스키마, Hive와 함께 Avro 사용, Sqoop 및 스키마 진화
- 플룸, 플룸 아키텍처, 소스, 플룸 싱크, 채널 및 플룸 구성
- HBase, 그 아키텍처 및 데이터 저장소, HBase와 RDBMS의 차이점 알아보기
- 복원력 있는 배포 데이터 세트(RDD) 자세히 알아보기
- Spark와 다양한 대화형 알고리즘의 일반적인 사용 사례
또한 다음을 수행할 수 있습니다:
- Sqoop 및 Flume을 사용하여 데이터 수집하기
- Hive 및 Impala에서 데이터베이스 및 테이블 생성, HBase 이해, 파티셔닝을 위해 Hive 및 Impala 사용
- Pig와 그 구성 요소에 대한 실무 지식 습득
- Spark에서 함수형 프로그래밍 수행 및 Spark 애플리케이션 구현 및 구축
- Spark 의 병렬 처리 및 Spark RDD 최적화 기술에 대한 심층적 인 이해 얻기
- Spark SQL을 사용하여 데이터 프레임 생성, 변환 및 쿼리하기
Who it is aimed at
빅 데이터 커리어 기회가 증가하고 있으며, Hadoop은 빅 데이터 아키텍처에서 반드시 알아야 할 기술로 빠르게 자리 잡고 있습니다. 빅 데이터 교육은 다음과 같은 IT, 데이터 관리 및 분석 전문가에게 적합합니다:
- 소프트웨어 개발자 및 아키텍트
- 분석 전문가
- 선임 IT 전문가
- 테스트 및 메인프레임 전문가
- 데이터 관리 전문가
- 비즈니스 인텔리전스 전문가
- 프로젝트 관리자
- 데이터 과학자 지망생
- 빅 데이터 분석 분야에서 경력을 쌓고자 하는 졸업생
Contents
이 과정에서는 다음 주제를 다룹니다:
- 과정 소개
- 레슨 1 - 빅데이터 및 Hadoop 에코시스템 소개
- 레슨 2 - HDFS 및 YARN
- 레슨3 - MapReduce 및 Sqoop
- 레슨 4 - Hive 및 Impala의 기초
- 레슨5 - Hive 및 Impala로 작업하기
- 레슨 6 - 데이터 형식의 종류
- 레슨 7 - 고급 Hive 개념 및 데이터 파일 파티셔닝
- 레슨 8 - Apache Flume과 HBase
- 레슨 9 - Pig
- 레슨 10 - 아파치 스파크의 기초
- 레슨 11 - Spark의 RDD
- 레슨 12 - Spark 애플리케이션 구현하기
- 레슨 13 - Spark 병렬 처리
- 레슨 14 - Spark RDD 최적화 기술
- 레슨 15 - Spark 알고리즘
- 레슨 16 - Spark SQL
- 무료 코스 - 아파치 카프카
- 무료 코스 - 핵심 Java
Prerequisites
이 과정을 수강하기 위한 전제 조건은 없습니다. 하지만 Core Java 및 SQL에 대한 지식이 어느 정도 있으면 도움이 됩니다. 핵심 Java 기술을 연마해야 하는 경우 무료 자기 주도형 온라인 과정인"Hadoop을 위한 Java 필수 요소"를 제공합니다.
Teacher language
Material course language
No, all prices on the website are excluding VAT. However, remember that VAT is always not applicable in the following cases:
billing to a non EU company or citizen billing to a non Italian EU company with a valid VIES VAT idYou can check the VAT id on VIES portal at this link: https://ec.europa.eu/taxation_customs/vies/
The website implements this rules automatically. However, you or your organization could be exempted by VAT application for other legal reason. In such a case contact us (info@innovativelearning.eu) so that we can analyze and confirm your case. If so, please don't submit subscriptions using the website: your request will be handled through manual order handling processing.
With the purchase of e-learning packages with 30 days and 1 year of duration, exam doesn’t have to be necessarily taken within the closing date of the account on the e-learning platform. The validity of the exam voucher code is 12 months starting from the issue date.
During the purchase process it is possible to register data and details of each participant.
The activation date of the package can be selected during the purchase process on our website. The days of access to the course, indicated in the title of the product, will be calculated starting from the selected date. Payment must be completed before the activation date.
30 days, 120d or 1 year are to be considered as the period, so the days, during which it is possible to access the purchased training courses on our e-learning platform. These periods start on the activation date selected during the purchase process on our webiste. The activation date can be chosen and selected within 30 days from the purchase date. If you need more flexibility, do not hesitate to contact us.
The main difference between these packages, beyond the duration of access, is that the 30 days and 1 year packages include the exam, while the 120 days package does not include the exam.
Exam voucher code is usually issued at the activation of the e-learning course, anyway it can also be issued at the end of the e-learning course of sent after 24/48 hours from the order date. In case of purchase for exam only, exam voucher code is issued at purchase confirmation, always after the receipt of payment.