Apache Spark is a fast and open-source engine for big data processing.
NobleProg onsite live Apache Spark training courses demonstrate through hands-on practice how Spark fits into the Big Data ecosystem, and how to use Spark for data analysis.
Apache Spark training is available in various formats, including onsite live training and live instructor-led training using an interactive, remote desktop setup. Local Apache Spark training can be carried out live on customer premises or in NobleProg local training centers.
Testimonials
★★★★★
★★★★★
리처드는 매우 조용하고 체계적이며 분석적 통찰력을 가지고 있습니다. 물론 이러한 종류의 과정을 제시하는 데 필요한 자질
Kieran Mac Kenna
Course: Spark for Developers
Translated by
적용 가능한 시나리오 및 사례
zhaopeng liu - Fmr
Course: Spark for Developers
Translated by
사례 분석 张 国栋
国栋 张
Course: Spark for Developers
Translated by
이 세션의 모든 부분 Eric Han - F
Eric Han - Fmr
Course: Spark for Developers
Translated by
우리는 전체 환경에 대해 더 많이 알고 있습니다
John Kidd
Course: Spark for Developers
Translated by
트레이너는 수업을 재미 있고 재미있게 만들어 하루 종일 훈련에 도움이되도록했습니다
Ryan Speelman
Course: Spark for Developers
Translated by
트레이너는 유머와 실생활의 결합으로 탁월한 스타일을 가졌으므로 피사체를 가까이에서 볼 수있게되었습니다. 나는 미래에이 교수를 강력히 추천 할 것이다
Course: Spark for Developers
Translated by
Ernesto는 Spark을 사용하는 데 대한 높은 수준의 개념을 설명하고 훌륭한 모듈입니다
Michael Nemerouf
Course: Spark for Developers
Translated by
나는 호르헤가 기대하는 방법론을 좋아했다Experian Colombia S.A
Experian Colombia S.A
Course: Spark for Developers
Translated by
이것은 내가 찍은 연습 과정을 가진 최고의 손자 중 하나입니다
Laura Kahn
Course: Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP
Translated by
이것은 내가 13 년 경력으로 쌓은 최고의 온라인 교육 중 하나입니다. 앞으로도 힘써주세요
Course: Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP
Translated by
리차드는 강의 계획서에없는 것에 관해 준 관련 질문을하고 싶을 때 매우 기꺼이 우회했습니다. 설명은 분명했고 그는 우리에게 준 조언에 대해주의를 기울였다.
ARM Limited
Course: Spark for Developers
Translated by
나는 아주 많이 좋아 VM
교사는 주제 뿐만 아니라 다른 주제에 대 한 매우 지식이 있었다, 그는 매우 친절 하 고 친절 했다
나는 두바이의 시설을 좋아 했다.
Safar Alqahtani - Elm Information Security
Course: Big Data Analytics in Health
Translated by
트레이너는 유머와 실생활의 결합으로 탁월한 스타일을 가졌으므로 피사체를 가까이에서 볼 수있게되었습니다. 나는 미래에이 교수를 강력히 추천 할 것이다
Course: Spark for Developers
Translated by
이것은 내가 13 년 경력으로 쌓은 최고의 온라인 교육 중 하나입니다. 앞으로도 힘써주세요
Course: Artificial Intelligence - the most applied stuff - Data Analysis + Distributed AI + NLP
This course is aimed at developers and data scientists who wish to understand and implement AI within their applications. Special focus is given to Data Analysis, Distributed AI and NLP.
Alexio는 이기종 스토리지 시스템을 통합하고 애플리케이션이 메모리 속도로 데이터와 상호 작용할 수 있도록하는 오픈 소스 가상 분산 스토리지 시스템입니다 Intel, Baidu 및 Alibaba와 같은 회사에서 사용합니다 교육 강사진은 Alexio를 사용하여 스토리지 시스템과 다양한 계산 프레임 워크를 연결하고 Alluxio를 사용하여 응용 프로그램을 생성 할 때 멀티 테라 바이트 규모의 데이터를 효율적으로 관리하는 방법을 학습합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Alluxio로 응용 프로그램 개발 하나의 네임 스페이스를 유지하면서 큰 데이터 시스템과 응용 프로그램을 연결하십시오 모든 스토리지 형식의 큰 데이터에서 가치를 효율적으로 추출합니다 작업 부하 성능 향상 독립 실행 형 또는 클러스터 된 Alluxio 배포 및 관리 청중 데이터 과학자 개발자 시스템 관리자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
빅 데이터 분석은 상관 관계, 숨겨진 패턴 및 기타 유용한 통찰력을 발굴하기 위해 대량의 다양한 데이터 세트를 검사하는 프로세스를 필요로합니다 보건 산업은 방대한 양의 복잡한 이기종 의료 및 임상 데이터를 보유하고 있습니다 건강 데이터에 대용량 데이터 분석을 적용하면 의료 서비스 제공 개선에 대한 통찰력을 얻을 수있는 잠재력이 커집니다 그러나 이러한 데이터 세트의 엄청난 양은 임상 환경에 대한 분석 및 실제 응용에 큰 문제를 제기합니다 강사가 진행되는이 실습 (원격)에서는 참가자가 일련의 손을 이용한 라이브 랩 연습을 통해 건강에 큰 데이터 분석을 수행하는 방법을 배웁니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Hadoop MapReduce 및 Spark와 같은 대규모 데이터 분석 도구 설치 및 구성 의료 데이터의 특성 이해 큰 데이터 기술을 적용하여 의료 데이터 처리 건강 응용 프로그램의 맥락에서 큰 데이터 시스템과 알고리즘을 연구하십시오 청중 개발자 데이터 과학자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 노트 이 과정에 대한 맞춤 교육을 요청하려면 Google에 문의하여 준비하십시오 .
많은 실제 문제가 그래프로 설명 될 수 있습니다 예를 들어, 웹 그래프, 소셜 네트워크 그래프, 열차 네트워크 그래프 및 언어 그래프 이 그래프는 매우 큰 경향이 있습니다 이를 처리하려면 특수 도구 세트와 프로세스가 필요하며 이러한 도구와 프로세스를 그래프 컴퓨팅 (Graph Analytics)이라고도합니다 교육 강좌를 통해 참가자는 그래프 데이터 처리를위한 기술 오퍼링 및 구현 방법에 대해 학습합니다 목표는 실제 세계의 물체, 특성 및 관계를 식별 한 다음 이러한 관계를 모델화하고 그래프 컴퓨팅 접근 방식을 사용하여 데이터를 처리하는 것입니다 우리는 일련의 사례 연구, 핸드 슨 연습 및 라이브 배포를 단계별로 수행하면서 광범위한 도구로 시작하여 폭 넓은 개요로 시작합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 그래프 데이터가 지속되고 트래버스되는 방식 이해 주어진 작업에 가장 적합한 프레임 워크 선택 (그래프 데이터베이스에서 일괄 처리 프레임 워크에 이르기까지) Hadoop, Spark, GraphX 및 Pregel을 구현하여 여러 컴퓨터에서 병렬로 그래프 컴퓨팅 수행 그래프, 프로세스 및 순회의 관점에서 실제 세계의 큰 데이터 문제를 봅니다 청중 개발자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
Hortonworks Data Platform은 오픈 소스 Apache Hadoop 지원 플랫폼으로 Apache Hadoop 에코 시스템에서 큰 데이터 솔루션을 개발하기위한 안정적인 토대를 제공합니다 이 강습 된 라이브 교육은 Hortonworks를 소개하고 Spark + Hadoop 솔루션의 배포를 통해 참가자들을 안내합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Hortonworks를 사용하여 대규모로 Hadoop을 안정적으로 실행할 수 있습니다 Spark의 민첩한 분석 워크 플로우로 Hadoop의 보안, 거버넌스 및 운영 기능을 통합하십시오 Hortonworks를 사용하여 Spark 프로젝트의 각 구성 요소를 조사, 검증, 인증 및 지원하십시오 구조화, 비정형, inmotion 및 atrest를 포함한 다양한 유형의 데이터 처리 청중 Hadoop 관리자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
스트림 처리는 "동작중인 데이터"의 실시간 처리, 즉 수신되는 데이터에 대한 계산을 수행하는 것을 의미합니다 이러한 데이터는 센서 이벤트, 웹 사이트 사용자 활동, 금융 거래, 신용 카드 스 와이프, 클릭 스트림 등과 같은 데이터 소스로부터의 연속 스트림으로 읽습니다 스트림 처리 프레임 워크는 많은 양의 들어오는 데이터를 읽고 거의 즉시 귀중한 통찰력을 제공합니다 강사가 진행된이 실습 (현장 또는 원격)에서 참가자는 기존의 대용량 데이터 저장 시스템 및 관련 소프트웨어 응용 프로그램 및 마이크로 서비스와 서로 다른 스트림 처리 프레임 워크를 설정하고 통합하는 방법을 배우게됩니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Spark Streaming 및 Kafka Streaming과 같은 다양한 Stream Processing 프레임 워크 설치 및 구성 작업에 가장 적합한 프레임 워크를 이해하고 선택하십시오 연속적으로, 동시에, 그리고 기록적인 방식으로 데이터의 프로세스 Stream Processing 솔루션을 기존 데이터베이스, 데이터웨어 하우스, 데이터 레이크 등과 통합합니다 가장 적합한 스트림 처리 라이브러리를 엔터프라이즈 애플리케이션 및 마이크로 서비스와 통합 청중 개발자 소프트웨어 아키텍트 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 노트 이 과정에 대한 맞춤 교육을 요청하려면 Google에 문의하여 준비하십시오 .
Magellan은 대용량 데이터에서 지형 공간 분석을위한 오픈 소스 분산 실행 엔진입니다 Apache Spark 위에 구현 된 Spark SQL을 확장하고 지형 공간 분석을위한 관계형 추상화를 제공합니다 이 강사가 진행된 실습 교육에서는 지형 공간 분석을 구현하기위한 개념과 접근 방식을 소개하고 Magellan on Spark를 사용하여 예측 분석 응용 프로그램을 작성하여 참가자들을 안내합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 규모의 지형 공간 데이터 세트를 효율적으로 쿼리, 구문 분석 및 결합 비즈니스 인텔리전스 및 예측 분석 응용 프로그램에서 지형 공간 데이터 구현 공간 컨텍스트를 사용하여 모바일 장치, 센서, 로그 및 웨어러블의 기능 확장 청중 응용 프로그램 개발자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
Apache Spark's learning curve is slowly increasing at the begining, it needs a lot of effort to get the first return. This course aims to jump through the first tough part. After taking this course the participants will understand the basics of Apache Spark , they will clearly differentiate RDD from DataFrame, they will learn Python and Scala API, they will understand executors and tasks, etc. Also following the best practices, this course strongly focuses on cloud deployment, Databricks and AWS. The students will also understand the differences between AWS EMR and AWS Glue, one of the lastest Spark service of AWS.
목표: 이 과정은 Apache Spark를 소개합니다 학생들은 Spark이 Big Data 생태계에 어떻게 적용되는지, 그리고 데이터 분석을 위해 Spark을 사용하는 방법을 배웁니다 이 과정에서는 대화 형 데이터 분석을위한 Spark 셸, Spark 내부 구조, Spark API, Spark SQL, Spark 스트리밍 및 기계 학습 및 GraphX를 다룹니다 청중 : 개발자 / 데이터 분석가 .
파이썬은 명확한 구문 및 코드 가독성으로 유명한 고 레벨 프로그래밍 언어입니다 Spark는 큰 데이터를 쿼리, 분석 및 변환하는 데 사용되는 데이터 처리 엔진입니다 PySpark는 사용자가 Spark을 Python과 인터페이스 할 수있게합니다 교습, 실제 교육을 통해 참가자는 파이썬과 스파크를 함께 사용하여 큰 데이터를 손으로 연습 할 때 분석 할 수 있습니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Spark with Python을 사용하여 Big Data를 분석하는 방법 배우기 실제 상황을 모방 한 연습 문제 PySpark를 사용하여 큰 데이터 분석을위한 다양한 도구와 기술 사용 청중 개발자 IT 전문가 데이터 과학자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
Spark SQL은 구조화 된 데이터와 구조화되지 않은 데이터로 작업하는 Apache Spark의 모듈입니다 Spark SQL은 수행되는 계산뿐 아니라 데이터의 구조에 대한 정보를 제공합니다 이 정보는 최적화를 수행하는 데 사용될 수 있습니다 Spark SQL의 두 가지 일반적인 용도는 다음과 같습니다 SQL 쿼리를 실행합니다 기존의 하이브 설치에서 데이터를 읽습니다 강사가 진행된이 실습 (현장 또는 원격)에서 참가자는 Spark SQL을 사용하여 다양한 유형의 데이터 세트를 분석하는 방법을 학습합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Spark SQL을 설치하고 구성하십시오 Spark SQL을 사용하여 데이터 분석을 수행하십시오 데이터 형식을 다른 형식으로 쿼리하십시오 데이터 및 쿼리 결과를 시각화합니다 청중 데이터 분석가 데이터 과학자 데이터 엔지니어 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 노트 이 과정에 대한 맞춤 교육을 요청하려면 Google에 문의하여 준비하십시오 .
MLlib는 Spark의 기계 학습 (ML) 라이브러리입니다 그 목표는 실용적인 기계 학습을 확장 가능하고 쉽게 만들어주는 것입니다 분류, 회귀, 클러스터링, 협업 필터링, 차원 감소, 하위 레벨 최적화 프리미티브 및 상위 레벨 파이프 라인 API 등 일반적인 학습 알고리즘 및 유틸리티로 구성됩니다 두 개의 패키지로 나뉩니다 sparkmllib는 RDD 위에 구축 된 원래 API를 포함합니다 sparkml은 ML 파이프 라인을 구성하기 위해 DataFrames 위에 구축 된 고급 API를 제공합니다 청중 이 과정은 Apache Spark 용 내장 라이브러리를 활용하고자하는 엔지니어 및 개발자를 대상으로합니다 .
.jpg "food and drug administration (fda)")
_ireland.gif "environmental protection agency (epa) ireland")
.jpg "european southern observatory (eso)")
