Stream processing Training Courses | Stream Processing Training Courses
현지의 강사 생생한 Stream Processing 교육 과정은 대화식 토론과 Handson 연습을 통해 스트림 처리의 기본 및 고급 주제를 실습합니다 스트림 처리 교육은 "현장 실습"또는 "원격 실습"으로 사용할 수 있습니다 현장 실습은 고객 구내에서 현지에서 실시 할 수 있습니다 대한민국 또는 NobleProg 기업 교육 센터에서 대한민국 원격 라이브 교육은 대화 형 원격 데스크톱을 통해 수행됩니다 NobleProg 지역 교육 제공자.
Machine Translated
회원 평가
★★★★★
★★★★★
나는 이론과 실제 실험실 간의 좋은 균형을 즐겼다.
N. V. Nederlandse Spoorwegen
Course: Apache Ignite: Improve Speed, Scale and Availability with In-Memory Computing
Machine Translated
나는 일반적으로 Ignite에 대한 더 많은 이해로부터 이익을 얻었습니다.
N. V. Nederlandse Spoorwegen
Course: Apache Ignite: Improve Speed, Scale and Availability with In-Memory Computing
Machine Translated
나는 좋은 강의를 가장 좋아했다.
N. V. Nederlandse Spoorwegen
Course: Apache Ignite: Improve Speed, Scale and Availability with In-Memory Computing
Machine Translated
토론 된 주제의 키 포인트 불러오기/검토
Paolo Angelo Gaton - SMS Global Technologies Inc.
Course: Building Stream Processing Applications with Kafka Streams
Machine Translated
교육 주제 및 트레이너 참여
Izba Administracji Skarbowej w Lublinie
Course: Apache NiFi for Administrators
Machine Translated
교육에 참석 하는 사람들과의 커뮤니케이션.
Andrzej Szewczuk - Izba Administracji Skarbowej w Lublinie
Course: Apache NiFi for Administrators
Machine Translated
-
Roxane Santiago - SMS Global Technologies Inc.
Course: Building Stream Processing Applications with Kafka Streams
Machine Translated
운동의 유용성
Algomine sp.z.o.o sp.k.
Course: Apache NiFi for Administrators
Machine Translated
나는 정말 그 훈련을 즐겼다. 안톤은 많은 지식을 가지고 있으며 필요한 이론을 매우 접근하기 쉬운 방식으로 제시했다. 교육은 많은 흥미로운 연습 이었으므로 우리는 처음부터 알고있는 기술과 접촉 해 왔습니다.
Apache Apex 는 스트림 및 일괄 처리를 통합하는 YARN 기본 플랫폼입니다. 확장 성, 성능, 내결함성, 상태 저장, 보안, 분산 및 간편한 작동 방식으로 큰 데이터 이동을 처리합니다.
강사가 진행하는이 실시간 교육에서는 Apache Apex 의 통합 스트림 처리 아키텍처를 소개하고 Hadoop Apex를 사용하여 분산 응용 프로그램을 만드는 과정을 안내합니다.
이 훈련이 끝나면 참가자는 다음을 할 수 있습니다.
- 원본 및 싱크 커넥터, 일반적인 데이터 변환 등과 같은 데이터 처리 파이프 라인 개념을 이해합니다. - Apex 애플리케이션 구축, 확장 및 최적화 - 최소한의 대기 시간으로 안정적으로 실시간 데이터 스트림을 처리합니다. - Apex Core 및 Apex Malhar 라이브러리를 사용하여 신속한 응용 프로그램 개발 가능 - Apex API를 사용하여 기존 Java 코드 작성 및 재사용 - Apex를 처리 엔진으로 다른 응용 프로그램에 통합 - Apex 애플리케이션 조정, 테스트 및 확장
Apache Beam은 병렬 데이터 처리 파이프 라인을 정의하고 실행하기위한 개방형 소스 통합 프로그래밍 모델입니다 Apache Apex, Apache Flink, Apache Spark 및 Google Cloud Dataflow와 같이 Beam의 지원되는 분산 처리 백엔드 중 하나에서 실행되는 배치 및 스트리밍 파이프 라인을 모두 실행할 수있는 능력에 있습니다 Apache Beam은 다른 저장 매체와 데이터 소스간에 데이터를 이동하고, 데이터를보다 바람직한 형식으로 변환하고, 새로운 시스템으로 데이터를로드하는 것과 같은 ETL (Extract, Transform 및 Load) 태스크에 유용합니다 이 강사가 진행된 실시간 교육 (현장 또는 원격)에서 참여자는 독립적 인 병렬 처리를 위해 큰 데이터 세트를 더 작은 청크로 분해하기위한 데이터 처리 파이프 라인을 정의하는 Java 또는 Python 응용 프로그램에서 Apache Beam SDK를 구현하는 방법을 학습합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 Apache Beam을 설치하고 구성하십시오 단일 프로그래밍 모델을 사용하여 Java 또는 Python 응용 프로그램에서 일괄 처리와 스트림 처리를 모두 수행 할 수 있습니다 여러 환경에서 파이프 라인을 실행하십시오 청중 개발자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 노트 이 과정은 앞으로 스칼라에서 사용할 수 있습니다 협의를 위해 저희에게 연락하십시오 .
아파치 Flink는 확장 가능한 스트림과 배치 데이터 처리를 위한 오픈 소스 프레임 워크입니다.
이 강사 주도, 라이브 교육은 분산 스트림과 배치 데이터 처리의 원리와 접근 방식을 소개 하 고, 아파치 Flink에서 실시간 데이터 스트리밍 응용 프로그램의 생성을 통해 참가자 들을 안내 합니다.
이 교육을
참가자는 다음을 수행할 수 있습니다.
- 데이터 분석 응용 프로그램 개발을 위한 환경을 설정 합니다. - 는 Flink 기반, 내결함성, 데이터 스트리밍 응용 프로그램을 패키지, 실행 및 모니터링 합니다. - 다양 한 워크 로드를 관리 합니다. - 를 사용 하 여 고급 분석을 수행 합니다. - 다중 노드 Flink 클러스터를 설정 합니다. - 는 성능을 측정 하 고 최적화 합니다. - 는 다양 한 빅 데이터 시스템과 Flink를 통합 합니다. - 는 Flink 기능을 다른 빅 데이터 처리 프레임 워크의 기능과 비교 합니다. 코스의
Stream Processing 은 "동작중인 데이터"의 실시간 처리, 즉 수신되는 데이터에 대한 계산을 수행하는 것을 의미합니다. 이러한 데이터는 센서 이벤트, 웹 사이트 사용자 활동, 금융 거래, 신용 카드 스 와이프, 클릭 스트림 등과 같은 데이터 소스에서 연속 스트림으로 읽습니다. Stream Processing 프레임 워크는 많은 양의 들어오는 데이터를 읽고 거의 즉시 귀중한 통찰력을 제공합니다.
이 강사가 진행하는 실시간 교육 (현장 또는 원격)에서 참가자는 기존의 대용량 데이터 저장 시스템 및 관련 소프트웨어 응용 프로그램 및 마이크로 서비스와 서로 다른 Stream Processing 프레임 워크를 설정하고 통합하는 방법을 배우게됩니다.
이 훈련이 끝나면 참가자는 다음을 할 수 있습니다.
- Spark Streaming 및 Kafka Streaming과 같은 다양한 Stream Processing 프레임 워크를 설치하고 구성하십시오. - 작업에 가장 적합한 프레임 워크를 이해하고 선택하십시오. - 연속적으로, 동시에, 그리고 레코드별로 프로세스. - Stream Processing 솔루션을 기존 데이터베이스, 데이터웨어 하우스, 데이터 레이크 등과 통합합니다. - 가장 적합한 스트림 처리 라이브러리를 엔터프라이즈 응용 프로그램 및 마이크로 서비스와 통합하십시오.
Kafka Streams는 카프카 (Cafka) 메시징 시스템으로 데이터를주고받는 마이크로 애플리케이션을 구축하기위한 클라이언트 측 라이브러리입니다. 전통적으로 Apache Kafka 는 메시지 생성자와 소비자 간의 데이터를 처리하기 위해 Apache Spark 또는 Apache Storm 에 의존했습니다. 응용 프로그램 내에서 Kafka Streams API를 호출하면 Kafka 내에서 직접 데이터를 처리 할 수 있으므로 처리를 위해 별도의 클러스터로 데이터를 전송할 필요가 없습니다.
강사가 진행하는이 실습에서는 Kafka Streams를 스트림 처리를 위해 Apache Kafka 와 데이터를주고받는 샘플 Java 응용 프로그램 세트에 Kafka Streams를 통합하는 방법을 배우게됩니다.
이 훈련이 끝나면 참가자는 다음을 할 수 있습니다.
- 다른 스트림 처리 프레임 워크에 비해 Kafka Streams 기능 및 이점 이해 - 카프카 클러스터 내에서 스트림 데이터를 직접 처리합니다. - Kafka 및 Kafka Streams와 통합되는 Java 또는 Scala 응용 프로그램 또는 마이크로 서비스 작성 - 입력 카프카 항목을 출력 카프카 항목으로 변환하는 간결한 코드 작성 - 응용 프로그램 빌드, 패키지 및 배포
Confluent KSQL is a stream processing framework built on top of Apache Kafka. It enables real-time data processing using SQL operations.
This instructor-led, live training (onsite or remote) is aimed at developers who wish to implement Apache Kafka stream processing without writing code.
By the end of this training, participants will be able to:
- Install and configure Confluent KSQL. - Set up a stream processing pipeline using only SQL commands (no Java or Python coding). - Carry out data filtering, transformations, aggregations, joins, windowing, and sessionization entirely in SQL. - Design and deploy interactive, continuous queries for streaming ETL and real-time analytics.
Format of the Course
- Interactive lecture and discussion. - Lots of exercises and practice. - Hands-on implementation in a live-lab environment.
Course Customization Options
- To request a customized training for this course, please contact us to arrange.
Apache NiFi (Hortonworks DataFlow)는 시스템간에 데이터를 이동, 추적 및 자동화 할 수있는 실시간 통합 데이터 물류 및 간단한 이벤트 처리 플랫폼입니다. 그것은 흐름 기반 프로그래밍을 사용하여 작성되며 실시간으로 데이터 흐름을 관리하기위한 웹 기반 사용자 인터페이스를 제공합니다.
이 강사가 진행하는 실시간 교육 (현장 또는 원격)에서 참가자는 실제 실험 환경에서 Apache NiFi 를 배포 및 관리하는 방법을 학습합니다.
이 훈련이 끝나면 참가자는 다음을 할 수 있습니다.
- Apachi NiFi를 설치하고 구성하십시오. - 데이터베이스 및 대형 데이터 호수를 포함하여 분산 된 분산 데이터 소스의 데이터를 제공, 변환 및 관리합니다. - 데이터 흐름을 자동화하십시오. - 스트리밍 분석 사용 - 데이터 처리를위한 다양한 접근 방식을 적용합니다. - Big Data 를 비즈니스 통찰력으로 변환하십시오.
Apache NiFi (Hortonworks DataFlow)는 시스템간에 데이터를 이동, 추적 및 자동화 할 수있는 실시간 통합 데이터 물류 및 간단한 이벤트 처리 플랫폼입니다. 그것은 흐름 기반 프로그래밍을 사용하여 작성되며 실시간으로 데이터 흐름을 관리하기위한 웹 기반 사용자 인터페이스를 제공합니다.
강사가 진행하는이 실습에서 참가자는 Apache NiFi 사용하여 여러 가지 데모 확장, 구성 요소 및 프로세서를 개발하면서 흐름 기반 프로그래밍의 기본 사항을 학습합니다.
이 훈련이 끝나면 참가자는 다음을 할 수 있습니다.
- NiFi의 아키텍처 및 데이터 흐름 개념을 이해합니다. - NiFi 및 제 3 자 API를 사용하여 확장 기능을 개발하십시오. - 사용자 정의 자신의 아파치 Nifi 프로세서를 개발할 수 있습니다. - 서로 다른 파일 형식 및 데이터 소스의 실시간 데이터를 수집하고 처리합니다.
Apache Samza는 스트림 프로세싱을위한 오픈 소스 거의 실시간의 비동기 계산 프레임 워크입니다. 메시징에는 Apache Kafka 를, 내결함성, 프로세서 격리, 보안 및 리소스 관리에는 Apache Hadoop YARN을 사용합니다.
강사가 진행하는이 실습에서는 메시징 시스템 및 분산 스트림 처리의 기본 원리를 소개하고 샘플 Samza 기반 프로젝트 작성 및 작업 실행을 통해 참가자를 안내합니다.
이 훈련이 끝나면 참가자는 다음을 할 수 있습니다.
- Samza를 사용하면 메시지를 생성하고 소비하는 데 필요한 코드를 단순화 할 수 있습니다. - 응용 프로그램에서 메시지 처리 분리. - Samza를 사용하여 실시간에 가까운 비동기 계산을 구현하십시오. - 스트림 처리를 사용하여 메시징 시스템에서보다 높은 수준의 추상화를 제공합니다.
Apache Storm은 실시간 비즈니스 인텔리전스를 구현하는 데 사용되는 분산, 실시간 컴퓨팅 엔진입니다 이는 무한대의 데이터 스트림 (스트림 처리라고도 함)을 응용 프로그램이 안정적으로 처리 할 수있게 해줍니다 "Storm은 일괄 처리를 위해 Hadoop을 실시간 처리하는 것입니다!" 이 강좌 실습에서 참가자는 Apache Storm을 설치 및 구성하고 실시간으로 큰 데이터를 처리 할 수있는 Apache Storm 응용 프로그램을 개발 및 배포하는 방법을 배웁니다 이 교육에 포함 된 주제 중 일부는 다음과 같습니다 Hadoop과 관련된 Apache Storm 무한 데이터로 작업하기 연속 계산 실시간 분석 분산 RPC 및 ETL 처리 지금이 과정을 요청하십시오! 청중 소프트웨어 및 ETL 개발자 메인 프레임 전문가 데이터 과학자 빅 데이터 분석가 Hadoop 전문가 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
Tigon은 HDFS 및 HBase를 기반으로 지속성을 위해 실시간, 저음역, 고화질, 원시 YARN, 스트림 처리 프레임 워크 인 오픈 소스입니다 Tigon 응용 프로그램은 네트워크 침입 탐지 및 분석, 소셜 미디어 시장 분석, 위치 분석 및 사용자에게 실시간 추천과 같은 사용 사례를 다룹니다 이 강사진 라이브 교육에서는 샘플 응용 프로그램 작성을 통해 참가자를 안내하면서 실시간 및 일괄 처리 혼합에 대한 Tigon의 접근 방식을 소개합니다 이 훈련이 끝나면 참가자는 다음을 할 수 있습니다 대용량 데이터를 처리하기위한 강력한 스트림 처리 응용 프로그램 작성 트위터 및 웹 서버 로그와 같은 스트림 소스 처리 신속한 합류, 필터링 및 스트림 집계에 Tigon 사용 청중 개발자 코스 형식 파트 강의, 파트 토론, 연습 및 무거운 핸드 슨 연습 .
.png "aeronautical radio, incorporated (arinc)")
_ireland.gif "environmental protection agency (epa) ireland")
.jpg "european southern observatory (eso)")
