Apache Kafka를 사용한 데이터 파이프라인 구축 교육 과정

이 강사 주도의 실시간 교육(대한민국 온라인 또는 현장)은 기존 데이터베이스 및 애플리케이션과 Apache Kafka를 통합하여 처리, 분석 등을 수행하고자 하는 개발자를 대상으로 합니다.

본 교육이 끝나면 참가자는 다음과 같은 능력을 갖추게 됩니다:

• Kafka Connect를 사용하여 데이터베이스에서 Kafka 토픽으로 대량의 데이터를 수집합니다.
• 애플리케이션 서버에서 생성된 로그 데이터를 Kafka 토픽으로 수집합니다.
• 모든 수집된 데이터를 스트림 처리에 사용할 수 있도록 합니다.
• Kafka 토픽에서 데이터를 내보내 이차 시스템에서 저장 및 분석을 수행합니다.

이 강사 주도의 실시간 교육(온라인 또는 현장)은 Kafka 배포 버전인 Confluent을 사용하여 애플리케이션용 실시간 데이터 처리 플랫폼을 구축하고 관리하는 방법을 배우고자 하는 엔지니어들을 대상으로 합니다.

본 교육을 마친 후 참가자들은 다음과 같은 능력을 갖추게 됩니다:

• Confluent Platform을 설치하고 구성합니다.
• Confluent의 관리 도구 및 서비스를 사용하여 Kafka를 더욱 쉽게 실행합니다.
• 입력되는 스트림 데이터를 저장하고 처리합니다.
• Kafka 클러스터를 최적화하고 관리합니다.
• 데이터 스트림을 보안합니다.

교육 형식

• 대화형 강의 및 토론.
• 많은 실습과 연습.
• 실시간 실험 환경에서 직접 구현합니다.

교육 커스터마이징 옵션

• 본 교육은 오픈 소스 버전의 Confluent: Confluent Open Source를 기반으로 합니다.
• 본 교육을 맞춤형으로 요청하려면 연락주시기 바랍니다.

이 강사 주도형 실시간 교육(대한민국 현장 또는 원격)에서 참가자들은 다양한 스트림 처리 프레임워크를 기존의 빅 데이터 저장 시스템 및 관련 소프트웨어 애플리케이션과 마이크로서비스와 통합하는 방법을 배울 것입니다.

이 교육을 통해 참가자들은 다음과 같은 능력을 갖추게 될 것입니다:

• Spark Streaming 및 Kafka Streaming과 같은 다양한 스트림 처리 프레임워크를 설치하고 구성합니다.
• 작업에 가장 적합한 프레임워크를 이해하고 선택합니다.
• 데이터를 연속적으로, 동시에, 각 기록별로 처리합니다.
• 스트림 처리 솔루션을 기존의 데이터베이스, 데이터 웨어하우스, 데이터 레이크 등과 통합합니다.
• 가장 적합한 스트림 처리 라이브러리를 기업 애플리케이션 및 마이크로서비스와 통합합니다.

이 과정은 기업 아키텍트, 개발자, 시스템 관리자 및 고속 분산 메시징 시스템을 이해하고 사용하길 원하는 모든 사람들을 대상으로 합니다. 특정 요구 사항(예: 시스템 관리 측면만)이 있는 경우 이 과정은 귀하의 필요에 더 잘 맞게 조정될 수 있습니다.

이 강사 주도의 실시간 교육(온라인 또는 대면)은 기업급 Kafka 클러스터를 설정, 배포, 관리 및 최적화하려는 시스템 관리자를 대상으로 합니다.

본 교육을 마치면 참가자들은 다음과 같은 능력을 갖추게 됩니다:

• Kafka 클러스터를 설정하고 관리합니다.
• Kafka를 온프레미스에서 versus 클라우드에서 배포하는 장단점을 평가합니다.
• 다양한 온프레미스 및 클라우드 환경 도구를 사용하여 Kafka를 배포하고 모니터링합니다.

이 온라인 또는 현장 교육은 중간 수준의 개발자들이 Apache Kafka를 사용하여 빅 데이터 애플리케이션을 개발하고자 하는 사람들에게 맞춤형으로 제공됩니다.

이 교육을 마친 후 참가자들은 다음과 같은 능력을 갖추게 됩니다:

• Kafka로 데이터를 보내고 읽기 위해 Kafka 프로듀서와 컨슈머를 개발합니다.
• Kafka Connect를 사용하여 Kafka를 외부 시스템과 통합합니다.
• Kafka Streams와 ksqlDB를 사용하여 스트리밍 애플리케이션을 작성합니다.
• Confluent Cloud와 Kafka 클라이언트 애플리케이션을 통합하여 클라우드 기반 Kafka 배포를 합니다.
• 실습 연습과 실세계 사용 사례를 통해 실전 경험을 얻습니다.

대한민국에서 진행되는 이 실시간 교육(온라인 또는 현장)은 Python을 통해 데이터 스트리밍에서 Apache Kafka 기능을 사용하려는 데이터 엔지니어, 데이터 과학자 및 프로그래머를 대상으로 합니다.

이 교육이 끝나면 참가자는 Apache Kafka을 사용하여 Python 프로그래밍을 사용하여 연속 데이터 스트림의 상태를 모니터링하고 관리할 수 있습니다.

이 과정은 대한민국(온라인 또는 현장)에서 진행되는 강사 주도의 실시간 교육으로, 중급 수준의 자바 개발자를 대상으로 하며 Apache Kafka를 애플리케이션에 통합하여 신뢰성 있고 확장 가능하며 고 처리량 메시징을 구현하길 원하는 사람들을 위한 것입니다.

이 교육이 끝나면 참가자들은 다음과 같은 능력을 갖추게 됩니다:

• Kafka의 아키텍처와 핵심 구성 요소를 이해합니다.
• Kafka 클러스터를 설정하고 구성합니다.
• Java를 사용하여 메시지를 생성하고 소비합니다.
• 실시간 데이터 처리를 위해 Kafka Streams를 구현합니다.
• Kafka 애플리케이션의 장애 허용성과 확장성을 보장합니다.

대한민국에서 진행되는 이 실시간 교육(온라인 또는 현장)은 Kafka의 메시지 큐 기능을 효과적으로 활용하려는 중급 시스템 관리자를 대상으로 합니다.

이 교육이 끝나면 참가자는 다음을 수행할 수 있습니다.

• Kafka의 메시지 대기열 기능과 아키텍처를 이해합니다.
• 메시지 큐 시나리오에 대한 Kafka 항목을 구성합니다.
• Kafka를 사용하여 메시지를 생성하고 소비합니다.
• Kafka를 메시지 대기열로 모니터링하고 관리합니다.

이 강사 주도의 실시간 교육(대한민국 온라인 또는 현장에서)은 Apache Kafka 애플리케이션에 네트워크 보안 조치를 구현하길 원하는 소프트웨어 테스터들을 대상으로 합니다.

이 교육을 마친 후 참가자들은 다음과 같은 능력을 갖추게 됩니다:

• 클라우드 기반 서버에 Apache Kafka를 배포합니다.
• SSL 암호화를 구현하여 공격을 방지합니다.
• ACL 인증을 추가하여 사용자 접근을 추적하고 제어합니다.
• SSL 및 SASL 인증으로 신뢰할 수 있는 클라이언트가 Kafka 클러스터에 접근할 수 있도록 합니다.

대한민국(온라인 또는 현장)에서 진행되는 이 강사 주도 라이브 교육은 Kafka의 기본 사항을 배우고 이를 Spring Boot과 통합하려는 중급 개발자를 대상으로 합니다.

이 교육이 끝나면 참가자는 다음을 수행할 수 있습니다.

• 카프카와 그 아키텍처를 이해합니다.
• 기본적인 카프카 환경을 설치, 구성, 설정하는 방법을 알아보세요.
• Spring Boot와 Kafka를 통합합니다.

Kafka Streams는 Kafka 메시징 시스템으로 데이터를 보내고 받는 애플리케이션과 마이크로서비스를 구축하기 위한 클라이언트 측 라이브러리입니다. 전통적으로 Apache Kafka는Apache Spark 또는 Apache Storm을 사용하여 메시지 생성자와 소비자 간의 데이터를 처리해 왔습니다. 애플리케이션 내에서 Kafka Streams API를 호출하면, 별도의 클러스터로 데이터를 보내지 않고 Kafka 내에서 직접 데이터를 처리할 수 있습니다.

이 강사 주도의 실시간 교육에서는 참가자들이 샘플 Java 애플리케이션을 통해 Apache Kafka와 통합된 Kafka Streams를 사용하는 방법을 배우게 됩니다.

이 교육이 끝나면 참가자들은 다음과 같은 능력을 갖추게 될 것입니다:

• Kafka Streams의 특징과 다른 스트림 처리 프레임워크보다 우월한 점을 이해하기
• Kafka 클러스터 내에서 직접 스트림 데이터를 처리하기
• Java 또는 Scala 애플리케이션이나 마이크로서비스를 Kafka 및 Kafka Streams와 통합하는 방법 작성하기
• 입력 Kafka 토픽을 출력 Kafka 토픽으로 변환하는 간결한 코드 작성하기
• 애플리케이션을 빌드, 패키징하고 배포하기

대상자

• 개발자

강의 형식

• 강의와 토론, 연습문제 및 실습을 병행하는 방식

참고사항

• 이 과정에 대한 맞춤형 교육을 요청하시려면 저희에게 문의하여 일정을 조정해 주세요.

대한민국에서 진행되는 이 실시간 교육(온라인 또는 현장)은 효율적인 데이터 스트리밍 및 처리를 위해 Kafka 주제를 효과적으로 관리하는 방법을 배우고자 하는 초급부터 중급 시스템 관리자를 대상으로 합니다.

이 교육이 끝나면 참가자는 다음을 수행할 수 있습니다.

• Kafka 주제 기본 사항 및 아키텍처를 이해합니다.
• Kafka 주제를 생성, 구성 및 관리합니다.
• 상태, 성능 및 가용성에 대해 Kafka 주제를 모니터링합니다.
• Kafka 주제에 대한 보안 조치를 구현합니다.

이 강사 주도형 라이브 교육은 온라인 또는 현장에서 제공되며, 빅데이터 솔루션을 위한 데이터 처리 플랫폼을 구축하기 위해 SMACK 스택을 활용하고자 하는 데이터 과학자들을 대상으로 합니다.

이 교육을 마친 후 참가자들은 다음과 같은 능력을 갖출 것입니다:

• 빅데이터 처리를 위한 데이터 파이프라인 아키텍처를 구현할 수 있습니다.
• Apache Mesos와 Docker를 사용하여 클러스터 인프라를 개발할 수 있습니다.
• Spark와 Scala를 사용하여 데이터를 분석할 수 있습니다.
• Apache Cassandra를 사용하여 비구조화된 데이터를 관리할 수 있습니다.

대한민국에서 진행되는 이 실시간 교육(온라인 또는 현장)은 Spring Cloud, Kafka, Docker, Kubernetes 및 Redis를 사용하여 기존 아키텍처를 동시성 마이크로서비스 기반 아키텍처로 전환하려는 개발자를 대상으로 합니다.

이 교육이 끝나면 참가자는 다음을 수행할 수 있습니다.

• 마이크로서비스 구축에 필요한 개발 환경을 설정합니다.
• Spring Cloud, Kafka, Redis, Docker 및 Kubernetes를 사용하여 동시성이 높은 마이크로서비스 생태계를 설계하고 구현합니다.
• 모놀리식 및 SOA 서비스를 마이크로서비스 기반 아키텍처로 전환합니다.
• 소프트웨어 개발, 테스트, 출시에 DevOps 접근 방식을 채택합니다.
• 프로덕션에서 마이크로서비스 간의 높은 동시성을 보장합니다.
• 마이크로서비스를 모니터링하고 복구 전략을 구현합니다.
• 성능 튜닝을 수행합니다.
• 마이크로서비스 아키텍처의 미래 동향에 대해 알아보세요.