Azure Data Factory: 데이터 통합 및 관리 교육 과정
Azure Data Factory (ADF)는 Microsoft Azure가 제공하는 클라우드 기반 데이터 통합 서비스입니다. 이 서비스를 사용하면 다양한 소스에서 데이터를 이동하고 변환하는 데이터 파이프라인을 생성, 관리, 및 조정할 수 있습니다.
이 강사 주도 실시간 교육(온라인 또는 현장)은 클라우드에서 확장 가능하고 효율적인 데이터 통합 솔루션을 구현하려는 초급 데이터 엔지니어를 대상으로 합니다.
이 교육이 끝나면 참가자들은 다음과 같은 능력을 갖출 수 있을 것입니다:
- Azure Data Factory (ADF)의 핵심 개념과 아키텍처를 이해합니다.
- 데이터 파이프라인을 생성, 일정 관리, 및 모니터링하는 방법을 배웁니다.
- 다양한 데이터 소스와 통합, 데이터 변환, 및 데이터 흐름 관리를 수행합니다.
- 오류 처리와 성능 최적화의 best practice를 구현합니다.
- 프로덕션 환경에서 데이터 파이프라인을 보안하고 모니터링합니다.
강의 형식
- 대화형 강의와 토론.
- 많은 연습과 실습.
- 실시간 실험 환경에서 hands-on 구현.
강의 맞춤 옵션
- 이 강의를 위한 맞춤 교육을 요청하려면 저희에게 연락하여 안내를 받으세요.
코스 개요
Azure Data Factory 소개
- Azure Data Factory 개요
- 주요 개념 및 아키텍처
- ADF의 사용 사례와 이점
ADF 환경 설정
- ADF 인스턴스 생성 및 구성
- Azure Data Factory 포털 탐색
- 통합 런타임 이해
데이터셋과 연결 서비스 작업
- 데이터셋과 연결 서비스 정의
- 다양한 데이터 소스 연결
- 인증 및 안전한 연결 구성
데이터 파이프라인 생성
- 파이프라인 기초와 구성 요소
- 활동을 사용하여 간단한 데이터 파이프라인 생성
- 데이터 이동을 위한 파이프라인 구축
데이터 플로우 및 변환 활동
- 데이터 플로우 소개
- 데이터 변환 활동
- 데이터 플로우 변환 설계 및 실행
파이프라인 일정 설정 및 트리거링
- 트리거를 사용한 파이프라인 실행 일정 설정
- 스케일링 윈도우 및 이벤트 기반 트리거 사용
- 파이프라인 활동 모니터링 및 출력 로그 이해
디버깅 및 오류 처리
- 파이프라인과 데이터 플로우 디버깅
- 오류 처리 및 재시도 메커니즘 구현
- 기존 파이프라인에 오류 처리 추가
성능 최적화
- 데이터 파이프라인 성능 최적화를 위한 베스트 프랙티스
- 병렬처리와 분할 이해 및 구성
- 파이프라인 성능 최적화
보안 및 모니터링
- 액세스 제어 및 권한을 사용한 ADF 보안
- 데이터 암호화 및 안전한 데이터 전송 구현
- 내장 도구와 알림을 사용한 데이터 파이프라인 모니터링
고급 시나리오 및 통합
- Azure 서비스와 ADF 통합
- 복잡한 데이터 통합 시나리오 처리
- 엔드 투 엔드 데이터 통합 솔루션 생성
요약 및 다음 단계
요건
- 클라우드 컴퓨팅 개념에 대한 기본적인 지식
- 데이터 통합 및 ETL 프로세스에 대한 이해
대상자
- 데이터 엔지니어
- 데이터 분석가
- ETL 개발자
- IT 전문가
오픈 트레이닝 코스는 5명 이상의 참가자가 필요합니다.
Azure Data Factory: 데이터 통합 및 관리 교육 과정 - 예약
Azure Data Factory: 데이터 통합 및 관리 교육 과정 - 문의
Azure Data Factory: 데이터 통합 및 관리 - 컨설팅 문의
회원 평가 (1)
Lambda와 서버리스에 대해 새로운 흥미로운 점을 발견했습니다.
Oleg Buldumac - PUBLIC COURSE
코스 - AWS Lambda for Developers
기계 번역됨
예정된 코스
관련 코스
Google Colab을 활용한 고급 머신러닝 모델
21 시간이 강좌는 온라인 또는 현장에서 진행되는 강사 주도의 실시간 훈련으로, 고급 전문가들이 머신러닝 모델에 대한 지식을 향상시키고 하이퍼파라미터 조정 능력을 개선하며 Google Colab을 활용하여 모델을 효과적으로 배포하는 방법을 배우는 것을 목표로 합니다.
이 훈련이 끝나면 참가자들은 다음과 할 수 있습니다:
- Scikit-learn, TensorFlow와 같은 인기 있는 프레임워크를 사용하여 고급 머신러닝 모델을 구현합니다.
- 하이퍼파라미터 조정을 통해 모델 성능을 최적화합니다.
- Google Colab을 사용하여 실제 응용 프로그램에 머신러닝 모델을 배포합니다.
- Google Colab에서 대규모 머신러닝 프로젝트를 협력하고 관리할 수 있습니다.
Google Colab을 사용한 의료 분야의 인공지능
14 시간이 강사 주도, 실시간 교육은 대한민국 (온라인 또는 현장)에서 중급 수준의 데이터 과학자와 의료 전문가를 대상으로 하며, Google Colab을 활용하여 고급 의료 응용 프로그램에 AI를 활용하고자 하는 분들에게 적합합니다.
이 교육이 끝나면 참가자는 다음과 같은 능력을 갖추게 됩니다:
- Google Colab을 사용하여 의료 AI 모델을 구현할 수 있습니다.
- 의료 데이터에서 예측 모델링을 위해 AI를 활용할 수 있습니다.
- AI 기반 기술을 사용하여 의료 이미지를 분석할 수 있습니다.
- AI 기반 의료 솔루션의 윤리적 고려사항을 탐색할 수 있습니다.
AWS IoT 코어
14 시간대한민국(현장 또는 원격)에서 강사가 진행하는 이 실시간 교육은 AWS에서 IoT 기기를 배포하고 관리하려는 엔지니어를 대상으로 합니다.
이 교육을 마치면 참가자는 AWS를 기반으로 백엔드, 게이트웨이, 장치를 배포하고 관리하는 IoT 플랫폼을 구축할 수 있게 됩니다.
Amazon Web Services (AWS) IoT Greengrass
21 시간대한민국에서 강사가 진행하는 이 라이브 교육(온라인 또는 현장)은 다양한 장치에 대한 애플리케이션을 생성하기 위해 AWS IoT Greengrass 기능을 설치, 구성 및 관리하려는 개발자를 대상으로 합니다.
이 교육을 마치면 참가자는 AWS IoT Greengrass를 사용하여 지능형 장치에서 애플리케이션을 빌드, 배포, 관리, 보안 및 모니터링할 수 있습니다.
AWS Lambda 개발자용
14 시간대한민국에서 강사가 진행하는 이 실시간 교육(현장 또는 원격)은 실행 환경(서버, VM 및 컨테이너, 가용성, 확장성, 스토리지 등) 프로비저닝에 대해 걱정할 필요 없이 AWS Lambda을 사용하여 클라우드에 서비스와 애플리케이션을 빌드하고 배포하려는 개발자를 대상으로 합니다.
이 교육을 마치면 참가자는 다음을 수행할 수 있습니다.
- AWS Lambda을 구성하여 함수를 실행하세요.
- FaaS(서비스로서의 기능)와 서버리스 개발의 장점을 알아보세요.
- AWS Lambda개의 함수를 빌드, 업로드 및 실행합니다.
- Lambda 함수를 다양한 이벤트 소스와 통합합니다.
- Lambda 기반 애플리케이션을 패키징, 배포, 모니터링하고 문제를 해결합니다.
Google Colab 및 Apache Spark을 활용한 빅데이터 분석
14 시간이 온라인 또는 현장에서 진행되는 강사 지도형 라이브 교육은 중간 수준의 데이터 과학자 및 엔지니어가 빅데이터 처리 및 분석을 위해 Google Colab과 Apache Spark을 사용하고자 할 때 대상입니다.
이 교육을 마친 후 참가자는 다음과 같은 능력을 갖출 것입니다.
- Google Colab과 Spark를 사용하여 빅데이터 환경을 설정합니다.
- Apache Spark로 대용량 데이터를 효율적으로 처리하고 분석합니다.
- 협업 환경에서 빅데이터를 시각화합니다.
- Apache Spark을 클라우드 기반 도구와 통합합니다.
GoData Science에 대한 ogle Colab 소개
14 시간이 강사 지도형 라이브 교육 과정은 Google Colab을 사용하여 데이터 과학의 기본을 배우고자 하는 초보 데이터 과학자 및 IT 전문가를 대상으로 합니다.
이 교육 과정을 마친 후, 참가자들은 다음을 할 수 있게 됩니다:
- Google Colab 설정 및 탐색.
- 기본 Python 코드 작성 및 실행.
- 데이터셋 가져오기 및 처리.
- Python 라이브러리를 사용하여 시각화 생성.
Google Colab Pro: 클라우드 기반 확장 가능한 Python 및 AI 워크플로
14 시간Google Colab Pro는 고성능 GPU, 긴 런타임, 많은 메모리 등 엄격한 AI 및 데이터 과학 워크로드를 위한 확장 가능한 Python 개발 환경을 제공하는 클라우드 기반 환경입니다.
이 강사 주도의 실시간 교육(온라인 또는 현장)은 중급 Python 사용자를 대상으로 하며, 강력한 노트북 인터페이스에서 Google Colab Pro를 사용하여 기계 학습, 데이터 처리 및 협업 연구를 수행하고자 하는 사람들을 위한 것입니다.
이 교육이 끝나면 참가자는 다음과 같은 능력을 갖추게 됩니다:
- Colab Pro를 사용하여 클라우드 기반 Python 노트북을 설정하고 관리할 수 있습니다.
- 가속된 계산을 위해 GPU와 TPU에 접근할 수 있습니다.
- TensorFlow, PyTorch, Scikit-learn 등 인기 라이브러리를 사용하여 기계 학습 워크플로를 간소화할 수 있습니다.
- Google Drive 및 외부 데이터 소스와 통합하여 협업 프로젝트를 수행할 수 있습니다.
강의 형식
- 대화형 강의 및 토론.
- 많은 연습과 실습.
- 실시간 실험 환경에서 직접 구현.
강의 맞춤화 옵션
- 이 강의에 대한 맞춤형 교육을 요청하려면 연락주시기 바랍니다.
Google Colab과 TensorFlow로 컴퓨터 비전
21 시간이 강사 주도의 실시간 교육(대한민국, 온라인 또는 현장)은 컴퓨터 비전에 대한 이해를 깊게 하고, Google Colab을 사용하여 고급 시각 모델을 개발하기 위한 TensorFlow의 기능을 탐색하고자 하는 고급 전문가들을 대상으로 합니다.
이 교육이 끝나면 참가자들은 다음과 같은 능력을 갖추게 됩니다:
- TensorFlow를 사용하여 합성곱 신경망(CNN)을 구축하고 훈련시킵니다.
- 확장性和高效的云基模型开发。
- 实现用于计算机视觉任务的图像预处理技术。
- 部署计算机视觉模型以进行实际应用。
- 使用迁移学习来提高CNN模型的性能。
- 可视化和解释图像分类模型的结果。
Google Colab에서 TensorFlow을 사용한 딥 러닝
14 시간이 강사는 온라인 또는 현장에서 중급 수준의 데이터 과학자 및 개발자를 대상으로 Google Colab 환경에서 심층 학습 기술을 이해하고 적용하는 방법을 배우는 훈련입니다.
이 교육을 마치면 참가자는 다음을 할 수 있습니다:
- 심층 학습 프로젝트를 위해 Google Colab을 설정하고 탐색합니다.
- 신경망의 기본 원리를 이해합니다.
- TensorFlow를 사용하여 심층 학습 모델을 구현합니다.
- 심층 학습 모델을 훈련하고 평가합니다.
- 심층 학습을 위한 TensorFlow의 고급 기능을 활용합니다.
마스터링 DevOps with AWS Cloud9
21 시간대한민국에서 진행되는 이 강사 주도 라이브 교육(온라인 또는 현장)은 AWS Cloud9를 사용하여 DevOps 관행에 대한 이해를 심화하고 개발 프로세스를 간소화하려는 고급 전문가를 대상으로 합니다.
이 교육을 마치면 참가자는 다음을 수행할 수 있습니다.
- DevOps 워크플로에 대해 AWS Cloud9를 설정하고 구성합니다.
- CI/CD(지속적인 통합 및 지속적인 배포) 파이프라인을 구현합니다.
- AWS Cloud9를 사용하여 테스트, 모니터링 및 배포 프로세스를 자동화하세요.
- Lambda, EC2, S3와 같은 AWS 서비스를 DevOps 워크플로에 통합합니다.
- AWS Cloud9 내의 GitHub 또는 GitLab와 같은 소스 제어 시스템을 활용합니다.
서버리스 애플리케이션 개발을 위한 AWS Cloud9
14 시간대한민국에서 강사가 진행하는 이 라이브 교육(온라인 또는 현장)은 AWS Cloud9 및 AWS Lambda에서 서버리스 애플리케이션을 효과적으로 빌드, 배포 및 유지 관리하는 방법을 배우고자 하는 중급 전문가를 대상으로 합니다.
이 교육을 마치면 참가자는 다음을 수행할 수 있습니다.
- 서버리스 아키텍처의 기본을 이해합니다.
- 서버리스 애플리케이션 개발을 위해 AWS Cloud9를 설정하세요.
- AWS Lambda을 사용하여 서버리스 애플리케이션을 개발, 테스트 및 배포합니다.
- API Gateway 및 S3와 같은 다른 AWS 서비스와 AWS Lambda을 통합합니다.
- 성능과 비용 효율성을 위해 서버리스 애플리케이션을 최적화하세요.
Google Colab을 사용한 데이터 시각화
14 시간이 강사는 온라인 또는 오프라인에서 직접 진행하는 실습형 강의로, 데이터 과학 초보자들을 대상으로 데이터 시각화를 위한 의미 있고 시각적으로 매력적인 그래프를 만드는 방법을 학습합니다.
이 강의를 마친 후, 수강생들은 다음을 할 수 있게 됩니다.
- Google Colab을 설정하고 데이터 시각화를 위한 탐색 방법을 익힙니다.
- Matplotlib를 사용하여 다양한 유형의 플롯을 생성합니다.
- Seaborn을 사용하여 고급 시각화 기법을 활용합니다.
- 더 나은 발표와 명확성을 위해 플롯을 맞춤화합니다.
- 시각화 도구를 사용하여 데이터를 효과적으로 해석하고 발표합니다.
산업용 IoT(사물인터넷) 실습: 라즈베리 파이와 AWS IoT Core 활용
8 시간요약:
- IoT 아키텍처 및 기능의 기초
- "사물", "센서", 인터넷과 IoT 비즈니스 기능 간의 매핑
- 하드웨어, 펌웨어, 미들웨어, 클라우드, 모바일 앱 등 모든 IoT 소프트웨어 구성 요소의 필수 사항
- IoT 기능: 플릿 관리, 데이터 시각화, SaaS 기반 플릿 관리 및 데이터 시각화, 알림/경고, 센서 온보딩, "사물" 온보딩, 지오펜싱
- MQTT를 통한 클라우드와 IoT 장치 간 통신의 기초
- MQTT를 활용하여 IoT 장치를 AWS IoT Core에 연결
- 데이터 처리 및 저장을 위해 AWS Lambda 함수와 DynamoDB를 사용하여 AWS IoT Core 연결
- 라즈베리 파이를 AWS IoT Core에 연결하고 간단한 데이터 통신 수행
- 라즈베리 파이와 AWS IoT Core를 활용한 스마트 장치 구축 실습
- 웹 인터페이스를 통한 센서 데이터 시각화 및 통신
Google Colab을 이용한 머신러닝
14 시간이 강사 주도의 실시간 교육(온라인 또는 현장)은 중급 수준의 데이터 과학자와 개발자를 대상으로 Google Colab 환경을 통해 머신러닝 알고리즘을 효율적으로 적용하고자 하는 사람들을 위한 것입니다.
이 교육이 끝나면 참가자들은 다음과 같은 능력을 갖추게 됩니다:
- Google Colab을 머신러닝 프로젝트에 설정하고 탐색할 수 있습니다.
- 다양한 머신러닝 알고리즘을 이해하고 적용할 수 있습니다.
- Scikit-learn과 같은 라이브러리를 사용하여 데이터를 분석하고 예측할 수 있습니다.
- 지도 학습 및 비지도 학습 모델을 구현할 수 있습니다.
- 머신러닝 모델을 효과적으로 최적화하고 평가할 수 있습니다.