Moving Data from MySQL to Hadoop with Sqoop 교육 과정

Course Code

sqoop

Duration

14 hours (usually 2 days including breaks)

Requirements

  • An understanding of big data concepts (HDFS, Hive, etc.)
  • An understanding of relational databases (MySQL, etc.)
  • Experience with the Linux command line

Overview

Sqoop은 Hadoop 과 관계형 데이터베이스 또는 메인 프레임간에 데이터를 전송하기위한 오픈 소스 소프트웨어 도구입니다. My SQL 또는 Oracle 과 같은 관계형 데이터베이스 관리 시스템 (RDBMS) 또는 메인 프레임에서 HDFS ( Hadoop Distributed File System)로 데이터를 가져 오는 데 사용할 수 있습니다. 그 후에 데이터를 Hadoop MapReduce에서 변환 한 다음 다시 RDBMS로 내보낼 수 있습니다.

이 강사가 진행하는 라이브 교육에서 참가자에 대한 기존의 관계형 데이터베이스에서 데이터를 가져올 Sqoop을 사용하는 방법을 배우게됩니다 Hadoop 저장 등의 HDFS 또는 Hive 반대의 경우도 마찬가지.

이 교육이 끝나면 참가자는 다음을 수행 할 수 있습니다.

  • Sqoop 설치 및 구성
  • My SQL 에서 HDFS 및 Hive 로 데이터 가져 오기
  • HDFS 및 Hive 에서 My SQL 데이터 가져 오기

청중

  • 시스템 관리자
  • 데이터 엔지니어

코스의 형식

  • 강의, 강의, 연습 및 실습

노트

  • 이 과정에 대한 맞춤형 교육을 요청하려면 저희에게 연락하여 준비하십시오.

Machine Translated

Course Outline

Introduction

  • Moving data from legacy data stores to Hadoop

Installing and Configuring Sqoop

Overview of Sqoop Features and Architecture

Importing Data from MySQL to HDFS

Importing Data from MySQL to Hive

Transforming Data in Hadoop

Importing Data from HDFS to MySQL

Importing Data from Hive to MySQL

Importing Incrementally with Sqoop Jobs

Troubleshooting

Summary and Conclusion

회원 평가

★★★★★
★★★★★

Related Categories

고객 회사

is growing fast!

We are looking to expand our presence in South Korea!

As a Business Development Manager you will:

  • expand business in South Korea
  • recruit local talent (sales, agents, trainers, consultants)
  • recruit local trainers and consultants

We offer:

  • Artificial Intelligence and Big Data systems to support your local operation
  • high-tech automation
  • continuously upgraded course catalogue and content
  • good fun in international team

If you are interested in running a high-tech, high-quality training and consulting business.

Apply now!