연락처 정보

코스 개요

1. 딥 강화학습 입문

  • 강화학습이란 무엇인가?
  • 지도학습, 비지도학습과의 차이점 설명
  • 2025년 기준 딥 강화학습의 주요 응용 분야(로봇공학, 의료, 금융, 물류 등)
  • 에이전트와 환경 간 상호작용 구조 이해

2. 강화학습의 기초 개념

  • 마르코프 결정 과정(MDP)
  • 상태, 행동, 보상, 정책, 가치 함수에 대한 설명
  • 탐색과 활용 간의 균형 조절 방법
  • 몬테카를로 기법 및 시계열 차분 학습(TD) 이해

3. 기본 강화학습 알고리즘 구현

  • 표형식 접근법: 동적 프로그래밍, 정책 평가 및 반복법
  • Q-러닝과 SARSA 알고리즘 설명
  • Epsilon-greedy 전략 및 탐색 확률 감소 방식
  • OpenAI Gymnasium을 이용한 RL 환경 구축 방법

4. 딥 강화학습으로의 전환

  • 표형식 접근법의 한계점 설명
  • 함수 근사를 위해 신경망을 활용하는 방법
  • 딥 Q-네트워크(DQN) 구조와 작동 원리
  • 경험 재사용 기법 및 목표 네트워크 활용 방안

5. 고급 딥 강화학습 알고리즘

  • Double DQN, Dueling DQN, 우선순위 기반 경험 재사용 방식 설명
  • 정책 경사도 하강법: REINFORCE 알고리즘 이해
  • 액터-크ritic 구조(A2C, A3C) 설명
  • Proximal Policy Optimization(PPO) 원리 설명
  • Soft Actor-Critic(SAC) 활용 방법

6. 연속형 행동 공간 다루기

  • 연속적 제어 문제의 특성과 해결 난이도
  • Deep Deterministic Policy Gradient(DDPG) 기법 적용법
  • Twin Delayed DDPG(TD3)의 개념 설명

7. 실무용 도구 및 프레임워크 활용

  • Stable-Baselines3와 Ray RLlib의 특징 및 사용법
  • TensorBoard를 활용한 훈련 과정 모니터링 방법
  • 딥 강화학습 모델을 위한 하이퍼파라미터 조정 전략

8. 보상 설계 및 환경 구성 방법

  • 보상 가중치 조정 및 불이익 처리 방식
  • 시뮬레이션 결과를 실제 환경에 적용하는 전이 학습 개념 설명
  • Gymnasium을 통해 자체적인 훈련 환경 생성법

9. 부분 관측 가능한 환경과 일반화 능력 향상

  • 불완전한 상태 정보 하에서의 학습 방법(POMDP 개념)
  • LSTM 및 RNN을 활용해 기억력을 강화하는 접근법
  • 에이전트의 안정성 및 일반화 능력 향상 전략

10. 게임 이론과 다중 에이전트 강화학습

  • 다수의 에이전트가 존재하는 환경의 개요 설명
  • 협력적 행동과 경쟁적 상호작용의 차이점
  • 적대적 훈련 및 전략 최적화 분야에서의 활용 사례

11. 사례 연구와 실제 응용 방안

  • 자율주행 시뮬레이션 구현 및 분석
  • 가격 동태 관리와 금융 거래 전략 최적화 사례
  • 산업 현장용 로봇 제어 시스템 개발 예시

12. 문제 진단 및 성능 최적화 전략

  • 훈련 과정이 불안정해지는 원인 분석 방법
  • 보상값 분포의 비균형 및 과적합 현상 대응법
  • GPU와 분산 시스템 환경에서 딥 강화학습 모델 확장 방안

13. 마무리 및 향후 학습 계획

  • 딥 강화학습 구조와 주요 알고리즘에 대한 요약 설명
  • 현재 산업 동향 및 연구 추세(RLHF, 하이브리드 모델 등)
  • 추가 학습을 위한 자료 및 리소스 안내

요건

  • 파이썬 프로그래밍에 대한 충분한 이해
  • 미적분학 및 선형대수 기초 지식
  • 확률론 및 통계학에 대한 기본 개념
  • 파이썬과 NumPy 또는 TensorFlow·PyTorch를 활용한 머신러닝 모델 구축 경험

수강 대상자

  • 인공지능 및 지능형 시스템에 관심이 있는 개발자
  • 강화학습 프레임워크를 탐구하고자 하는 데이터 과학자
  • 자율시스템 관련 업무에 종사하는 머신러닝 엔지니어
 21 시간

참가자 수


참가자별 가격

회원 평가 (3)

예정된 코스

관련 카테고리