BIGDATA X 연세대학교

파이썬 기반의 빅데이터 분석 처리 과정

---

과정개요

운영대학 / 교육 장소

연세대학교 제4공학관 403호

과정 개요 및 특징

• 파이썬 등 다양한 빅데이터 분석도구 활용
• 빅데이터 처리 프로세스 학습 · 머신러닝, 딥러닝 기법을 적용한 빅데이터 분석 실무 교육

교육기간

• 이론실습 : 2019. 7. 1 ~ 8. 9 / 09:30-17:30
• 프로젝트 : 2019. 8. 12 ~ 8. 29 / 09:30-17:30

교육인원

66 명

준비사항

• 노트북 지참 필수 (CPU i5, 메모리 8G 권장)

우대사항

• 전공과 관계없음
• 관련 동아리 활동, 경진대회 혹은 공모전 수상 경험자

자세한 내용

관련 홈페이지 참조

---

상세 커리큘럼

1. 빅데이터 기초 (2H)

• 빅데이터 정의 및 개념
• 가치 및 트렌드 이해
• 빅데이터 주요 기술 소개
• 오리엔테이션

2. 빅데이터 파이썬 프로그래밍 (67H)

• 개발 도구 및 빌드 환경의 이해
• 데이터 유형 및 기초 문법
• 데이터 입출력, 제어문
• 데이터베이스 연동
• jupyter를 통한 interactive 프로그래밍

3. 빅데이터 전처리 (21H)

• 데이터베이스와 SQL
• 데이터 전처리
• 차원 축소(PCA)

4. 빅데이터 분석 및 활용 (114H)

• 빅데이터 분석 기본 방법론 실습
• 회귀분석, SVM
• 결정트리, 랜덤포레스트
• xgBoost
• 클러스터링
• 연관규칙, 빈발패턴, 순차패턴
• 인공신경망 - 딥러닝

5. 분산 빅데이터 처리 (6H)

• Apache Spark 아키텍쳐의 이해
• Spark SQL을 통한 데이터 처리 및 분석
• Spark Streaming을 이용한 실시간 데이터 수집
• Zepplin 연동을 통한 데이터 시각화
• Spark ML(Machine Learning)를 활용한 머신 러닝

6. 팀프로젝트 수행 (90H)

• 팀별 프로젝트 수행(팀별 책임강사/책임조교 지원)
• 필요 시 프로젝트에 필요한 특강 진행(e.g.Tensorflow를 활용한 딥러닝, 라즈베리파이 기반 IoT 실무, github 협업 도구 소개 등)