| 주차 | 날짜 및 시간 | 주제 | 과제 |
|---|---|---|---|
| 1주차 | 2024.05.23 19:30 | #spark 환경세팅 | |
| #spark 개요 | (과제 1) 데이터 결정하기, 환경세팅 완료 및 spark 예시 코드 돌려보기 | ||
| 2주차 | 2024.05.30 19:30 | #데이터 정제 - 1 | |
| #pyspark 동작 방식 | (과제 2) 데이터 스키마 결정하기, 데이터 정제 예시 돌려보기 | ||
| 3주차 | 2024.06.13 19:30 | #데이터 정제 - 2 | |
| #spark 셔플링과 파티셔닝 | (과제 3) 데이터 정제 로직 작성 및 최적화 | ||
| 4주차 | 2024.06.20 19:30 | #ES 환경 세팅 | |
| #ES 개요, 데이터 저장 로직 | (과제 4) 데이터 저장 로직 작성 | ||
| 5주차 | 2024.06.27 19:30 | #Airflow | |
| #dag 작성 | (과제 5) Airflow DAG 작성 | ||
| 6주차 | 2024.07.04 19:30 | #kibana | |
| #데이터 시각화/모니터링 | (과제 6) 데이터 시각화 | ||
| 7주차 | 2024.07.11 19:30 | #Final Project Presentation |