Apache Airflow 기반의 데이터 파이프라인이 나왔습니다. Marc Lamberti의 Udemy 강의로 부족한 부분을 함께 채우고 실제 사례를 공유하는 시간이 있으면 합니다.
<aside>
💡 본 스터디는 SLiPP과 우아한스터디가 함께하는 과정으로, 신청 기간 및 진행 일정에 차이가 있습니다. 반드시 아래 일정을 확인하시기 바랍니다.
</aside>
<aside>
📌 **스터디 신청하기**
신청 기간 : 4월 4일 월요일 ~ 4월 10일 일요일
결과 발표 : 4월 12일 화요일 중 안내
OT : 4월 13일 수요일 오후 8시 SLiPP 게더 (필수 참석)
종료 : 6월 29일 수요일
</aside>
스터디 개요
- 스터디 리더 : 박재성(Jason)
- 스터디 주제 : Airflow 2.0 익숙해지고 상황별 사례 공유하기
- 목표 : Airflow 2.0의 새로운 문법 학습과 상황별 사례 정리
- 대상 :
- Airflow를 설치해서 헬로 월드를 해 보신 분
- Airflow를 K8s 환경에서 돌리시는 분
- 기깔나는 DAG 구성을 자랑하고 싶으신 분
- 실제 업무에서 사용해 보신 분
- 모집정원 : 5명
- 일정 : 매주 월요일 9시부터 10시
- 장소 : SLiPP 게더 또는 테크살롱
- 진행방식 :
- 한 명씩 돌아가며 주제를 정하고 화면 공유를 통해 사례를 보여 주거나, 서비스를 클라우드에 올려서 함께 실습해 봅니다.
- 주제 예시
- 새로운 DAG 작성법인 Taskflow API에 익숙해지기
- 특정 상황을 정해서 어떤 구성이 가장 좋은지 논의
- Spark Job은 어떤 식으로 돌리는 게 좋을까?
- SparkJDBCOperator vs Kubernetes Operator vs SparkSqlOperator vs SparkSubmitOperator
- 에러 상황 시 분기 처리는 어떻게 하는 게 좋을까?
멤버(추후작성)
일정(선택작성)
활동일지(추후작성)