Apache Airflow 기반의 데이터 파이프라인이 나왔습니다. Marc Lamberti의 Udemy 강의로 부족한 부분을 함께 채우고 실제 사례를 공유하는 시간이 있으면 합니다.

<aside> 💡 본 스터디는 SLiPP과 우아한스터디가 함께하는 과정으로, 신청 기간 및 진행 일정에 차이가 있습니다. 반드시 아래 일정을 확인하시기 바랍니다.

</aside>

<aside> 📌 스터디 신청하기 신청 기간 : 4월 4일 월요일 ~ 4월 10일 일요일 결과 발표 : 4월 12일 화요일 중 안내 OT : 4월 13일 수요일 오후 8시 SLiPP 게더 (필수 참석) 종료 : 6월 29일 수요일

</aside>

스터디 개요

• 스터디 리더 : 박재성(Jason)
• 스터디 주제 : Airflow 2.0 익숙해지고 상황별 사례 공유하기
• 목표 : Airflow 2.0의 새로운 문법 학습과 상황별 사례 정리
• 대상 :
  • Airflow를 설치해서 헬로 월드를 해 보신 분
  • Airflow를 K8s 환경에서 돌리시는 분
  • 기깔나는 DAG 구성을 자랑하고 싶으신 분
  • 실제 업무에서 사용해 보신 분
• 모집정원 : 5명
• 일정 : 매주 월요일 9시부터 10시
• 장소 : SLiPP 게더 또는 테크살롱
• 진행방식 :
  • 한 명씩 돌아가며 주제를 정하고 화면 공유를 통해 사례를 보여 주거나, 서비스를 클라우드에 올려서 함께 실습해 봅니다.
  • 주제 예시
    • 새로운 DAG 작성법인 Taskflow API에 익숙해지기
    • 특정 상황을 정해서 어떤 구성이 가장 좋은지 논의
      • Spark Job은 어떤 식으로 돌리는 게 좋을까?
      • SparkJDBCOperator vs Kubernetes Operator vs SparkSqlOperator vs SparkSubmitOperator
    • 에러 상황 시 분기 처리는 어떻게 하는 게 좋을까?

멤버(추후작성)

일정(선택작성)

활동일지(추후작성)