- 주제 : Apache Airflow 기반의 데이터 파이프라인 읽고 공유하기 (https://www.aladin.co.kr/shop/wproduct.aspx?ItemId=290091682)
- 기간 : 2024.08 ~ 2024.09 (2개월)
- 인원 : 8명
- 일정 : 주 1회, 화요일 22:00
- 장소 : 디스코드
- 숙제 : 1장 ~ 12장 / 각자 정리한 내용을 git 으로 공유 (블로그, pdf, md 등)
- 진행방식 : 주차별 범위를 정해서 발표자가 발표하고 질의 응답하는 형식
| 주차 | 범위 | 발표자 |
|---|---|---|
| 1 | [1장 Apache Airflow 살펴보기] | 창배님 |
| 1 | [2장 Apache DAG의 구조] | 창배님 |
| 2 | [3장 Apache의 스케쥴링] | 승현님 |
| 2 | [4장 Apache 콘텍스트를 사용하여 테스크 템플릿 작업하기] | 승현님 |
| 3 | [5장 태스크 간 의존성 정의하기] | 예선님 |
| 3 | [6장 워크플로 트리거] | 예선님 |
| 4 | [7장 외부 시스템과 통신하기] | 승현님 |
| 4 | [8장 커스텀 컴포넌트 빌드] | 승현님 |
| 5 | [9장 테스트하기] | 선재님 |
| 5 | [10장 컨테이너에서 태스크 실행하기] | 선재님 |
| 6 | [11장 모범 사례] | 창배님 |
| 6 | [12장 운영환경에서 Airflow 관리] | 창배님 |
| 7 | [13장 Airflow 보안] | 세용님 |
| 7 | [14장 프로젝트 : 뉴욕에서 가장 빠른 길 찾기] | 세용님 |
| 8 | [15장 ~ 18장 클라우드에서의 Airflow 논의필요] |
- 기본 작업환경은 본인 이름의 브랜치에서 작업합니다.
ex) > jaaeun
- 주차별 공부한 내용을 정리 ( md,pdf,블로그 링크 등 ) 후 주차별 폴더에 자기 이름의 폴더를 생성한 후 정리한 내용을 커밋합니다.
ex) > week1/jaeeun/1~2주차_정리.py
- 스터디날 자정까지 커밋한 내용을 푸쉬후 PR 합니다.
- 방장은 발표가 끝난 후 머지합니다.
|
|
|
|
|
|
|
|