2 - 데이터 건강 체크 그룹 구성하기

📖 작업 소개

데이터 엔지니어는 파이프라인의 주요 영역에서 데이터 건강 체크를 구성하여 건강 상태를 모니터링하고 체크가 실패할 경우 앱 내 및/또는 이메일 경고를 받을 수 있습니다. 이를 대규모로 적용하면 많은 중요한 신호가 발생할 수 있습니다. 이 튜토리얼에서는 40여 개의 건강 체크를 구성하게 됩니다. Foundry에서는 체크 그룹을 생성하여 관련 체크를 그룹화하고 알림을 일괄 처리할 수 있습니다. 이 작업을 통해 파이프라인 세그먼트별로 세 개의 체크 그룹을 생성하는 방법을 배울 수 있습니다. 그런 다음 개별 체크를 각각의 그룹에 구성할 수 있습니다.

🔨 작업 지침

1. Foundry Workspace 사이드바를 펼치고 APPS 섹션의 View all 링크를 클릭합니다.
2. Build & Monitor Pipelines 앱 그룹에서 Data health를 찾아 클릭합니다.
3. Data Health 앱의 오른쪽 상단에서 Check groups 링크를 클릭합니다.
4. 오른쪽 상단의 초록색 ➕ Create group 버튼을 클릭합니다.
5. Check group name 필드에 파이프라인의 이름인 yourName Flight Alerts 일정을 입력합니다. 여기에는 임의의 이름을 지정할 수 있지만, 파이프라인 세그먼트의 이름에 해당하는 체크 그룹을 생성할 것입니다. 이렇게 하면 아래 선택한 주기로 각각 일괄 처리된 알림을 받을 수 있습니다.
6. 설명을 입력합니다. "선택 사항"으로 표시되어 있지만, 파이프라인 모니터링 로직에 추가 문서를 제공하는 필드를 완료하는 것이 모범 사례입니다. "yourName Flight Alerts 일정과 관련된 체크, Datasource Project: Flight Alerts를 빌드합니다."와 같은 내용을 고려해 보세요.
7. 일정을 매주 화요일과 금요일 오전 8시 CET에 도착하는 주간 주기로 설정합니다.
8. Only when failing 상자에 체크를 남겨둡니다.
9. 오른쪽 상단의 초록색 Create group 버튼을 클릭하여 그룹을 저장합니다(다음 작업에서 그룹에 체크를 추가할 예정입니다).
10. 다른 두 개의 파이프라인 세그먼트에 대해서도 이 과정을 반복하여 각각 체크 그룹을 생성합니다.

📚 추천 독서 (~2분 소요)

잠시 시간을 내어 체크 그룹 기본 사항에 대해 자세히 읽어보세요.