2024년 3월 29일 — Data Quality Monitoring 릴리스 정보¶

Data Quality Monitoring 및 데이터 메트릭 함수 — 미리 보기¶

이 릴리스에서 Snowflake는 데이터 메트릭 함수(DMFs)를 사용한 Data Quality Monitoring 기능을 미리 보기로 제공합니다. Data Quality Monitoring은 DMFs를 사용하여 완전성, 정확성, 고유성, 유효성 등의 데이터 품질 메트릭을 지속적으로 모니터링합니다. 행 수, 중복, 최신성과 같은 일반적인 메트릭과 관련해서는 Snowflake 제공 시스템 DMFs를 사용할 수 있습니다. 또는 사용자 지정 DMFs를 만들어 사용자의 데이터에만 해당하는 메트릭을 정의할 수 있습니다.

쿼리에서 DMF를 사용하여 파이프라인의 데이터 품질을 테스트하거나 원하는 테이블에 DMF를 연결하여 품질을 지속적으로 모니터링할 수 있습니다. 지속적인 모니터링은 주기적으로 측정하는 일정 기반 모니터링이거나, 기본 테이블이 수정될 때만 측정하는 트리거 기반 모니터링일 수 있습니다. DMF 결과는 데이터의 개인 정보를 보호하기 위해 Snowflake 계정의 중앙 집중식 이벤트 테이블에 기록됩니다. 이벤트 테이블에서 바로 대시보드를 만들거나, 알림을 구성하거나, 메트릭 결과를 쿼리할 수 있습니다. 또한, 이벤트 테이블의 데이터는 통합 가시성 도구와 쉽게 통합할 수 있도록 표준 OpenTelemetry 형식으로 되어 있습니다.

자세한 내용은 데이터 품질 및 데이터 메트릭 함수 소개 섹션을 참조하십시오.