Telemetry Data Quality Monitoring with SQL: 구현부터 결정까지
완전한 telemetry data quality monitoring with sql 측정 루프는 하나의 소유 워크플로우, 제한된 이벤트 계약, 제어된 픽스처 및 누군가가 조치를 취할 수 있는 질문을 연결합니다.
- 1
경계를 설정하세요
고객 응대, 수익, 안정성 또는 규정 준수 결정을 내리는 데 도움이 되는 이벤트 테이블의 목록을 작성하세요.
- 2
결과 캡처
Begin with event_contract_checked, ingestion_freshness_sampled, duplicate_event_observed and document the grain of each event.
- 3
행을 증명하세요
소유자가 임계값, 제외 및 예상 복구 동작을 검토한 후에만 품질 쿼리 및 알림을 게시합니다.
- 4
결정을 내리세요
오래되거나, 불완전하거나, 중복되거나, 유형이 변경되는 중요한 이벤트 스트림은 무엇입니까?
범위 및 주변 사용 사례
올바른 측정 경계를 보려면 이 페이지를 선택하세요.
- 이 페이지를 사용하여 최신성, 필수 필드, 유형, 중복, 버전 및 볼륨 등 원격 분석 자체를 검증합니다.
- 소스 이벤트를 신뢰할 수 있고 애플리케이션 워크플로가 실패할 수 있는 경우 운영 모니터링 페이지를 사용하세요.
- 간결한 구현 개요를 위해 이벤트 추적 계획 템플릿을 사용하세요. 이 가이드에서는 진행 중인 품질 관리 프로그램을 다룹니다.
에이전트 프롬프트
이것을 코딩 에이전트에 붙여넣으세요.
바꾸기 YOUR_API_KEY 가입 후 에이전트에게 제품 흐름을 실행하고 첫 번째 이벤트를 확인하도록 요청합니다.
Telemetry Data Quality Monitoring with SQL 설정 프롬프트
Telemetry로 텔레메트리 데이터 품질 모니터링을 추가하세요.
/skill.md 및 이 Telemetry API 키를 사용하세요: YOUR_API_KEY
모든 결정에 중요한 이벤트 테이블에 대해 이벤트 그레인, 소유자, 필수 필드, 필드 유형, 타임스탬프 단위, 허용된 값, schema_version, 중복 키, 예상 도착 지연 및 예상 일일 볼륨 범위를 문서화합니다.
유효한 이벤트, 필수 필드 누락, 이벤트 ID 중복, 지연 도착 및 호환되지 않는 필드 유형에 대한 결정적 픽스처를 만듭니다. 수집 신선도, 필수 필드 null 비율, 중복 이벤트 비율, 스키마 버전 채택, 지연 도착 비율, 이벤트 이름 및 릴리스별 볼륨 변경을 위해 SQL을 빌드하세요.
최소 샘플 크기와 소유자가 있는 지속적인 위반에 대해서만 알림을 추가합니다. 각 알림의 링크를 계약 및 유효성 검사 쿼리에 포함합니다.
품질 테스트 이벤트에 프로덕션 페이로드, 자격 증명, 개인 데이터 또는 무제한 오류 텍스트를 배치하지 마세요.설정 단계
- 1고객 응대, 수익, 안정성 또는 규정 준수 결정을 내리는 데 도움이 되는 이벤트 테이블의 목록을 작성하세요.
- 2각 계약에 대한 세부 사항, 필수 필드, 유형, 단위, 허용 값, 지연 및 중복 정책을 정의합니다.
- 3유효한 이벤트, 누락된 이벤트, 중복된 이벤트, 지연된 이벤트, 호환되지 않는 이벤트에 대한 결정적 픽스처를 보냅니다.
- 4소유자가 임계값, 제외 및 예상 복구 동작을 검토한 후에만 품질 쿼리 및 알림을 게시합니다.
캡처할 이벤트
질문 잠금 해제
- 오래되거나, 불완전하거나, 중복되거나, 유형이 변경되는 중요한 이벤트 스트림은 무엇입니까?
- 현재 트래픽의 몇 퍼센트가 승인된 스키마 버전을 사용합니까?
- 대시보드가 변경되기 전에 릴리스에서 이벤트 볼륨이나 필수 필드 완전성이 변경되었습니까?
이벤트 스키마 시작점
이 워크플로우에 대한 이벤트 계약
쿼리 또는 스니펫을 프로덕션에 적용하기 전에 행 그레인, 방출 경계, 필수 유형, 개인 정보 보호 클래스, 예제 페이로드 및 유효성 검사 체크리스트를 검토하세요.
관련 제품 기능
이 워크플로를 다음에서 계속하세요. 구조화된 이벤트
안정적인 이벤트 이름, 타입이 지정된 필드, 개인 정보 보호가 검토된 운영 컨텍스트를 캡처합니다.
관련 SQL 레시피
SQL로 다음 질문에 답하세요
이 워크플로의 구조화된 필드에 대해 쿼리를 실행하고, 예제 결과를 검사하고, 유용한 답변을 대시보드 또는 알림으로 전환하세요.
이벤트 수집 신선도 측정
현재 어떤 프로덕션 이벤트 소스가 오래되었거나 지연되고 있나요?
레시피 열기필수 필드 Null 비율 측정
허용되지 않는 계정 식별자 누락 비율이 있는 이벤트 이름은 무엇입니까?
레시피 열기중복 이벤트 ID 찾기
두 번 이상 수신된 이벤트 ID는 무엇입니까?
레시피 열기이벤트 스키마 버전 채택 추적
어떤 프로듀서가 아직도 중요한 이벤트의 이전 버전을 내보냅니까?
레시피 열기늦게 도착하는 이벤트 측정
분석을 왜곡할 만큼 늦게 데이터를 전달하는 이벤트 프로듀서는 누구입니까?
레시피 열기이벤트 이름으로 Telemetry 볼륨 측정
어떤 이벤트 계약이 가장 많은 수집량을 생성합니까?
레시피 열기고객 사례
고객이 설명하는 관련 워크플로우
다음 단계
에이전트가 사용할 API 키를 생성하세요.
무료 플랜은 프롬프트를 실행하고, 테스트 이벤트를 보내고, 첫 번째 대시보드를 검토하는 데 충분합니다.
관련 페이지