위치:
데이터 스트림 및 데이터 레이크 개체 새로 고침 내역
Data 360은 데이터 스트림 및 데이터 레이크 개체(DLO)에 처리된 레코드에 수집된 데이터의 레코드 수준 통계를 제공합니다.
데이터 스트림 새로 고침 내역
레코드 통계에 대한 데이터 스트림 레코드 홈의 새로 고침 내역 탭을 봅니다. 데이터를 Data 360에 처음 수집한 후 데이터 스트림은 특정 일정에 따라 새 데이터를 가져와 데이터를 새로 고칩니다. 데이터 새로 고침 정보는 데이터 스트림이 데이터를 수집하는 커넥터에 따라 다를 수 있습니다.
| 필드 이름 | 설명 |
|---|---|
| 새로 고침 날짜 | 조직의 시간대로 표시된 마지막 데이터 새로 고침 날짜 및 시간입니다. |
| 새로 고침 모드 | 전체 또는 증분 새로 고침과 같이 각 주기 동안 데이터가 새로 고쳐지는 방식입니다. |
| 기간 | 데이터 새로 고침에 소요된 시간입니다. |
| 상태 | 마지막 새로 고침의 상태입니다. |
| 처리된 레코드 수 | 새로 고침 주기 동안 처리된 레코드 수입니다. |
| 추가된 레코드 | 새로 고침 주기 동안 수집되거나 추가된 레코드 수입니다. |
| 레코드 제거됨 | 새로 고침 주기 동안 Data Cloud에서 삭제된 레코드 수입니다. |
| 문제 레코드 | 데이터 품질 문제 인해 수집되지 않은 문제 레코드 수입니다. 행에 부분 오류가 발생하면 시스템에서 행을 하나의 문제 레코드로 계산합니다. 마찬가지로 행에 총 실패가 발생하면 시스템에서 행을 하나의 문제 레코드로 계산합니다. 시스템은 행 내의 개별 실패가 아닌 영향을 받는 행 수에 초점을 맞춥니다. |
데이터 레이크 개체 새로 고침 내역
레코드 수준 통계에 대한 DLO 레코드 홈의 새로 고침 내역 탭을 봅니다. 통계는 시간별로 집계되며, 새로 고침 내역은 최대 20일 동안 유지됩니다. 데이터 스트림 및 데이터 변환에 사용되는 DLO에 대해 정보를 사용할 수 있습니다. 시간 구간 동안 DLO의 데이터 레코드가 변경되지 않은 경우 새로 고침 내역 탭에 세부 사항이 나열되지 않습니다.
| 필드 이름 | 설명 |
|---|---|
| 시작 시간 | 레코드 수준 통계를 집계하기 위한 시간별 기간의 시작 시간입니다. 조직 시간대에 표시됩니다. |
| 종료 시간 | 레코드 수준 통계를 집계하기 위한 시간별 기간의 종료 시간입니다. 조직 시간대에 표시됩니다. |
| 총 레코드 수 | 시간 기간 종료 시 DLO의 총 레코드 수입니다. |
| 추가된 레코드 | 시간 구간 동안 DLO에 추가되는 레코드 수입니다. |
| 업데이트된 레코드 | 시간 구간 동안 DLO에서 업데이트되는 레코드 수입니다. |
| 레코드 제거됨 | 시간 구간 동안 DLO에서 삭제된 레코드 수입니다. |
데이터 스트림 및 DLO 메트릭 간 차이점 이해
데이터 스트림 새로 고침 내역 및 DLO 새로 고침 내역은 서로 다른 데이터 보기를 제공합니다.
| 기능 | 데이터 스트림 내역 | DLO 새로 고침 내역 |
|---|---|---|
| 관점 | 비즈니스 논리 보기 | 저장소 보기 |
| 포커스 | 소스에서 처리된 레코드(예: Snowflake) | Data Lake 저장소의 파일 수준 작업 |
| 추가된 레코드 | 소스의 새 레코드 | 새 저장소 파일에 기록된 레코드 |
| 레코드 제거됨 | 소스에서 삭제된 레코드 | 다시 쓰거나 교체되는 저장소 파일의 레코드 |
예
이미 7,083,765개의 행이 있는 테이블에 새 행 13,169개를 처리합니다.
- 데이터 스트림에 표시되는 내용: 추가된 레코드 13,169개
- DLO 새로 고침에 표시되는 내용: 제거된 레코드 7,083,765개 및 추가된 레코드 7,096,934개
Data 360은 전체 7M+ 행 테이블을 다시 작성하여 13,000개의 변경 사항을 안전하게 커밋합니다. 총 테이블 수 = 추가된 레코드 - 제거된 레코드.
청구 및 크레딧 소비의 경우 항상 처리된 실제 비즈니스 데이터를 반영하는 데이터 스트림 새로 고침 내역 메트릭을 참조하십시오.
이 기사를 통해 문제를 해결했습니까?
개선을 위한 의견을 보내주세요.
