Usted está aquí:
Eliminar registros utilizando un archivo Eliminar
Para eliminar registros de datos ingresados utilizando el conector AWS S3, Google Cloud Storage (GCS), Microsoft Azure, API de ingreso o SFTP, cree un archivo de eliminación. Cree el archivo en formato de archivo CSV o Parquet. Las transmisiones de datos de S3, GCS y Azure admiten el ingreso de archivos Parquet.
Para obtener consideraciones acerca de varios formatos de archivo, revise Formatos de archivo admitidos en Data 360.
Cuando elimina más de 600.000 registros entre actualizaciones, la transmisión de datos realiza una actualización completa.
Eliminar registros
Para eliminar registros:
-
Cree un archivo de eliminación con la lista de claves principales de los registros para eliminar.
El campo primaryKey en el archivo de eliminación debe coincidir con el tipo de datos de clave principal del objeto de lago de datos (DLO). Por ejemplo, si el campo de clave principal de DLO es un número, el tipo de datos principalKey del archivo de eliminación debe ser un número.
- Para la detección correcta del delimitador de archivos, envuelva los valores de clave principal entre comillas dobles.
- Para registros ingresados desde un archivo CSV, cree un archivo de eliminación sin encabezado en formato CSV.
- Para registros ingresados desde un archivo Parquet, cree un archivo de eliminación de Parquet con una única columna denominada primaryKey.
-
Asigne un nombre al archivo de eliminación utilizando el prefijo Deletion_ seguido del CSV coincidente con el nombre del archivo de origen.
El nombre del archivo distingue entre mayúsculas y minúsculas, de modo que asegúrese de que el prefijo es exactamente "Deletion_" y el nombre del archivo de origen permanece sin cambios. Por ejemplo, si un archivo se denomina Customer*, que contiene un comodín, puede denominar su archivo de eliminación Deletion_Customer.csv o Deletion_Customer.parquet.
ImportantePara evitar errores de procesamiento o pérdida de datos no intencionada, no sobrescriba archivos de eliminación existentes a través del conector SFTP. En su lugar, cree un nuevo archivo con nombre exclusivo para cada solicitud de eliminación. Asegúrese de que los nombres de archivo son exclusivos y anexe una marca de tiempo utilizando este formato:
Formato
Deletion_{FileNameWildcard}_YYYYMMDDHHMMSS:Ejemplo: Si su comodín de nombre de archivo es
UserData, asigne un nombre similar a su archivo de eliminación cargado: Deletion_UserData_20240514103000.csvEste formato de marca de tiempo garantiza que el conector SFTP procese cada archivo de eliminación de forma independiente.
- En el directorio que contiene los archivos de origen, cree una subcarpeta denominada eliminar.
- Cargue el archivo de eliminación en la carpeta eliminar.
Eliminar registros cifrados
Para eliminar registros cifrados ingresados utilizando un conector SFTP:
- Localice el archivo de esquema creado durante la configuración de conexión SFTP.
- Verifique que el archivo de esquema tiene el formato correcto y que no está dañado. Para los requisitos de formato de archivo, consulte los pasos para la eliminación de registros.
- Verifique que la carpeta de eliminación y sus carpetas principal y raíz tienen los permisos Leer, Escritura y Eliminar.
- Para eliminar el archivo de esquema, agréguelo a la carpeta de eliminación.
Su transmisión de datos ingresa un archivo denominado accounts-file utilizando el comodín accounts-*. El archivo procede de un depósito denominado accounts-bucket y una carpeta denominada accounts-folder.
- Para eliminar registros, cree una carpeta de eliminación bajo la carpeta -.
- Dependiendo del formato de archivo, cree un archivo denominado Deletion_-.csv o Deletion_-.parquet de cuentas.
- La estructura de su carpeta puede ser accounts-folder/delete/Deletion_accounts-.csv o accounts-folder/delete/Deletion_accounts-.parquet.
Archivo de eliminación CSV de muestra
"0000-0000-0000"
"0000-0000-0001"
"0000-0000-0002"
Archivo de eliminación Parquet de muestra
primaryKey
"0000-0000-0000"
"0000-0000-0001"
"0000-0000-0002"
