Condividi tramite


Modelli comuni per le pipeline di inserimento gestite

Lakeflow Connect offre modelli e tecniche per ottimizzare le pipeline di inserimento gestite. Usare questi modelli per controllare quali dati vengono inseriti, gestire gli aggiornamenti della pipeline e configurare comportamenti avanzati.

Non tutti i connettori supportano i modelli comuni in questa sezione.

Argomento Description
Selezione colonna Selezionare o escludere colonne specifiche durante l'inserimento per ridurre il volume di dati e migliorare le prestazioni.
Aggiornamento completo Forzare un ricaricamento completo dei dati dal sistema di origine.
Tracciamento della cronologia Tenere traccia delle modifiche cronologiche nei dati usando la dimensione a modifica lenta (SCD) di tipo 2.
Monitorare i costi Usare le tabelle di sistema per tenere traccia dei costi della pipeline e monitorare i modelli di utilizzo.
Pipeline multi-destinazione Inserire dati da una singola origine a più tabelle o cataloghi di destinazione.
Manutenzione della pipeline Gestire gli aggiornamenti della pipeline, le pause e i flussi di lavoro per la risoluzione dei problemi.
Assegnazione di tag alla pipeline Applicare i tag della pipeline per l'organizzazione delle risorse, il rilevamento della proprietà e l'attribuzione dei costi.
Filtro delle righe Filtrare le righe durante l'inserimento usando condizioni simili a SQL.
Configurare l'identità Run as Configurare quali autorizzazioni di identità vengono usate quando la pipeline viene eseguita.
Tabelle di destinazione dei nomi Assegnare un nome alle tabelle di destinazione. Per impostazione predefinita, a una tabella di destinazione viene assegnato il nome della tabella di origine corrispondente. Tuttavia, la denominazione di una tabella di destinazione è utile quando si inserisce lo stesso oggetto di origine due volte nello stesso schema. I connettori gestiti non supportano nomi di tabella duplicati nello stesso schema di destinazione. La denominazione di una tabella di destinazione può anche allineare le tabelle alle convenzioni di denominazione dell'organizzazione.