Community-Connectors in Lakeflow Connect

Von Bedeutung

Dieses Feature befindet sich in der Betaversion. Arbeitsbereichsadministratoren können den Zugriff auf dieses Feature über die Vorschauseite steuern. Siehe Manage Azure Databricks Previews.

Community-Connectors sind Open-Source-Connectors, die den Zugriff von Lakeflow Connect auf Datenquellen ohne Unterstützung für verwaltete Connectoren erweitern. Die Community baut und verwaltet sie. Sie haben die folgenden Optionen:

Auswahl Description
Verwenden eines registrierten Community-Connectors Verwenden Sie einen registrierten Communityconnector, um Daten aus einer unterstützten Quelle in Azure Databricks aufzunehmen.
Erstellen eines benutzerdefinierten Connectors Erstellen Sie einen benutzerdefinierten Connector für eine neue Quelle mithilfe des Communityframeworks und der Vorlagen.

Wie Community-Konnektoren funktionieren

Community-Connectors basieren auf der Schnittstelle LakeflowConnect, die die Spark-Python-Datenquellen-API einschließt. Jeder Connector verarbeitet Authentifizierung, Schemaermittlung und inkrementelle Datenlesevorgänge, sodass Sie eine aufnahmepipeline erstellen, konfigurieren und ausführen können, die von Lakeflow Spark Declarative Pipelines unterstützt wird.

Wenn Sie einen Communityconnector verwenden, klont Azure Databricks den Connectorquellcode aus einem GitHub Repository in ein von Ihnen angegebenes Arbeitsbereichsverzeichnis. Die Pipeline liest dann den Quellcode des Connectors zur Laufzeit und führt die Datenaufnahmelogik für die konfigurierte Quelle aus.

Unterstützte Quellen

Die Gemeinschaft registriert regelmäßig neue Konnektoren. Die neueste Liste der unterstützten Quellen finden Sie in der Daten hinzufügen-Oberfläche (Data Ingestion) in Ihrem Azure Databricks-Arbeitsbereich oder im Lakeflow Community Connectors-Repository auf GitHub.

Überlegungen

  • Community-Connectors befinden sich in der aktiven Entwicklung. Schnittstellen und Verhalten können geändert werden.
  • Databricks verwaltet keine Community-Connectors. Sie werden nicht von Databricks SLAs unterstützt und garantieren keine Vorwärtskompatibilität.

Feedback senden

Melden Sie Fehler, und übermitteln Sie Featureanforderungen im Lakeflow Community Connectors-Repository .