Spark Synapse to Fabric Spark Migration Assistant (versión preliminar)

Nota:

Spark Synapse to Fabric Migration Assistant se encuentra actualmente en versión preliminar pública.

Utilice el Asistente de Migración de Spark Synapse a Fabric Spark para migrar cargas de trabajo de Spark de Azure Synapse Analytics a Microsoft Fabric a través de un flujo de trabajo guiado.

En versión preliminar pública, el asistente migra grupos de Spark, cuadernos, definiciones de trabajos de Spark y bases de datos de lago.

La migración no mueve los datos. El asistente copia y transforma los elementos de Spark admitidos para Fabric y genera un informe de migración para cada ejecución.

El asistente admite la migración de los siguientes elementos:

  • Los grupos de Spark se migran a los Fabric Pools y a los entornos correspondientes.
  • Se migran cuadernos y entornos asociados.
  • Las definiciones de trabajos de Spark (SJD) se migran con entornos asociados.
  • Las bases de datos de Lake se asignan a esquemas de Fabric y las tablas delta administradas se migran mediante la creación de accesos directos de catálogo de OneLake.

Para obtener detalles de la migración de bases de datos en el repositorio de datos en el lago, la base de datos predeterminada de Synapse se asigna automáticamente al esquema dbo en Fabric, y se migran más bases de datos como esquemas en el mismo Lakehouse.

Cómo funciona la migración

Para migrar grupos de Apache Spark, cuadernos, definiciones de trabajos de Spark y bases de datos de lago a Fabric, el asistente le guía a través de un flujo de trabajo corto.

Copiar y transformar elementos

En primer lugar, el asistente le ayuda a localizar el área de trabajo de origen que contiene los elementos de ingeniería de datos que desea migrar. A continuación, copia y transforma los elementos admitidos para que se puedan ejecutar en un área de trabajo de Fabric.

Supervisión de la migración

Durante la migración, puede supervisar el progreso y revisar un resumen de los elementos de ingeniería de datos migrados. Una vez completada la migración, los nuevos elementos están disponibles en el área de trabajo de Fabric.

Introducción al Asistente para la migración

  1. Abra un área de trabajo de Fabric y seleccione Migrar en la barra de herramientas.

  2. En el asistente, seleccione Elementos de ingeniería de datos.

    Captura de pantalla de la migración a Fabric.

  3. Especifique los detalles del área de trabajo de Azure Synapse de origen. Puede buscar el espacio de trabajo de origen por suscripción. Después de seleccionar la suscripción, puede seleccionar el área de trabajo de origen de esa suscripción.

    • Introduzca un nombre de migración.
    • Seleccione la Suscripción y el área de trabajo de origen.

    Captura de pantalla de seleccionar un origen.

  4. Seleccione el área de trabajo de Fabric de destino donde se deben migrar los elementos.

    El área de trabajo de origen y el área de trabajo de Fabric de destino que seleccione en el asistente determinan la dirección de la migración.

    Captura de pantalla de la selección de un destino.

  5. Revise las conexiones de puerta de enlace de datos disponibles a las que puede acceder. Agregue una nueva conexión si es necesario.

    Captura de pantalla de la selección o creación de una conexión de puerta de enlace de datos.

    • Para crear una conexión, seleccione Agregar nueva.

    • El servidor y la ruta de acceso se generan a partir de la cuenta y el contenedor predeterminados de Azure Data Lake Storage Gen2 para el área de trabajo de origen. Este valor es necesario porque la migración de la base de datos de lago crea accesos directos a las ubicaciones de la tabla administrada.

      Captura de pantalla de la nueva conexión.

  6. Opcionalmente, seleccione la conexión de puerta de enlace de datos que se usará para esta ejecución de migración.

    Nota:

    Si no selecciona una conexión de puerta de enlace, las bases de datos no se migran.

  7. Revise los detalles de la migración y, a continuación, seleccione Siguiente.

    Captura de pantalla de finalización y migración.

    Cerrar el cuadro de diálogo en este punto le permite cancelar la migración:

    Captura de pantalla de la cancelación de esta migración.

  8. Seleccione Migrar para iniciar la migración.

    Captura de pantalla del botón de migración.

  9. Supervisar el progreso de la migración. Durante la migración, puede ver el estado y el resumen de los elementos migrados.

    • El indicador indica que la migración ha comenzado.

    • Una notificación en la esquina superior derecha indica el progreso.

    • Hay disponible un vínculo al informe de migración .

    • Después de unos segundos, se le redirigirá automáticamente al informe.

      Captura de pantalla de la migración de elementos de Spark.

      Nota:

      También se puede acceder al informe de migración desde el Centro de supervisión. Puede buscar el trabajo de migración por su nombre de migración o filtrar por el tipo de elemento Definición de trabajos de Spark.

  10. Seleccione el vínculo Informe de migración del paso anterior para revisar los resultados.

    Captura de pantalla del resumen de la migración.

    Nota:

    Seleccione Detalles para ver información adicional sobre errores o advertencias detectados durante la migración.

Limitaciones de la vista preliminar pública

  • Las áreas de trabajo de Synapse en una red virtual (VNET) no se pueden migrar.
  • Las configuraciones de Spark, las bibliotecas personalizadas y la configuración del ejecutor personalizado no se migran.
  • No se admiten formatos de tabla no delta.