Supervisión de Integration Runtime en Azure Data Factory

SE APLICA A: Azure Data Factory Azure Synapse Analytics

Integration Runtime es la infraestructura de proceso que usa Azure Data Factory (ADF) para proporcionar varias funcionalidades de integración de datos en distintos entornos de red. Data Factory ofrece tres tipos de instancia de Integration Runtime:

• Tiempo de ejecución de integración de Azure
• Integration Runtime autohospedado
• Azure-SQL Server Integration Services (SSIS) Integration Runtime

Para obtener el estado de una instancia de Integration Runtime (IR), ejecute el siguiente comando de PowerShell:

Get-AzDataFactoryV2IntegrationRuntime -DataFactoryName MyDataFactory -ResourceGroupName MyResourceGroup -Name MyAzureIR -Status

El cmdlet devuelve información diferente para distintos tipos de instancia de Integration Runtime. En este artículo se explican las propiedades y los estados de cada tipo de instancia de Integration Runtime.

Tiempo de ejecución de integración de Azure

El recurso de proceso para una instancia de Azure Integration Runtime se puede administrar completamente de manera elástica en Azure. En la tabla siguiente se proporcionan las descripciones de las propiedades que devuelve el comando Get-AzDataFactoryV2IntegrationRuntime:

Propiedades

En la siguiente tabla se proporcionan las descripciones de las propiedades que devuelve el cmdlet para una instancia de Azure Integration Runtime:

Estado

En la tabla siguiente se proporcionan los estados posibles de una instancia de Azure Integration Runtime:

Integration Runtime autohospedado

En la sección siguiente se proporcionan las descripciones de las propiedades que devuelve el cmdlet Get-AzDataFactoryV2IntegrationRuntime.

Propiedades

En la tabla siguiente se proporcionan las descripciones de las propiedades de supervisión para cada nodo:

Algunos valores de las propiedades tienen más sentido cuando hay dos o más nodos en el entorno de ejecución de integración autohospedado (es decir, en un escenario de escalado horizontal).

Límite de trabajos simultáneos

El valor predeterminado del límite de trabajos simultáneos se establece en función del tamaño de la máquina. Los factores utilizados para calcular este valor dependen de la cantidad de RAM y del número de núcleos de CPU del equipo. Por tanto, cuantos más núcleos y más memoria, mayor será el limite predeterminado de trabajos simultáneos.

Realice un escalado horizontal aumentando el número de nodos. Al aumentar el número de nodos, el límite de trabajos simultáneos es la suma de los valores límite de trabajos simultáneos de todos los nodos disponibles. Por ejemplo, si un nodo le permite ejecutar un máximo de doce trabajos simultáneos, la incorporación de tres nodos más similares le permite ejecutar un máximo de 48 trabajos simultáneos (es decir, 4 x 12). Se recomienda aumentar el límite de trabajos simultáneos solo cuando vea un uso escaso de los recursos con los valores predeterminados en cada nodo.

El valor predeterminado calculado se puede invalidar en Azure Portal. Seleccione Autor > Conexiones > Runtimes de integración > Editar > Nodos > Modificar valor de trabajos simultáneos por nodo. También puede usar el comando update-Azdatafactoryv2integrationruntimenode de PowerShell.

Estado (por nodo)

En la tabla siguiente se proporcionan los estados posibles de los nodos de una instancia de Integration Runtime autohospedada:

Un nodo puede estar inactivo cuando no se puede conectar a otros nodos.

Estado (instancia general de Integration Runtime autohospedada)

En la tabla siguiente se proporcionan los estados posibles de una instancia de Integration Runtime autohospedada. Este estado depende de los de todos los nodos que pertenecen a la instancia de Runtime.

Use el cmdlet Get-AzDataFactoryV2IntegrationRuntimeMetric para capturar la carga de JSON que contiene las propiedades detalladas del entorno de ejecución de integración autohospedado y sus valores de instantánea durante el tiempo de ejecución del cmdlet.

Get-AzDataFactoryV2IntegrationRuntimeMetric -name $integrationRuntimeName -ResourceGroupName $resourceGroupName -DataFactoryName $dataFactoryName | ConvertTo-Json 

Salida de ejemplo (se supone que hay dos nodos asociados a esta instancia de Integration Runtime autohospedada):

{
	"IntegrationRuntimeName":  "<Name of your integration runtime>",
    "ResourceGroupName":  "<Resource Group Name>",
    "DataFactoryName":  "<Data Factory Name>",
    "Nodes":  [
		{
			"NodeName":  "<Node Name>",
			"AvailableMemoryInMB":  <Value>,
			"CpuUtilization":  <Value>,
			"ConcurrentJobsLimit":  <Value>,
			"ConcurrentJobsRunning":  <Value>,
			"MaxConcurrentJobs":  <Value>,
			"SentBytes":  <Value>,
			"ReceivedBytes":  <Value>
		},
		{
			"NodeName":  "<Node Name>",
			"AvailableMemoryInMB":  <Value>,
			"CpuUtilization":  <Value>,
			"ConcurrentJobsLimit":  <Value>,
			"ConcurrentJobsRunning":  <Value>,
			"MaxConcurrentJobs":  <Value>,
			"SentBytes":  <Value>,
			"ReceivedBytes":  <Value>
		}

	]
} 

Integration Runtime de SSIS de Azure

Azure-SSIS IR es un clúster totalmente administrado de máquinas virtuales (máquinas virtuales o nodos) de Azure que se dedica a ejecutar los paquetes SSIS. Puede invocar las ejecuciones de paquetes SSIS en Azure-SSIS IR usando varios métodos; por ejemplo, a través de SQL Server Data Tools habilitado para Azure (SSDT), la utilidad de línea de comandos AzureDTExec, T-SQL en SQL Server Management Studio (SSMS)/Agente SQL Server y ejecutando actividades de paquetes SSIS en canalizaciones de ADF. Azure-SSIS IR no ejecuta ninguna otra actividad de ADF. Una vez aprovisionado, puede supervisar sus propiedades globales/específicas del nodo y estados a través de Azure PowerShell, Azure Portal y Azure Monitor.

Supervisión de Azure-SSIS Integration Runtime con Azure PowerShell

Use el siguiente cmdlet de Azure PowerShell para supervisar las propiedades globales/específicas del nodo y los estados de Azure-SSIS IR.

Get-AzDataFactoryV2IntegrationRuntime -DataFactoryName $DataFactoryName -Name $AzureSSISName -ResourceGroupName $ResourceGroupName -Status

Propiedades

En la siguiente tabla se proporcionan las descripciones de las propiedades que devuelve el cmdlet anterior para una instancia de Azure-SSIS IR.

Estado (por nodo de Azure-SSIS IR)

En la tabla siguiente se proporcionan los estados posibles de un nodo de Azure-SSIS IR:

Estado (general de Azure-SSIS IR)

En la tabla siguiente se proporcionan los estados generales posibles de una instancia de Azure-SSIS IR. El estado general, a su vez, depende de los estados combinados de todos los nodos que pertenecen a la instancia de Azure-SSIS IR.

Supervisión de Azure-SSIS Integration Runtime en Azure Portal

Para supervisar la instancia de Azure-SSIS IR en Azure Portal, vaya a la página Entornos de ejecución de integración del centro Supervisión en la interfaz de usuario de ADF, donde puede ver todos los entornos de ejecución de integración.

A continuación, seleccione el nombre de la instancia de Azure-SSIS IR para abrir su página de supervisión, donde puede ver sus propiedades globales/específicas del nodo y estados. En esta página, en función de cómo defina la configuración general, la implementación y la configuración avanzada de Azure-SSIS IR, encontrará varios iconos de información o funcionales.

Los iconos informativos TYPE (Tipo) y REGION (Región) muestran el tipo y la región de Azure-SSIS IR, respectivamente.

El icono informativo NODE SIZE (Tamaño del nodo) muestra la SKU (serie tier_VM edition_VM de SSIS), el número de núcleos de CPU y el tamaño de la RAM por nodo de Azure-SSIS IR.

El icono informativo RUNNING / REQUESTED NODE(S) (Nodos solicitados/en ejecución) compara el número de nodos que se están ejecutando actualmente con el número total de nodos solicitados previamente para Azure-SSIS IR.

El icono informativo PAR/ROL EN ESPERA DUAL muestra el nombre del par de Azure-SSIS IR en espera dual que funciona sincronizado con el grupo de conmutación por error de Azure SQL Managed Instance para la continuidad empresarial y recuperación ante desastres (BCDR) y el rol principal/secundario actual de la instancia de Azure-SSIS IR. Cuando se produce la conmutación por error de SSISDB, las instancias de Azure-SSIS IR principal y secundaria intercambiarán sus roles (consulte Configuración de Azure-SSIS Integration Runtime para continuidad empresarial y recuperación ante desastres [BCDR]).

Los iconos funcionales se describen con más detalle a continuación.

Icono STATUS (Estado)

En el icono ESTADO de la página de supervisión de Azure-SSIS IR, puede ver su estado general; por ejemplo, En ejecución o Detenido. Al seleccionar el estado En ejecución, se abre una ventana con un botón dinámico Detener para detener la instancia de Azure-SSIS IR. Al seleccionar el estado Detenido, se abre una ventana con un botón dinámico Iniciar para iniciar la instancia de Azure-SSIS IR. La ventana emergente también tiene un botón Ejecutar paquete de SSIS para generar automáticamente una canalización de ADF con la actividad Ejecutar paquete de SSIS que se ejecuta en Azure-SSIS IR (consulte Ejecución de un paquete de SSIS mediante la actividad Ejecutar paquete SSIS de Azure Data Factory) y un cuadro de texto Id. de recurso, desde el que puede copiar el identificador de recurso de Azure-SSIS IR (/subscriptions/YourAzureSubscripton/resourcegroups/YourResourceGroup/providers/Microsoft.DataFactory/factories/YourADF/integrationruntimes/YourAzureSSISIR). El sufijo del identificador de recurso de Azure-SSIS IR que contiene los nombres de ADF y Azure-SSIS IR forma un identificador de clúster que se puede usar para adquirir componentes de SSIS Premium o con licencia adicionales de fabricantes de software independientes (ISV) y enlazarlos a su instancia de Azure-SSIS IR (consulte Instalación de componentes personalizados de pago o con licencia para la instancia de Integration Runtime para la integración de SSIS en Azure).

Icono PUNTO DE CONEXIÓN DE SERVIDOR DE SSISDB

Si usa el modelo de implementación de proyectos en el que los paquetes se almacenan en SSISDB hospedado en su servidor de Azure SQL Database o instancia administrada, verá el icono SSISDB SERVER ENDPOINT (PUNTO DE CONEXIÓN DEL SERVIDOR DE SSISDB) en la página de supervisión de Azure-SSIS IR (consulte Configuración de implementación de Azure-SSIS IR). En este icono, puede seleccionar un vínculo que designe el servidor de Azure SQL Database o la instancia administrada para que se muestre una ventana, donde puede copiar el punto de conexión del servidor desde un cuadro de texto y usarlo al conectarse desde SSMS para implementar, configurar, ejecutar y administrar los paquetes. En la ventana emergente, también puede seleccionar el icono See your Azure SQL Database or managed instance settings (Ver la configuración de Azure SQL Database o la instancia administrada) para volver a configurar o cambiar el tamaño de SSISDB en Azure Portal.

Icono PROXY/ALMACENAMIENTO PROVISIONAL

Si descarga, instala y configura IR autohospedado (SHIR) como proxy para que Azure-SSIS IR tenga acceso a los datos locales, verá el icono PROXY/ALMACENAMIENTO PROVISIONAL en la página de supervisión de Azure-SSIS IR (consulte Configuración de IR autohospedado como proxy para Azure-SSIS IR en Azure Data Factory). En este icono, puede seleccionar un vínculo que designe su instancia de SHIR para abrir la página de supervisión. También puede seleccionar otro vínculo que designe la instancia de Azure Blob Storage para el almacenamiento provisional con el fin de volver a configurar el servicio vinculado.

Icono VALIDATE VNET / SUBNET (Validar red virtual/subred)

Si une la instancia de Azure-SSIS IR a una red virtual, verá el icono VALIDATE VNET / SUBNET (VALIDAR RED VIRTUAL/SUBRED) en la página de supervisión de Azure-SSIS IR (consulte Unión de la instancia de Azure-SSIS IR a una red virtual). En este icono, puede seleccionar un vínculo que designe la red virtual y la subred para que aparezca una ventana, donde puede copiar el identificador de recurso de red virtual (/subscriptions/YourAzureSubscripton/resourceGroups/YourResourceGroup/providers/Microsoft.Network/virtualNetworks/YourARMVNet) y el nombre de subred de los cuadros de texto, así como validar las configuraciones de red virtual y subred para asegurarse de que los tráficos de red entrantes y salientes necesarios y la administración de la instancia de Azure-SSIS IR no estén obstruidos.

Icono DIAGNOSE CONNECTIVITY (Diagnosticar conectividad)

En el icono DIAGNOSTICAR CONECTIVIDAD de la página de supervisión de Azure-SSIS IR, puede seleccionar el vínculo Probar conexión para mostrar una ventana, donde puede comprobar las conexiones entre la instancia de Azure-SSIS IR y los almacenes de paquetes, configuraciones y datos relevantes, así como los servicios de administración, a través de su dirección de nombre de dominio completo (FQDN)/IP y el puerto designado (consulte Prueba de conexiones desde la instancia de Azure-SSIS IR).

Icono STATIC PUBLIC IP ADDRESSES (Direcciones IP públicas estáticas)

Si trae sus propias direcciones IP públicas estáticas a Azure-SSIS IR, verá el icono STATIC PUBLIC IP ADDRESSES (Direcciones IP públicas estáticas) en la página de supervisión de Azure-SSIS IR (consulte la sección Selección de direcciones IP públicas estáticas). En este icono, puede seleccionar los vínculos que designan las primeras/segunda direcciones IP públicas estáticas para Azure-SSIS IR para que aparezca una ventana, donde puede copiar el identificador de recurso (/subscriptions/YourAzureSubscripton/resourceGroups/YourResourceGroup/providers/Microsoft.Network/publicIPAddresses/YourPublicIPAddress) de un cuadro de texto. En la ventana emergente, también puede seleccionar el vínculo See your first/second static public IP address settings (Ver la configuración de la primera/segunda dirección IP pública estática) para administrar su primera y segunda dirección IP pública estática en Azure Portal.

Icono PACKAGE STORES (Almacenes de paquetes)

Si usa el modelo de implementación de paquetes en el que los paquetes se almacenan en el sistema de archivos/Azure Files/base de datos de SQL Server (MSDB) hospedado en Azure SQL Managed Instance y administrado a través de almacenes de paquetes de Azure-SSIS IR, verá el icono PACKAGE STORES (ALMACENES DE PAQUETES) en la página de supervisión de Azure-SSIS IR (consulte Configuración de implementación de Azure-SSIS IR). En este icono, puede seleccionar un vínculo que designe el número de almacenes de paquetes adjuntos a su instancia de Azure-SSIS IR para que se muestre una ventana, donde podrá volver a configurar los servicios vinculados relevantes para sus almacenes de paquetes de Azure-SSIS IR en el sistema de archivos/Azure Files/MSDB hospedado por Azure SQL Managed Instance.

Icono ERROR(S) (Errores)

Si hay problemas con el inicio, la detención, el mantenimiento o la actualización de su instancia de Azure-SSIS IR, verá un icono ERRORES adicional en la página de supervisión de Azure-SSIS IR. En este icono, puede seleccionar un vínculo que designe el número de errores generados por la instancia de Azure-SSIS IR para que se muestre una ventana, donde puede ver los errores con más detalles y copiarlos para encontrar las soluciones recomendadas en nuestra guía de solución de problemas (consulte Solución de problemas de su instancia de Azure-SSIS IR).

Supervisión de Azure-SSIS Integration Runtime con Azure Monitor

Para supervisar la instancia de Azure-SSIS IR con Azure Monitor, consulte Supervisión de operaciones de SSIS con Azure Monitor.

Más información sobre Integration Runtime de SSIS de Azure

Consulte los artículos siguientes para más información sobre Integration Runtime de SSIS de Azure:

• Integration Runtime de SSIS de Azure. En este artículo se proporciona información conceptual sobre los entornos de ejecución de integración en general, incluida la instancia de Integration Runtime para la integración de SSIS en Azure.
• Tutorial: Implementación de paquetes SSIS en Azure. En este artículo se proporcionan instrucciones paso a paso para crear una instancia de Azure-SSIS IR y usar Azure SQL Database para hospedar el catálogo de SSIS (SSISDB).
• Cómo: Creación de una instancia de Integration Runtime de SSIS de Azure. En este artículo se amplía el tutorial y se proporcionan instrucciones sobre el uso de Azure SQL Managed Instance para hospedar SSISDB.
• Administración de Integration Runtime de SSIS de Azure. En este artículo se muestra cómo iniciar, detener o eliminar Azure-SSIS IR. También se muestra cómo escalar horizontalmente mediante la adición de más nodos.
• Unión de una instancia de Integration Runtime para la integración de SSIS en Azure a una red virtual. En este artículo se proporcionan instrucciones sobre cómo unir la instancia de Azure-SSIS IR a una red virtual.

Contenido relacionado

Consulte los siguientes artículos para la supervisión de las canalizaciones de maneras diferentes:

• Guía de inicio rápido:creación de una instancia de Data Factory
• Uso de Azure Monitor de Azure para supervisar las canalizaciones Data Factory