Supervisar SQL Server Machine Learning Services mediante vistas de administración dinámica (DMV)

Se aplica a: SQL Server 2016 (13.x) y versiones posteriores Azure SQL Managed Instance

Use las vistas de administración dinámica (DMV) para supervisar la ejecución de scripts externos (Python y R) y de los recursos usados, diagnosticar problemas y ajustar el rendimiento en SQL Server Machine Learning Services.

En este artículo, encontrará las DMV específicas de SQL Server Machine Learning Services. También encontrará consultas de ejemplo que muestran:

• Valores y opciones de configuración para el aprendizaje automático
• Sesiones activas que ejecutan scripts externos de Python o R
• Estadísticas de ejecución del runtime externo para Python y R
• Contadores de rendimiento para scripts externos
• Uso de memoria para el sistema operativo, SQL Server y los grupos de recursos externos
• Configuración de la memoria para SQL Server y los grupos de recursos externos
• Grupos de recursos de Resource Governor, que incluyen los grupos de recursos externos
• Paquetes instalados para Python y R

Para obtener más información general sobre las DMV, vea Vistas de administración dinámica del sistema.

Vistas de administración dinámica

Se pueden usar las siguientes vistas de administración dinámica para supervisar cargas de trabajo de aprendizaje automático en SQL Server. Para consultar las DMV, necesita tener el permiso VIEW SERVER STATE en la instancia.

Para obtener información sobre la supervisión de instancias de SQL Server, vea Catalog Views (Vistas de catálogo) y Resource Governor Related Dynamic Management Views (Vistas de administración dinámica relacionadas con el regulador de recursos).

Valores y configuración

Vea la configuración de la instalación de Machine Learning Services y las opciones de configuración.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre las vistas y funciones usadas, vea sys.dm_server_registry, sys.configurations y SERVERPROPERTY.

SELECT CAST(SERVERPROPERTY('IsAdvancedAnalyticsInstalled') AS INT) AS IsMLServicesInstalled
    , CAST(value_in_use AS INT) AS ExternalScriptsEnabled
    , COALESCE(SIGN(SUSER_ID(CONCAT (
                    CAST(SERVERPROPERTY('MachineName') AS NVARCHAR(128))
                    , '\SQLRUserGroup'
                    , CAST(serverproperty('InstanceName') AS NVARCHAR(128))
                    ))), 0) AS ImpliedAuthenticationEnabled
    , COALESCE((
            SELECT CAST(r.value_data AS INT)
            FROM sys.dm_server_registry AS r
            WHERE r.registry_key LIKE 'HKLM\Software\Microsoft\Microsoft SQL Server\%\SuperSocketNetLib\Tcp'
            AND r.value_name = 'Enabled'
            ), - 1) AS IsTcpEnabled
FROM sys.configurations
WHERE name = 'external scripts enabled';

La consulta devuelve las columnas siguientes:

Sesiones activas

Vea las sesiones activas que ejecutan scripts externos.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre las vistas de administración dinámica utilizadas, vea sys.dm_exec_requests, sys.dm_external_script_requests y sys.dm_exec_sessions.

SELECT r.session_id, r.blocking_session_id, r.status, DB_NAME(s.database_id) AS database_name
    , s.login_name, r.wait_time, r.wait_type, r.last_wait_type, r.total_elapsed_time, r.cpu_time
    , r.reads, r.logical_reads, r.writes, er.language, er.degree_of_parallelism, er.external_user_name
FROM sys.dm_exec_requests AS r
INNER JOIN sys.dm_external_script_requests AS er
ON r.external_script_request_id = er.external_script_request_id
INNER JOIN sys.dm_exec_sessions AS s
ON s.session_id = r.session_id;

La consulta devuelve las columnas siguientes:

Estadísticas de ejecución

Consulte las estadísticas de ejecución del runtime externo para R y Python. En la actualidad, solo están disponibles las estadísticas de las funciones de paquete RevoScaleR, revoscalepy o microsoftml.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre la vista de administración dinámica utilizada, consulte sys.dm_external_script_execution_stats. La consulta solo devuelve funciones que se han ejecutado más de una vez.

SELECT language, counter_name, counter_value
FROM sys.dm_external_script_execution_stats
WHERE counter_value > 0
ORDER BY language, counter_name;

La consulta devuelve las columnas siguientes:

Contadores de rendimiento

Consulte los contadores de rendimiento relacionados con la ejecución de scripts externos.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre la vista de administración dinámica utilizada, consulte sys.dm_os_performance_counters.

SELECT counter_name, cntr_value
FROM sys.dm_os_performance_counters 
WHERE object_name LIKE '%External Scripts%'

Sys.dm_os_performance_counters genera los siguientes contadores de rendimiento para los scripts externos:

Uso de la memoria

Vea información sobre la memoria usada por el sistema operativo, SQL Server y los grupos externos.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre las vistas de administración dinámica utilizadas, vea sys.dm_resource_governor_external_resource_pools y sys.dm_os_sys_info.

SELECT physical_memory_kb, committed_kb
    , (SELECT SUM(peak_memory_kb)
        FROM sys.dm_resource_governor_external_resource_pools AS ep
        ) AS external_pool_peak_memory_kb
FROM sys.dm_os_sys_info;

La consulta devuelve las columnas siguientes:

Configuración de la memoria

Consulte información sobre la configuración de la memoria máxima en porcentaje de SQL Server y los grupos de recursos externos. Si SQL Server se está ejecutando con el valor predeterminado de max server memory (MB), se considera un 100 % de la memoria del sistema operativo.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre las vistas utilizadas, vea sys.configurations y sys.dm_resource_governor_external_resource_pools.

SELECT 'SQL Server' AS name
    , CASE CAST(c.value AS BIGINT)
        WHEN 2147483647 THEN 100
        ELSE (SELECT CAST(c.value AS BIGINT) / (physical_memory_kb / 1024.0) * 100 FROM sys.dm_os_sys_info)
        END AS max_memory_percent
FROM sys.configurations AS c
WHERE c.name LIKE 'max server memory (MB)'
UNION ALL
SELECT CONCAT ('External Pool - ', ep.name) AS pool_name, ep.max_memory_percent
FROM sys.dm_resource_governor_external_resource_pools AS ep;

La consulta devuelve las columnas siguientes:

Grupos de recursos

En Resource Governor de SQL Server, un grupo de recursos representa un subconjunto de los recursos físicos de una instancia. Puede especificar los límites en la cantidad de CPU, E/S física y memoria que las solicitudes de aplicaciones entrantes, incluida la ejecución de scripts externos, pueden usar en el conjunto de recursos. Vea los grupos de recursos usados para SQL Server y los scripts externos.

Ejecute la consulta siguiente para obtener este resultado. Para obtener más información sobre las vistas de administración dinámica utilizadas, consulte sys.dm_resource_governor_resource_pools y sys.dm_resource_governor_external_resource_pools.

SELECT CONCAT ('SQL Server - ', p.name) AS pool_name
    , p.total_cpu_usage_ms, p.read_io_completed_total, p.write_io_completed_total
FROM sys.dm_resource_governor_resource_pools AS p
UNION ALL
SELECT CONCAT ('External Pool - ', ep.name) AS pool_name
    , ep.total_cpu_user_ms, ep.read_io_count, ep.write_io_count
FROM sys.dm_resource_governor_external_resource_pools AS ep;

La consulta devuelve las columnas siguientes:

Paquetes instalados

Puede ver los paquetes de R y Python instalados en SQL Server Machine Learning Services ejecutando un script de R o Python que los genere.

Paquetes de R instalados

Vea los paquetes de R instalados en SQL Server Machine Learning Services.

Ejecute la consulta siguiente para obtener este resultado. En la consulta usa un script de R para determinar los paquetes de R instalados con SQL Server.

EXECUTE sp_execute_external_script @language = N'R'
, @script = N'
OutputDataSet <- data.frame(installed.packages()[,c("Package", "Version", "Depends", "License", "LibPath")]);'
WITH result sets((Package NVARCHAR(255), Version NVARCHAR(100), Depends NVARCHAR(4000)
    , License NVARCHAR(1000), LibPath NVARCHAR(2000)));

Las columnas que se devuelven son:

Paquetes instalados para Python

Vea los paquetes de Python instalados en SQL Server Machine Learning Services.

Ejecute la consulta siguiente para obtener este resultado. En la consulta usa un script de Python para determinar los paquetes de Python instalados con SQL Server.

EXECUTE sp_execute_external_script @language = N'Python'
, @script = N'
import pkg_resources
import pandas
OutputDataSet = pandas.DataFrame(sorted([(i.key, i.version, i.location) for i in pkg_resources.working_set]))'
WITH result sets((Package NVARCHAR(128), Version NVARCHAR(128), Location NVARCHAR(1000)));

Las columnas que se devuelven son:

Pasos siguientes

• Eventos ampliados de aprendizaje automático
• Vistas de administración dinámica relacionadas con Resource Governor
• Vistas de administración dinámica del sistema
• Supervisar Machine Learning con informes personalizados en Management Studio