Déclenchement des applications, des processus et des workflows CI/CD en fonction d’événements Azure Machine Learning

Dans cet article, vous allez apprendre à configurer des applications, des processus ou des flux de travail CI/CD basés sur des événements Azure Machine Learning. Par exemple, les e-mails de notification d’échec ou les exécutions de pipeline ML, lorsque certaines conditions sont détectées en utilisant Azure Event Grid.

Azure Machine Learning gère l’intégralité du cycle de vie du processus d’apprentissage automatique, y compris l’apprentissage du modèle, le déploiement du modèle et la surveillance. Vous pouvez utiliser Event Grid pour réagir aux événements Azure Machine Learning, comme l’achèvement des exécutions d’apprentissage, l’enregistrement et le déploiement de modèles et la détection de la dérive de données, à l’aide d’architectures serverless modernes. Vous pouvez alors vous abonner et utiliser des événements tels que la modification de l’état d’exécution, la fin d’une exécution, l’inscription de modèles, le déploiement de modèles et la détection d’une dérive de données dans un espace de travail.

Quand utiliser Event Grid pour les actions pilotées par des événements :

• Envoyer des e-mails à la fin d’une exécution et en cas d’échec d’exécution
• Utiliser une fonction Azure après l’inscription d’un modèle
• Événements de diffusion en continu d’Azure Machine Learning sur divers points de terminaison
• Déclencher un pipeline ML quand une dérive est détectée

Prérequis

Pour utiliser Event Grid, vous devez avoir un accès contributeur ou propriétaire à l’espace de travail Azure Machine Learning pour lequel vous allez créer des événements.

Modèle et types d’événements

Azure Event Grid lit les événements à partir de sources, comme Azure Machine Learning et d’autres services Azure. Ces événements sont ensuite envoyés à des gestionnaires d’événements tels qu’Azure Event Hubs, Azure Functions, Logic Apps et d’autres. Le diagramme suivant montre comment Event Grid connecte les sources et les descripteurs, mais ne constitue pas une liste complète des intégrations prises en charge.

Pour plus d’informations sur les sources d’événements et les gestionnaires d’événements, consultez Qu’est-ce qu’Event Grid ?

Types d’événements pour Azure Machine Learning

Azure Machine Learning fournit des événements tout au long du cycle de vie de l’apprentissage automatique :

Filtrer les événements et s’y abonner

Ces événements sont publiés via Azure Event Grid. À l’aide du Portail Microsoft Azure, de PowerShell ou d'Azure CLI, les clients peuvent facilement s’abonner aux événements en spécifiant un ou plusieurs types d’événements, et en filtrant des conditions.

Lors de la configuration de vos événements, vous pouvez appliquer des filtres de manière à ce qu’ils ne se déclenchent que sur des données d’événements spécifiques. Dans l’exemple ci-dessous, pour les événements de modification de l’état d’exécution, vous pouvez filtrer par type d’exécution. L’événement se déclenche uniquement lorsque les critères sont satisfaits. Pour plus d’informations sur les données d’événement sur lesquelles vous pouvez filtrer, consultez le schémaAzure Machine Learning Event Grid.

Les abonnements pour les événements Azure Machine Learning sont protégés par le contrôle d’accès en fonction du rôle Azure (Azure RBAC). Seul le contributeur ou propriétaire d’un espace de travail peut créer, mettre à jour et supprimer des abonnements aux événements. Des filtres peuvent être appliqués aux abonnements aux événements pendant la création de l’abonnement aux événements ou ultérieurement.

1. Accédez au Portail Azure, sélectionnez un nouvel abonnement ou un abonnement existant.

2. Sélectionnez l’entrée Événements dans la zone de navigation gauche, puis sélectionnez + Abonnement aux événements.

3. Sélectionnez l’onglet Filtres et faites défiler jusqu’à Filtres avancés. Pour les champs Clé et Valeur, fournissez les types de propriété par lesquels vous souhaitez filtrer. Ici, vous pouvez voir que l’événement se déclenche uniquement lorsque le type d’exécution est une exécution de pipeline ou une exécution d’étape de pipeline.

   

• Filtrer par type d’événement : Un abonnement aux événements peut spécifier un ou plusieurs types d’événements Azure Machine Learning.

• Filtrer par sujet d’événement : Azure Event Grid prend en charge les filtres de sujet reposant sur les correspondances commence par et se termine par, afin que les événements dont l’objet correspond soient remis à l’abonné. Des événements d’apprentissage automatique différents ont un format de sujet différent.

  Type d'événement	Format du sujet	Exemple de sujet
  Microsoft.MachineLearningServices.RunCompleted	experiments/{ExperimentId}/runs/{RunId}	experiments/b1d7966c-f73a-4c68-b846-992ace89551f/runs/my_exp1_1554835758_38dbaa94
  Microsoft.MachineLearningServices.ModelRegistered (préversion)	models/{modelName}:{modelVersion}	models/sklearn_regression_model:3
  Microsoft.MachineLearningServices.ModelDeployed (préversion)	endpoints/{serviceId}	endpoints/my_sklearn_aks
  Microsoft.MachineLearningServices.DatasetDriftDetected (préversion)	datadrift/{data.DataDriftId}/run/{data.RunId}	datadrift/4e694bf5-712e-4e40-b06a-d2a2755212d4/run/my_driftrun1_1550564444_fbbcdc0f
  Microsoft.MachineLearningServices.RunStatusChanged	experiments/{ExperimentId}/runs/{RunId}	experiments/b1d7966c-f73a-4c68-b846-992ace89551f/runs/my_exp1_1554835758_38dbaa94

• Filtrage avancé : Azure Event Grid prend également en charge le filtrage avancé basé sur le schéma d’événement publié. D’avantage d’informations sur le schéma des événement Azure Machine Learning peuvent être trouvées dans Schéma des événements Azure Event Grid pour Azure Machine Learning. Pour l’événement Microsoft.MachineLearningServices.ModelRegistered, afin de filtrer la valeur de balise du modèle :

  --advanced-filter data.ModelTags.key1 StringIn ('value1')
  

  Pour en savoir plus sur l’application de filtres, consultez Filtrer des événements pour Event Grid.

Consommer des événements Machine Learning

Les applications qui gèrent des événements Machine Learning doivent suivre certaines pratiques recommandées :

Azure Event Grid permet aux clients de créer des gestionnaires de messages découplés, qui peuvent être déclenchés par des événements Azure Machine Learning. Voici quelques exemples notables de gestionnaires de messages :

• Azure Functions
• Azure Logic Apps
• Hubs d'événements Azure
• Pipeline Azure Data Factory
• Webhooks génériques, qui peuvent être hébergés sur la plateforme Azure ou ailleurs

Configuré dans le portail Azure

1. Ouvrez le Portail Azure et accédez à votre espace de travail Azure Machine Learning.

2. Dans la barre de gauche, sélectionnez Événements puis sélectionnez Abonnements aux événements.

   

3. Sélectionnez le type d’événement à consommer.

   

4. Sélectionnez le point de terminaison sur lequel publier l’événement. Dans la capture d’écran suivante, Event Hub est le point de terminaison sélectionné :

   

Une fois que vous avez confirmé votre sélection, sélectionnez suivant. Après la configuration, ces événements seront envoyés à votre point de terminaison.

Configurer avec l’interface CLI

Vous pouvez installer la dernière version d’Azure CLI ou utiliser Azure Cloud Shell fourni dans le cadre de votre abonnement Azure.

Pour installer l’extension Event Grid, utilisez la commande suivante à partir de l’interface CLI :

az extension add --name eventgrid

L’exemple suivant montre comment sélectionner un abonnement Azure et créer un abonnement aux événements pour Azure Machine Learning :

# Select the Azure subscription that contains the workspace
az account set --subscription "<name or ID of the subscription>"

# Subscribe to the machine learning workspace. This example uses EventHub as a destination. 
az eventgrid event-subscription create --name {eventGridFilterName} \
  --source-resource-id /subscriptions/{subId}/resourceGroups/{RG}/providers/Microsoft.MachineLearningServices/workspaces/{wsName} \
  --endpoint-type eventhub \
  --endpoint /subscriptions/{SubID}/resourceGroups/TestRG/providers/Microsoft.EventHub/namespaces/n1/eventhubs/EH1 \
  --included-event-types Microsoft.MachineLearningServices.ModelRegistered \
  --subject-begins-with "models/mymodelname"

Exemples

Exemple : Envoyer des alertes par e-mail

Utilisez Azure Logic Apps pour configurer des e-mails pour tous vos événements. Personnalisez avec des conditions et spécifiez des destinataires pour permettre la collaboration et la sensibilisation entre les équipes travaillant ensemble.

1. Dans la Portail Azure, accédez à votre espace de travail Azure Machine Learning et sélectionnez l’onglet Événements dans la barre de gauche. À partir de là, sélectionnez Applications logiques.

   

2. Connectez-vous à l’interface utilisateur de l’application logique et sélectionnez le service Machine Learning comme type de rubrique.

   

3. Sélectionnez le ou les événements pour lesquels vous souhaitez recevoir des alertes. Par exemple, la capture d’écran suivante RunCompleted.

   

4. Ensuite, ajoutez une étape pour utiliser cet événement et rechercher un e-mail. Il existe plusieurs comptes de messagerie différents que vous pouvez utiliser pour recevoir des événements. Vous pouvez également configurer des conditions sur le moment où envoyer une alerte par e-mail.

   

5. Sélectionnez Envoyer un e-mail et renseignez les paramètres. Dans l’objet, vous pouvez inclure le Type d’événement et la Rubrique pour aider à filtrer les événements. Vous pouvez également inclure un lien vers la page de l’espace de travail pour les exécutions dans le corps du message.

   Pour enregistrer cette action, sélectionnez Enregistrer sous dans le coin gauche de la page.

   

Étapes suivantes

En savoir plus sur Event Grid et essayer les événements Azure Machine Learning :

• À propos d’Event Grid

• Schéma d’événements pour Azure Machine Learning