Références techniques relatives à l'algorithme MDT (Microsoft Decision Trees)

S’applique à : SQL Server 2019 et versions antérieures d’Analysis Services Azure Analysis Services Fabric/Power BI Premium

L’algorithme Microsoft Decision Trees est un algorithme hybride qui intègre différentes méthodes de création d’une arborescence et prend en charge plusieurs tâches analytiques, notamment la régression, la classification et l’association. L'algorithme MDT (Microsoft Decision Trees) prend en charge la modélisation des attributs discrets et continus.

Cette rubrique explique l'implémentation de l'algorithme, décrit la façon de personnaliser le comportement de l'algorithme pour différentes tâches et fournit des liens vers des informations supplémentaires sur l'interrogation des modèles d'arbre de décision.

Implémentation de l'algorithme MDT (Microsoft Decision Trees)

L'algorithme MDT (Microsoft Decision Trees) applique l'approche bayésienne pour acquérir les modèles causaux d'interaction en obtenant des distributions ultérieures approximatives pour les modèles. Pour une explication détaillée de cette approche, consultez l'article sur le site Microsoft Research, par Structure et apprentissage de paramètres.

La méthodologie d'évaluation de la valeur d'information des à priori nécessaires pour l'apprentissage repose sur l' équivalence de probabilité. Cette hypothèse indique que les données ne doivent pas aider à discriminer des structures de réseau qui représentent autrement les mêmes assertions d'indépendance conditionnelle. Il est supposé que chaque cas a un réseau antérieur bayésien unique et une mesure unique de confiance pour ce réseau.

Utilisant ces réseaux antérieurs, l'algorithme calcule ensuite les probabilités postérieures relatives de structures de réseau selon les données d'apprentissage actuelles et identifie les structures de réseau qui ont les probabilités postérieures les plus élevées.

L'algorithme MDT (Microsoft Decision Trees) utilise des méthodes différentes pour calculer la meilleure arborescence. La méthode utilisée dépend de la tâche, qui peut être une régression linéaire, une classification ou une analyse d'association. Un modèle unique peut contenir plusieurs arborescences pour des attributs prédictibles différents. De plus, chaque arborescence peut contenir plusieurs branches, selon le nombre d'attributs et de valeurs existant dans les données. La forme et la profondeur de l'arborescence générée dans un modèle particulier dépendent de la méthode de résultat et d'autres paramètres utilisés. Les modifications des paramètres peuvent également affecter le lieu de fractionnement des nœuds.

Génération de l'arborescence

Lorsque l'algorithme MDT (Microsoft Decision Trees) crée le jeu de valeurs d'entrée possibles, il effectue feature selection pour identifier les attributs et valeurs qui fournissent le plus d'informations et ne prend pas en considération les valeurs qui sont très rares. L'algorithme regroupe également des valeurs dans des bacspour créer des regroupements de valeurs qui peuvent être traitées comme une unité afin d'optimiser les performances.

Une arborescence est générée en déterminant les corrélations entre une entrée et le résultat ciblé. Une fois que tous les attributs ont été corrélés, l'algorithme identifie l'attribut unique qui sépare le mieux les résultats. Ce point de meilleure séparation est mesuré en utilisant une équation qui calcule le gain d'informations. L'attribut qui a le meilleur score en termes de gain d'informations est utilisé pour diviser les cas en sous-ensembles, qui subissent ensuite une analyse récursive par le même processus jusqu'à ce que l'arborescence ne puisse plus être fractionnée.

L'équation exacte utilisée pour évaluer le gain d'informations dépend des paramètres définis lorsque vous avez créé l'algorithme, du type de données de la colonne prédictible et du type de données de l'entrée.

Entrées discrètes et continues

Lorsque l'attribut prédictible est discret et les entrées sont discrètes, le comptage des résultats par entrée consiste à créer une matrice et à générer des scores pour chaque cellule de la matrice.

Toutefois, lorsque l'attribut prédictible est discret et les entrées sont continues, l'entrée des colonnes continues est automatiquement discrétisée. Vous pouvez accepter la valeur par défaut et avoir SQL Server Analysis Services trouver le nombre optimal de bacs, ou vous pouvez contrôler la façon dont les entrées continues sont discrétisées en définissant les DiscretizationMethod propriétés et DiscretizationBucketCount . Pour plus d’informations, consultez Modifier la discrétisation d’une colonne dans un modèle d’exploration de données.

Pour les attributs continus, l'algorithme utilise la régression linéaire pour déterminer où un arbre de décision se divise.

Lorsque l'attribut prédictible est un type de données numériques continues, la sélection des fonctionnalités est également appliquée aux sorties pour réduire le nombre possible de résultats et générer le modèle plus vite. Vous pouvez modifier le seuil pour la sélection des fonctionnalités et augmenter ou réduire ainsi le nombre de valeurs possibles en définissant le paramètre MAXIMUM_OUTPUT_ATTRIBUTES.

Résultat des méthodes et sélection des fonctionnalités

L'algorithme MDT (Microsoft Decision Trees) offre trois formules pour définir le score du gain d'informations : l'entropie de Shannon, le réseau bayésien avec a priori K2 et le réseau bayésien de Dirichlet avec a priori uniforme. Les trois méthodes sont bien établies dans le champ d'exploration de données. Nous vous recommandons d'expérimenter des paramètres et des méthodes différents pour déterminer ceux qui fournissent les meilleurs résultats. Pour plus d'informations sur ces méthodes de calcul de score, consultez Feature Selection.

Tous les algorithmes d’exploration de données SQL Server Analysis Services utilisent automatiquement la sélection des fonctionnalités pour améliorer l’analyse et réduire la charge de traitement. La méthode utilisée pour la sélection des fonctionnalités dépend de l'algorithme utilisé pour générer le modèle. Les paramètres d'algorithme qui contrôlent la sélection des fonctionnalités pour un modèle d'arbre de décision sont MAXIMUM_INPUT_ATTRIBUTES et MAXIMUM_OUTPUT.

Extensibilité et performance

La classification est une stratégie d'exploration de données importante. En général, la quantité d'informations nécessaire pour classifier les cas grandit de façon directement proportionnelle au nombre d'enregistrements d'entrée. Cela limite la taille des données qui peuvent être classées. L'algorithme MDT (Microsoft Decision Trees) utilise les méthodes suivantes pour résoudre ces problèmes, améliorer les performances et éliminer les restrictions de mémoire :

• Sélection des fonctionnalités pour optimiser la sélection des attributs.

• Score bayésien pour contrôler la croissance de l'arbre.

• Optimisation de mise en bac pour les attributs continus.

• Regroupement dynamique de valeurs d'entrée pour déterminer les valeurs les plus importantes.

L'algorithme MDT (Microsoft Decision Trees) est rapide et évolutif. Il a été conçu pour être facilement mis en parallèle, ce qui signifie que tous les processeurs fonctionnent ensemble pour générer un seul modèle cohérent. La combinaison de ces caractéristiques fait du classifieur d'arbre de décision un outil idéal pour l'exploration de données.

Si les contraintes de performances sont importantes, vous pouvez améliorer le temps de traitement pendant l'apprentissage d'un modèle d'arbre de décision en utilisant les méthodes suivantes. Toutefois, dans cette éventualité, sachez que la suppression d'attributs en vue d'améliorer les performances de traitement modifiera les résultats du modèle et le rendra peut-être moins représentatif de la totalité de la population.

• Augmentez la valeur du paramètre COMPLEXITY_PENALTY pour limiter la croissance de l'arbre.

• Limitez le numéro d'éléments dans les modèles d'association pour limiter le nombre d'arborescences générées.

• Augmentez la valeur du paramètre MINIMUM_SUPPORT pour éviter le surajustement.

• Restreignez le nombre de valeurs discrètes pour tout attribut à 10 ou moins. Vous pouvez essayer de regrouper les valeurs de différentes façons dans les différents modèles.

  Notes

  Vous pouvez utiliser les outils d’exploration de données disponibles dans SQL Server 2017 Integration Services (SSIS) pour visualiser la distribution des valeurs dans vos données et regrouper vos valeurs de manière appropriée avant de commencer l’exploration de données. Pour plus d’informations, consultez Tâche de profilage des données et visionneuse. Vous pouvez également utiliser les compléments d’exploration de données pour Excel 2007pour explorer, regrouper et réétiqueter les données dans Microsoft Excel.

Personnalisation de l'algorithme MDT (Microsoft Decision Trees).

L’algorithme Microsoft Decision Trees prend en charge les paramètres qui affectent les performances et la précision du modèle d’exploration de données résultant. Vous pouvez également définir des indicateurs de modélisation sur les colonnes du modèle ou de la structure d'exploration de données pour contrôler le mode de traitement des données.

Définition des paramètres de l'algorithme

Le tableau suivant décrit les paramètres que vous pouvez utiliser avec l’algorithme Microsoft Decision Trees.

COMPLEXITY_PENALTY
Contrôle la croissance de l'arbre de décision. Une valeur faible entraîne l'augmentation du nombre de fractionnements, alors qu'une valeur élevée entraîne la diminution du nombre de fractionnements. La valeur par défaut dépend du nombre d'attributs pour un modèle particulier, comme cela est décrit dans la liste suivante :

• De 1 à 9 attributs, la valeur par défaut est égale à 0,5.

• De 10 à 99 attributs, la valeur par défaut est égale à 0,9.

• À partir de 100 attributs, la valeur par défaut est égale à 0,99.

FORCE_REGRESSOR
Force l'algorithme à utiliser les colonnes spécifiées en tant que régresseurs, quelle que soit leur importance selon les calculs de l'algorithme. Ce paramètre est utilisé uniquement pour les arbres de décision qui prévoient un attribut continu.

[Disponible uniquement dans certaines éditions de SQL Server ]

MAXIMUM_INPUT_ATTRIBUTES
Spécifie le nombre d'attributs d'entrée que l'algorithme peut traiter avant d'appeler la sélection des fonctionnalités.

La valeur par défaut est 255.

Attribuez à ce paramètre la valeur 0 pour désactiver la sélection des fonctionnalités.

[Disponible uniquement dans certaines éditions de SQL Server]

MAXIMUM_OUTPUT_ATTRIBUTES
Spécifie le nombre d'attributs de sortie que l'algorithme peut traiter avant d'appeler la sélection des fonctionnalités.

La valeur par défaut est 255.

Attribuez à ce paramètre la valeur 0 pour désactiver la sélection des fonctionnalités.

[Disponible uniquement dans certaines éditions de SQL Server]

MINIMUM_SUPPORT
Spécifie le nombre minimal de cas de nœud terminal requis pour générer un fractionnement dans l'arbre de décision.

La valeur par défaut est de 10.

Vous devrez peut-être augmenter cette valeur si le dataset est très grand, pour éviter le surapprentissage.

SCORE_METHOD
Spécifie la méthode utilisée pour calculer le résultat de la division. Les options suivantes sont disponibles :

La valeur par défaut est 4 ou BDE.

Pour obtenir une explication de ces méthodes, consultez Feature Selection.

SPLIT_METHOD
Spécifie la méthode utilisée pour fractionner le nœud. Les options suivantes sont disponibles :

La valeur par défaut est 3.

Indicateurs de modélisation

L’algorithme Microsoft Decision Trees prend en charge les indicateurs de modélisation suivants. Lorsque vous créez la structure d'exploration de données ou le modèle d'exploration de données, vous définissez des indicateurs de modélisation pour spécifier la façon dont les valeurs de chaque colonne sont gérées pendant l'analyse. Pour plus d’informations, consultez Indicateurs de modélisation (exploration de données).

Régresseurs dans les modèles d'arbre de décision

Même si vous n’utilisez pas l’algorithme de régression linéaire Microsoft, tout modèle d’arbre de décision qui a des entrées et des sorties numériques continues peut potentiellement inclure des nœuds qui représentent une régression sur un attribut continu.

Il est inutile de spécifier qu'une colonne de données numériques continues représente un régresseur. L’algorithme Microsoft Decision Trees utilise automatiquement la colonne comme régresseur potentiel et partitionne le jeu de données en régions avec des modèles significatifs, même si vous ne définissez pas l’indicateur REGRESSOR sur la colonne.

Toutefois, vous pouvez utiliser le paramètre FORCED_REGRESSOR pour faire en sorte que l'algorithme utilise un régresseur particulier. Ce paramètre peut être utilisé uniquement avec les algorithmes Microsoft Decision Trees et Régression linéaire Microsoft. Lorsque vous définissez l'indicateur de modélisation, l'algorithme essaie de rechercher des équations de régression de type a*C1 + b*C2 + ... pour faire tenir les séquences dans les nœuds de l'arbre. La somme des résiduels est calculée et, si l'écart est trop grand, l'arbre est fractionné.

Par exemple, si vous prédisez le comportement d'achat de vos clients en utilisant Income comme attribut et que vous définissez l'indicateur de modélisation REGRESSOR sur la colonne, l'algorithme essaie tout d'abord de faire tenir les valeurs Income en utilisant une formule de régression standard. Si l'écart est trop grand, la formule de régression est abandonnée et l'arbre est fractionné sur un autre attribut. L'algorithme MDT essaie ensuite de faire tenir un régresseur pour le revenu dans chacune des branches après le fractionnement.

Configuration requise

Un modèle d'arbre de décision doit contenir une colonne clé, des colonnes d'entrée et au moins une colonne prédictible.

Colonnes d'entrée et prédictibles

L’algorithme Microsoft Decision Trees prend en charge les colonnes d’entrée spécifiques et les colonnes prédictibles répertoriées dans le tableau suivant. Pour plus d’informations sur la signification des types de contenu lorsqu’ils sont utilisés dans un modèle d’exploration de données, consultez Types de contenu (exploration de données).

Voir aussi

Algorithme MDT (Microsoft Decision Trees)
Exemples de requêtes de modèle d’arbre de décision
Mining Model Content for Decision Tree Models (Analysis Services - Data Mining)