Performances des ensembles de données à importer

  • Rversion finale: Yokohama
  • Mis à jour 30 janv. 2025
  • 1 minute de lecture
  • L’algorithme transforme les jeux d’importation de leur table intermédiaire en leur destination finale.

    L’importation de données via un jeu d’importation nécessite deux phases :
    1. Les données sont chargées à partir d’une source de données dans une table intermédiaire
    2. Les données sont transformées à partir de la table intermédiaire en une table cible

    L’algorithme de transformation fonctionne par « blocs » de 100 enregistrements à la fois, contrairement à l’algorithme précédent qui transformait un seul enregistrement à la fois. Cette nouvelle approche permet au serveur d’applications de pré-extraire diverses informations pertinentes pour chaque bloc d’enregistrements, ce qui réduit le nombre d’interactions uniques avec la base de données et améliore le débit.

    Qui peut s’attendre à voir une amélioration des performances ?

    Tout client utilisant des ensembles d’importation doit s’attendre à une amélioration des performances dans les grandes transformations.

    Quels types de transformations bénéficient le plus de ces changements ?

    Les transformations avec un grand nombre de colonnes de type référence ou choix voient la plus grande amélioration.

    Quels types de transformations en profitent le moins ?

    Les transformations qui avec des conditions de fusion complexes ou non clés présentent un avantage proportionnellement plus faible.