Il existe plusieurs m\u00e9thodes afin d\u2019am\u00e9liorer les performances des traitements SSIS, l’une d’elles consiste \u00e0 se servir du lancement des flux ou des t\u00e2ches en parall\u00e8le en d\u00e9coupant le volume de donn\u00e9es \u00e0 traiter sur plusieurs \u00ab\u00a0threads\u00a0\u00bb dans SSIS par exemple. Comment ex\u00e9cuter plusieurs processus SSIS en parall\u00e8le ?<\/p>\n\n\n\n
En effet, consid\u00e9rer que l’on traite 100 millions de lignes avec cinq ann\u00e9es de donn\u00e9es de ventes par exemple. Il peut \u00eatre int\u00e9ressant de d\u00e9couper le flux de donn\u00e9es dynamiquement pour traiter chaque ann\u00e9e en parall\u00e8le. <\/p>\n\n\n\n
Tout d’abord cr\u00e9er des index avec des partitions<\/a> pour ne pas impacter les performances c\u00f4t\u00e9 base de donn\u00e9es SQL Server. En effet, il faut identifier les \u00e9ventuels goulots d’\u00e9tranglement<\/a> et optimiser \u00e9galement l’\u00e9criture des donn\u00e9es au niveau du SGBD. Pour cela, deux m\u00e9thodes sont disponibles, une au niveau du flux de contr\u00f4le et une au niveau du flux de donn\u00e9es. <\/p>\n\n\n\n Cette premi\u00e8re m\u00e9thode permet par exemple de charger diff\u00e9rentes sources de donn\u00e9es en m\u00eame temps. Tant qu’il n’y a pas d’interf\u00e9rence au niveau de l’int\u00e9grit\u00e9 des donn\u00e9es. <\/p>\n\n\n\n Dans le package SSIS, au niveau Control Flow<\/strong>, avec par exemple cinq flux de contr\u00f4le qui contiennent chacun un flux de donn\u00e9es (Data Flow) qui traite une ann\u00e9e par exemple.<\/p>\n\n\n\n Pour un d\u00e9coupage manuel, rediriger ces lignes vers des composants dans un flux de donn\u00e9es, Data Flow, par exemple en d\u00e9but de flux avec un composant Conditional Split<\/strong> pour traiter les donn\u00e9es et ensuite les regrouper en fin de flux de donn\u00e9es.<\/p>\n\n\n\n Il est \u00e9galement possible de lancer les packages SSIS en ligne de commande<\/strong><\/a>. Voici enfin un autre tutoriel Integration Services en Fran\u00e7ais avec un exemple pour apprendre \u00e0 d\u00e9ployer les package SSIS en ligne de commande MS-DOS<\/a><\/strong>.<\/p>\n\n\n\nD\u00e9couper le volume de donn\u00e9es au niveau du flux de contr\u00f4le<\/h2>\n\n\n\n
D\u00e9couper le volume de donn\u00e9es \u00ab\u00a0manuellement\u00a0\u00bb et rediriger les lignes<\/h2>\n\n\n\n