Automatiser la BI et le Datawarehouse avec une Plateforme d’Automatisation

Les entreprises et administrations disposent de plus en plus de données sur leurs clients et utilisateurs. Vous connaissez leur comportement, leur type d’achats, leurs aspirations et bien plus encore. Pourtant, malgré toutes ces données, il reste difficile de bien cerner ses clients et de leur faire les bonnes propositions, au risque de les contrarier ou de ne pas leur adresser les bonnes offres.

Faire des propositions non ciblées ou mal appropriées peut amener les clients à se demander s'ils sont appréciés et valorisés. De plus, l'envoi d'offres qui ne sont pas personnalisées coûte du temps et de l'argent supplémentaires, gaspillant ainsi des ressources qui pourraient être utilisées à meilleur escient.

À cela s'ajoute le niveau de personnalisation que vos clients attendent désormais à la lumière des expériences qu'ils vivent avec des entreprises comme Amazon et Google. En plus de cette demande intense de personnalisation, les dirigeants de votre organisation sont toujours à la recherche de nouvelles façons de mieux comprendre la performance de votre organisation dans son ensemble, ainsi que la performance de ses équipes individuelles. L'automatisation de l'orchestration des données de votre organisation est la clé pour répondre à cette demande de personnalisation et satisfaire les besoins de vos dirigeants en matière d'informations organisationnelles clés.

Comment utiliser la plateforme d’automatisation pour orchestrer vos données de manière sécurisée ?

Ce n'est pas toujours simple. Comme la plupart des entreprises, vos données sont probablement stockées et réparties sur de nombreuses bases de données avec des technologies différentes.La qualité d’un datawarehouse repose sur une architecture complexe qui va inclure du Cloud avec un ensemble d’outils et des process qui gèrent des flux.
La performance repose elle sur la capacité à gérer les flux sur des espaces temps court, fiables et modifiables à l’extrême pour être capable d’engager le niveau de personnalisation exigé. Pour exemple, une nouvelle campagne va exiger de créer un data repository spécifique et temporaire pour adresser une clientèle en été uniquement.

La gestion des données et de la BI a des contraintes très différentes d’une application classique. Elle doit être scalable, modifiable rapidement, gérée à la demande et avec une qualité proche de 100%.
Des chiffres faux ou des campagnes mal adressées sont très coûteuses en image, CA et parfois simplement inacceptables.

Donc, quand vous devez coordonner et gérer les données de votre organisation, la première étape est de chercher une solution qui peut vous aider à gérer les flux et à orchestrer les données qui proviennent de tous vos systèmes vers un datawarehouse ou autre entrepôt. Il peut s'assurer que vos données sont extraites d'où qu'elles se trouvent, peu importe les technologies. Ensuite, la plateforme d’automatisation peut déplacer ces données vers l'endroit unique où vous voulez qu'elles soient stockées et accessibles, que ce soit votre plateforme BI, votre Data Warehouse ou Data Lake. Tout en regroupant ces données, la plateforme d’automatisation peut s'assurer qu'elles arrivent à destination dans le bon ordre, selon le bon calendrier et au bon moment. Si quelque chose échoue dans le processus, elle peut automatiquement prendre les mesures nécessaires pour remédier à la situation, ou, si nécessaire, revenir automatiquement en arrière.

Par exemple, disons que vous avez un processus en cinq étapes pour rassembler et déplacer chaque jour un ensemble de données spécifiques que votre direction rassemble dans un rapport à la fin de la semaine. Si la troisième tâche de ce workflow échoue, la plateforme d’automatisation peut arrêter le processus, vous envoyer une alerte, et même prendre des actions pour résoudre le problème, afin que l'étape quatre puisse commencer. Si nécessaire, elle peut revenir en arrière sur les étapes un à trois, de sorte que votre direction n'utilise pas seulement 60% des données de la semaine pour leur rapport qui aura un impact direct sur les décisions métier.

La plateforme d’automatisation permet d’assurer à 100% la qualité des données et process. Pourquoi ?

Un process complet comprend des tâches techniques (Backup des BDD, Transfert de fichiers...) des process intermédiaires (ETL, EAI...) pour la transformation des données, des process de sécurité (Encryptage, anonymisation…) et des process de génération de reporting et de routage. Le défi quotidien est de faire fonctionner tous ces process dans un ordre défini et à multiples voies et dans un délai limité en minimisant le risque d’erreurs. L’orchestration de ces process est le rouage essentiel pour maximiser le retour sur investissement d’un projet de BI ambitieux.

Lorsque vous utilisez la plateforme d’automatisation en tandem avec des outils ETL/EAI/MFT - ceux qui vous aident à déplacer et à normaliser vos données depuis les nombreux systèmes où elles se trouvent vers votre datawarehouse - vous rendez ces outils encore plus puissants.

Que faire si vous automatisez déjà votre gestion des données ?

Si vous utilisez déjà un outil d'automatisation pour coordonner et gérer les données de votre organisation, vous vous demandez peut-être pourquoi vous avez besoin d’une plateforme d’automatisation. Par exemple, vous avez peut-être un processus configuré pour s'exécuter automatiquement à une certaine heure chaque jour, et il fonctionne peut-être bien. Bien qu'il soit courant pour les organisations d'avoir plusieurs outils d’automatisation en place, il s’agit en fait d’outils de planification et d’ordonnancement, pensez à la plateforme comme un moyen d'aller plus loin dans l’automatisation et ses avantages.

Revenons à la troisième étape qui a échoué dans ce workflow en cinq étapes utilisées pour rassembler et agréger les données pour le rapport hebdomadaire de votre direction. La plateforme d’automatisation peut être utilisée pour s'assurer que la troisième dépendance de ce workflow n'échoue pas en premier lieu. En d'autres termes, il peut être configuré pour savoir que cette étape dépend d'un processus spécifique qui n'a pas encore été exécuté ou qui a été retardé. Ainsi, il ne s'agit pas seulement d'automatiser des processus spécifiques de gestion des données, mais de permettre une automatisation et une orchestration de bout en bout qui anticipent les problèmes avant qu'ils ne se transforment en problèmes, évitant ainsi les erreurs, les retards et les échecs qui sont souvent caractéristiques des outils de planification moins sophistiqués.

Cet exemple ne traite que d’un cas régulier et simple journalier. Si vous devez maintenant passer au mode agile avec des reports adaptés, à la demande, des campagnes personnalisées et tout type de process liées au besoin du Digital, il est impossible de gérer avec de la planification ou même un simple ordonnanceur ces process.

Faites passer l'orchestration des données de votre organisation au niveau industriel et digital avec la plateforme d’automatisation.

Les BI modernisées qui s’appuient sur des architectures hybrides doivent être massivement automatisées pour respecter les délais de plus en plus courts pour fournir les données, voire proche du temps réel parfois. Les métiers exigent de plus en plus de Dashboard et moins de rapports consultables sur leurs tablettes et portables.

Ces architectures complexes et coûteuses, sont réalisées pour être agiles et modifiables rapidement ou sur évènement, c’est là où l’automatisation devient stratégique pour répondre aux métiers avec efficacité.

Coté organisationnel, il est important d’aider les équipes à maintenir les modèles et leur qualité. Cela repose principalement à pouvoir :

• Faire des tests de manière répétitive et automatisée (des tests manuels sont moins fréquents, pas systématiques jusqu’au jour où…),
• Disposer d’un cadre de normes et standard dans l’implémentation (l’absence de normes rend les modèles illisibles et non maintenables et peuvent dépendre de prestataires)
• Gérer les process, garder aligné le design des process sur les besoins métiers (une gestion technique seule tend à dégrader les modèles et leur performance)

Pour gérer votre BI et vos données à l’heure du Digital, il est indispensable :

• De compléter votre architecture BI d’une plateforme d’automatisation qui va orchestrer tous les process de manière agnostique aux outils, BDD, systèmes et architecture.
• De centraliser les process pour les rendre facilement sécurisables, pilotables et administrables (La profusion de scripts sur les serveurs, écrit par différentes personnes dans des langages différents sans normes sont ingérables)
• De disposer d’une console centrale pour un monitoring central, proactif et automatisé agnostique aux compétences d’experts.

Un système complexe peut être défaillant et doit être prévu pour être diagnostiqué et relancé le plus vite possible. Un entrepôt de données endommagé peut avoir des conséquences majeures voire catastrophiques pour les métiers à l’heure du Digital ou tout est imbriqué (phénomène de carambolage)

La sécurité également doit être considérée et l’accès au traitement des données est critique, il doit être strictement contrôlé et accessible uniquement par des automates.

La mise à disposition de données de plus en plus fines et détaillées, donc critiques et sensibles, doit être gérée par des process et accessible via un portail self-service et non par des opérations manuelles. Quel centre de support refuserait à un manager tel ou tel rapport dans l’urgence alors qu’il n’y a pas le droit ?

Avec le self-service digital, vous serez ainsi en mesure d'exploiter la quintessence des données pour offrir des services encore plus personnalisés aux métiers, en veillant à ce qu'ils soient alignés avec les offres, les fonctionnalités et les services qui conviennent le mieux aux métiers - et votre direction aura les informations nécessaires pour prendre des décisions métiers pertinentes et avec un haut niveau de segmentation.