Nous pensons qu’il est indispensable de porter à la connaissance de chacun l’ensemble des processus qui sont à l'œuvre au sein d’un système analytics : d’où vient la donnée, où elle va, qui l’utilise, comment elle est processée, avec quels outils, quand…. Le data lineage basé sur l’analyse du processing de la donnée, de son stockage, de son ordonnancement, de sa consommation (reporting et requêtes), permet en somme de dresser un portrait exhaustif d’un système et d’en partager la compréhension à tous, quand bien même les technologies sont anciennes et que les chaînes sont complexes. Notre solution de data lineage, {openAudit}, analyse les technologies les plus répandues dans les systèmes legacy. Quelques exemples : - Alimentations : Cobol, T-SQL, PL/SQL, Bteq, Perl, etc.
- ETLs : DataStage, BODS, SSIS, Talend, ODI, etc.
- Data visualisation : BO, Qlik, SSIS, Crystal Report, etc.
L’ensemble des technologies sont réconciliées pour une lecture exhaustive des processus de construction et de déploiement de la donnée. Nous avons développé d’innombrables mécanismes pour traiter ce qui peut générer des ruptures dans les flux : les vues, les vues de vues, les procédures dynamiques, les transferts de données par FTP, etc. Tout ce qui peut factuellement créer de l'opacité. La « carte » du système est produite en continue, avec une granularité variable selon le besoin. |
Commentaires
Enregistrer un commentaire