Que faut-il savoir sur « Automatisation du data lineage » — Partie III : Mise en œuvre opérationnelle › 3. Automatisation et intelligence artificielle ?
Extrait de Gouvernance des données
Le data lineage manualisé se montre vite contraignant, car il exige de décrire à la main chaque transformation, chaque flux, chaque jonction entre systèmes.
Dès que l’organisation grandit ou que les processus évoluent, cette description devient obsolète.
C’est pourquoi de plus en plus de solutions exploitent l’apprentissage machine pour analyser les schémas, les logs, les connexions et en déduire, autant que possible, le flux suivi par les données.
Ces outils intelligents peuvent identifier des relations probables entre champs de différentes bases, détecter un changement de format, ou repérer une duplication partielle.
Les Data Stewards ou Data Managers valident ou ajustent les propositions émises, ce qui permet de maintenir un référentiel de lignage relativement fiable, sans nécessiter un travail humain interminable.