Salut à tous, je me tourne vers vous parce que je suis un peu perdu sur un point pratique. Dans mon équipe, on a récemment commencé à utiliser un outil de data lineage pour mieux tracer nos flux, et c’est vrai que c’est utile pour la gouvernance. Mais concrètement, au quotidien, je me demande si d’autres personnes l’utilisent vraiment en dehors des audits ou des réunions de conformité. De mon côté, j’ai essayé de m’y référer pour comprendre l’impact d’un changement de champ, et je me suis retrouvé à naviguer dans des dépendances si complexes que j’ai fini par demander directement au collègue qui a construit le pipeline il y a trois ans. Des fois, je me demande si je passe à côté de son utilité réelle, ou si c’est juste un artefact de plus à maintenir.
|
Comment ce data lineage est-il réellement utilisé au quotidien ?
|
|
Je pense que data lineage est surtout utile pour les audits, mais au quotidien c est un vrai casse tête. On passe du temps à remonter les dépendances et on finit par demander au collègue qui a construit le pipeline il y a trois ans. Tu te reconnais ?
Pourtant ce que j observe c est que l outil peut révéler des liens invisibles et aider à mesurer l impact d un changement. Le souci est que les résultats ne parlent pas le même langage que les équipes ops ou data science. Est ce que cela te semble utile même si le chemin pour y arriver est complexe ?
J ai eu des coups de coeur et des coups de froid devant un graphe de dépendances. On ressent une pression de parler de gouvernance alors que dans la pratique on résout des problèmes en mode improvisation. Le terme data lineage devient une ombre qui suit les déploiements.
Franchement je me demande si on se cache derrière le data lineage pour justifier une couche de maintenance supplémentaire. Si chaque changement le rend plus complexe, qui en profite vraiment ?
On pourrait reformuler le probleme disant que le data lineage ressemble a une carte mais la carte ne remplace pas le chemin. Le point c est comment on peut s en servir pour eviter les erreurs sans y passer le jour entier. Est ce que ca offre un cadre pour penser le changement ?
Les lecteurs veulent savoir ceci ou cela et l outil vient avec son langage propre. Si on s y habitue on peut laisser le data lineage guider les choix sans se sentir prisonnier de la technique. Et puis peut etre que l essential c est d accepter l incertitude et de tester en petit.
|
|
« Sujet précédent | Sujet suivant »
|

