Des traitements récurrents lisent trop de données. Réduire les octets analysés ne sert à rien si les tableaux de bord deviennent incomplets ou si les temps de réponse se dégradent.
Choisir quelques jobs coûteux avec les équipes Data, tester les leviers SQL utiles et comparer résultats, durée et coût avant une éventuelle mise en production.
Le traitement quotidien lit une table historique entière malgré un besoin limité à une période. Les statistiques des jobs et le filtre SQL permettent de vérifier si les partitions pertinentes sont réellement écartées.
Une jointure ou une lecture répétée augmente les octets traités. On compare le plan d’exécution aux résultats métier attendus : supprimer des colonnes ou déplacer un filtre ne doit pas altérer les indicateurs.
Partitionnement ou clustering peuvent aider certains accès, mais modifient aussi le stockage ou les traitements en amont. Leur intérêt et leur compatibilité sont évalués sur les tables du lot avant de proposer un changement.
Je fixe avec les propriétaires Data les jobs et sorties de référence, relève les octets traités, la durée, la fréquence et le mode de facturation ; je note les variations de charge qui empêcheraient une comparaison directe.
J’examine les filtres de partition, les colonnes lues et les jointures ; je teste les réécritures utiles et, si le propriétaire l’autorise, le partitionnement ou le clustering sur le périmètre choisi.
Je confronte les sorties fonctionnelles, les octets traités, la durée et les coûts de runs comparables. J’écarte toute correction qui altère le résultat et ne prépare la promotion que si les propriétaires l’approuvent.
Lot et accès nécessaires. Jobs, projets, tables et périodes convenus ; SQL, historiques d’exécution et de coûts, sorties de référence et propriétaire fonctionnel. La lecture suffit au diagnostic ; les essais de correction nécessitent un environnement et des droits autorisés.
Limites et production. Ni audit FinOps de tous les projets GCP ni revue tarifaire. Aucun schéma, table ou job de production n’est modifié sans accord, tests de compatibilité et retour arrière définis.
Une question sur votre environnement ? Décrivez-la-moi : je définirai avec vous un périmètre utile avant d’intervenir.
Me contacter