Les quatorze articles précédents de cette série sur l’observation de la Terre ont décrit un secteur dont la ressource est massive et gratuite, dont l’outillage est mature et dont les modèles sont disponibles. Malgré cela, une part importante des projets n’atteint pas la production.Les causes ne sont presque jamais technologiques. Cet article les recense par moment de survenue, méthode que le cluster consacré aux erreurs de manipulation avait employée et qui permet de détecter une difficulté là où elle apparaît plutôt qu’à la livraison. Il prolonge l’article consacré au coût des données d’observation de la Terre.
Les échecs de cadrage
Cette première famille survient avant toute manipulation de données d’observation de la Terre.Elle est la plus coûteuse, puisqu’elle invalide tout ce qui suit.La question mal posée vient en tête des échecs d’observation de la Terre. Un projet lancé sur l’idée d’exploiter l’imagerie satellitaire plutôt que sur une décision à éclairer produit une capacité que personne n’emploie. L’article consacré au coût a posé la question fondatrice : quelle décision dépend de cette donnée, et dans quel délai.L’inadéquation entre le phénomène et la résolution constitue la deuxième cause. De nombreuses questions opérationnelles portent sur des objets ou des changements situés sous la résolution disponible gratuitement, ce qui tranche la question du coût immédiatement plutôt qu’après six mois.La troisième est l’ignorance de la disponibilité réelle. L’article d’ouverture a montré qu’une revisite annoncée est une capacité orbitale et non une garantie d’observation, et qu’une zone fréquemment nuageuse peut n’offrir qu’une fraction des acquisitions théoriques.La quatrième est l’absence d’évaluation de la vérité terrain disponible, alors que l’article consacré à l’IA a montré qu’elle constitue le facteur limitant du domaine.Ces quatre causes de cadrage se détectent en une seule réunion, avec les quatre questions que l’article d’ouverture a formulées, et elles écartent les projets infaisables avant tout engagement.Les échecs d’accès aux données
Cette deuxième famille retarde plutôt qu’elle n’invalide, sans être moins réelle.Elle survient lors de l’obtention des données.La sous-estimation du délai administratif vient en premier lorsque des données non publiques sont nécessaires, difficulté que le cluster consacré au médical avait documentée et qui se retrouve ici pour les données de terrain détenues par des administrations.La découverte tardive d’une restriction de licence constitue la deuxième. L’article consacré au marché a signalé qu’une licence limitant l’usage interne interdit de livrer un produit dérivé, contrainte qui invalide un modèle économique plutôt qu’elle n’en augmente le coût.La troisième est le dépassement de quota, l’article consacré à Copernicus ayant montré que la gratuité s’accompagne de limites au delà desquelles des conditions commerciales s’appliquent.Et la quatrième est la dépendance à une source unique dans un secteur où, comme l’article consacré au marché l’a signalé, tous les entrants ne survivront pas.Les échecs de données de référence
C’est la famille la plus fréquente en observation de la Terre.Elle concentre l’essentiel des difficultés du domaine et mérite le développement le plus long.L’absence de vérité terrain vient en tête des échecs de référence en observation de la Terre. Un projet qui découvre après avoir traité l’imagerie qu’il ne dispose d’aucune référence ne peut ni entraîner ni évaluer, et il se termine généralement par une démonstration visuelle sans mesure.L’emploi d’une base existante comme référence constitue la deuxième cause. L’article consacré à l’IA a montré que ce mécanisme propage la nomenclature, la granularité et la date de la base source, et qu’il plafonne l’exactitude atteignable à celle de cette base.La troisième est la nomenclature inadaptée. Un projet employant des classes définies pour une finalité administrative découvre qu’elles ne distinguent pas ce qui l’intéresse, ce qui impose de recommencer.La quatrième est le biais géographique, documenté par la recherche et exposé dans l’article correspondant : les jeux existants favorisent les zones de forte activité humaine et ignorent des écorégions entières.La cinquième est l’absence de convention sur les cas ambigus, qui produit une variabilité entre annotateurs que rien ne permet ensuite de démêler d’une variabilité réelle.Les échecs de méthode
Cette quatrième famille produit des résultats qui paraissent bons sans l’être.Elle survient pendant le développement.L’évaluation sur les mêmes zones que l’entraînement vient en premier. Elle produit une performance que le déploiement ne retrouve pas, mécanisme que le cluster consacré à l’imagerie médicale a chiffré dans un autre domaine.La fuite par métadonnée constitue la deuxième cause. Un modèle apprenant à reconnaître un capteur, une saison ou un site corrélé à la réponse produit une performance élevée sans avoir appris ce qu’on croyait lui enseigner.La troisième est l’estimation de surface par comptage de pixels, que l’article consacré à la validation a montrée explicitement déconseillée par les bonnes pratiques du domaine.La quatrième est l’emploi d’un échantillon de référence non probabiliste, dont la même littérature indique qu’il fait perdre la base de toute inférence.Et la cinquième est l’absence de mesure du désaccord entre annotateurs, qui prive le projet de la borne supérieure de ce qu’il peut mesurer.Les échecs d’intégration
Cette cinquième famille concerne des projets techniquement réussis.Elle survient au moment de la mise en service.L’absence d’intégration dans un flux de travail existant vient en tête. Un résultat livré dans un format ou un outil étranger aux pratiques de l’utilisateur n’est pas employé, quelle que soit sa qualité, difficulté que l’article consacré à Copernicus a évoquée à propos de la livraison dans l’environnement du client.La deuxième est le taux de fausse alarme. L’article consacré à la sécurité a signalé qu’un dispositif signalant trop d’événements sans fondement est abandonné par ses utilisateurs, mécanisme que le cluster consacré à l’imagerie médicale avait documenté.La troisième est l’inadéquation de latence, un résultat arrivant après le moment où la décision devait être prise, question que l’article consacré au temps quasi réel a traitée.Et la quatrième est l’absence d’appropriation, un dispositif conçu sans les utilisateurs finaux rencontrant une résistance que sa performance ne surmonte pas.Les échecs de pérennité
Cette sixième famille est la moins anticipée de toutes.Elle survient après la mise en service.La dérive de performance vient en premier parmi les échecs de pérennité. L’article consacré au coût a rappelé que les capteurs changent, que le sol change et que les chaînes de traitement changent, ce qui dégrade un modèle sans que rien ne le signale.L’absence de corpus de référence maintenu constitue la deuxième cause. Sans référence à jour, la dérive se constate sans pouvoir être ni mesurée ni corrigée.La troisième est la disparition du fournisseur de données, risque réel dans un secteur en consolidation.Et la quatrième est la perte de compétence, un dispositif conçu par une personne qui quitte l’organisation devenant inexploitable si sa méthode n’a pas été documentée.Cette quatrième cause rejoint directement un principe que tous les clusters de cette série ont établi : la documentation ne sert pas seulement à démontrer, elle permet de reprendre.La cause qui traverse toutes les familles
Cette observation explique la persistance de ces échecs en observation de la Terre.La plupart des causes recensées relèvent de décisions prises avant tout développement : la question posée, la référence disponible, la nomenclature retenue, le plan d’échantillonnage, l’utilisateur destinataire.Ces décisions préalables ont trois propriétés communes. Elles se prennent rapidement, en quelques réunions. Elles coûtent peu à ce moment. Et elles deviennent très coûteuses à corriger ensuite, puisqu’elles invalident le travail qui s’est appuyé dessus.Une quatrième propriété explique largement qu’elles soient négligées. Elles ne produisent aucun livrable visible, alors qu’un traitement d’images produit une carte que l’on peut montrer.Cette asymétrie entre effort et visibilité est probablement la cause première des échecs de ce domaine, et elle se corrige par une discipline de cadrage plutôt que par un investissement technique.Les échecs organisationnels
Cette famille ne relève d’aucun moment technique et elle est fréquente en observation de la Terre.Le portage insuffisant vient en premier. Un projet dépourvu de commanditaire disposant d’un budget et d’une autorité s’arrête à la fin de la phase exploratoire, quelle que soit la qualité de ses résultats.Le décalage entre l’équipe technique et l’équipe métier constitue la deuxième cause. Une équipe de traitement d’images optimisant une métrique que l’utilisateur ne reconnaît pas produit un résultat qui satisfait ses auteurs et personne d’autre.La troisième est l’attente disproportionnée, un dirigeant ayant retenu d’une présentation commerciale des capacités que la donnée disponible ne permet pas, ce que l’article d’ouverture a signalé à propos des écarts que le secteur passe sous silence.Et la quatrième est le changement de priorité, un projet d’observation de la Terre s’étendant sur plusieurs mois et traversant des arbitrages budgétaires successifs.Ces quatre causes organisationnelles ont un remède commun. Livrer tôt un résultat partiel mais utilisable maintient l’adhésion, alors qu’un projet promettant un résultat complet dans un an s’expose à tous les aléas de cette période.Ce qui distingue un projet d’observation de la Terre qui aboutit
Six caractéristiques se retrouvent dans ceux qui atteignent la production.Une question opérationnelle précise, formulée en termes de décision plutôt que de capacité.Une vérité terrain identifiée ou constituable, évaluée avant l’engagement plutôt que découverte après.Un pilote sur échantillon réduit, qui révèle les cas ambigus et établit une cadence, ce que l’article consacré au coût a recommandé.Un jeu d’évaluation constitué séparément, sur des zones et des périodes distinctes de l’entraînement.Un utilisateur final associé dès le cadrage, ce qui traite par avance les difficultés d’intégration exposées plus haut.Et une documentation produite pendant, qui permet la reprise, la démonstration et la maintenance.Ce que les échecs coûtent réellement
Cette lecture économique éclaire les priorités.Une lecture économique mérite d’être posée car elle éclaire les priorités.Un échec de cadrage coûte l’intégralité du projet, puisque rien de ce qui a été produit ne sert.Un échec de référence coûte le travail d’annotation à refaire, poste que l’article consacré au coût a montré dominant.Un échec de méthode coûte l’évaluation à refaire et, plus gravement, la crédibilité d’un résultat déjà annoncé.Un échec d’intégration coûte l’ensemble du développement, le produit existant sans être employé.Et un échec de pérennité coûte la reconstitution, généralement plus cher que la construction initiale puisque le contexte a été perdu.Cette gradation des coûts conduit à une conclusion simple. L’effort de prévention se place le plus efficacement au cadrage, où il coûte quelques jours et évite des mois.Les signaux d’alerte
Six indiquent qu’un projet s’engage mal, et ils se repèrent tôt.Six signaux indiquent qu’un projet d’observation de la Terre s’engage mal, et ils se repèrent tôt.Personne ne peut nommer la décision que le résultat éclairera.La question de la vérité terrain n’a pas été posée après plusieurs réunions techniques.Les classes ont été reprises d’une nomenclature existante sans examen de leur adéquation.L’évaluation est prévue sur une partie du même jeu que l’entraînement.Aucun utilisateur final n’a participé aux discussions.Et le calendrier ne comporte pas de phase de constitution de corpus, ce qui indique que ce travail n’a pas été identifié.Ce que ces échecs offrent à un prestataire
Trois conséquences commerciales découlent de ce recensement.Trois conséquences commerciales découlent de ce recensement.La première est que la prestation de cadrage a une valeur démontrable. Un interlocuteur capable de poser les quatre questions de faisabilité avant l’engagement épargne à son client un échec dont le coût dépasse largement celui du cadrage.La deuxième est que les causes les plus fréquentes relèvent de la référence, c’est-à-dire précisément du domaine de compétence d’un prestataire d’annotation.Et la troisième est que ces échecs sont peu discutés publiquement, ce qui rend leur exposition différenciante. Un prestataire capable de nommer ce qui fait échouer un projet démontre une expérience qu’aucune présentation de capacités ne remplace.Reprendre un projet d’observation de la Terre en difficulté
Un prestataire est régulièrement sollicité après un premier échec plutôt qu’au démarrage.Quatre questions déterminent ce qui peut être sauvé.À quelle famille appartient la difficulté. Un échec de cadrage impose de reprendre depuis le début ; un échec de méthode laisse généralement intactes les données et les annotations produites.Le corpus existant est-il documenté. Un corpus dont la composition, la nomenclature et les conventions sont consignées se réemploie ; un corpus non documenté se réannote, ce que l’article consacré au coût a montré dominant.Les décisions initiales sont-elles reconsidérables. Une nomenclature imposée par un client ou par un référentiel réglementaire ne se change pas, ce qui borne les options.Et l’évaluation existante est-elle exploitable. Un jeu d’évaluation constitué sur les mêmes zones que l’entraînement ne renseigne sur rien et doit être refait, opération qui conditionne toute reprise.Ces quatre questions se traitent en quelques jours et elles produisent un diagnostic plutôt qu’une impression. Une reprise engagée sans ce diagnostic reproduit généralement la difficulté initiale, puisqu’elle n’en a pas identifié la nature.La difficulté que personne ne signale
Une cause d’échec mérite d’être nommée séparément car elle est structurelle et rarement évoquée.Un projet réussi produit une mesure, et cette mesure peut contredire une décision déjà prise ou une position déjà défendue.Trois situations le montrent. Une cartographie contredisant un inventaire déclaratif place son commanditaire en difficulté, mécanisme que l’article consacré au climat a évoqué à propos des écarts entre déclarations et observations. Une évaluation rigoureuse révélant une performance inférieure à celle annoncée oblige à corriger une communication. Et un suivi objectif d’une situation peut établir un fait que certains acteurs préféraient indéterminé.Ces trois situations ne relèvent d’aucune erreur technique et elles font échouer des projets techniquement irréprochables.Une conséquence pratique en découle pour un prestataire. Établir au cadrage qui recevra le résultat et ce qui se passera s’il est défavorable évite un abandon tardif, et cette question, quoique délicate, se pose plus facilement au début qu’à la livraison.Les erreurs de lecture fréquentes
- Lancer un projet sur une capacité plutôt que sur une décision à éclairer.
- Ne pas vérifier que le phénomène est visible à la résolution disponible.
- Confondre revisite annoncée et acquisitions exploitables sur la zone.
- Découvrir l’absence de vérité terrain après avoir traité l’imagerie.
- Reprendre une base existante comme référence sans en connaître le plafond.
- Évaluer sur les mêmes zones que l’entraînement.
- Estimer une surface par comptage de pixels.
- Livrer un résultat dans un format étranger aux pratiques de l’utilisateur.
- Ne pas prévoir de corpus de référence maintenu après la mise en service.
- Concevoir un dispositif sans associer ses utilisateurs finaux.
- Engager une reprise sans diagnostiquer la famille de la difficulté initiale.
- Promettre un résultat complet à un an plutôt que livrer tôt un résultat partiel mesuré.
