Annoter des masques de segmentation – méthodes pour une précision au pixel

L’imagerie médicale déplace la question de la qualité. Ce qui limite un corpus n’y est pas la précision du tracé mais le désaccord entre experts sur ce qu’il faut tracer, et ce désaccord constitue le plafond que la méthode ne franchira pas.Cet article expose ce que ce contexte exige. Il prolonge l’article consacré à Segment Anything et la segmentation assistée.

Ce qui distingue ce contexte

Cinq propriétés séparent ce vertical de la segmentation d’images des autres.La frontière porte une conséquence, une surface tracée pouvant orienter une décision clinique.La définition des structures relève d’un savoir que l’apparence ne porte pas.Les transitions sont fréquemment progressives, une lésion se fondant dans le tissu voisin.La variabilité entre experts est mesurée et documentée dans la littérature du domaine.Et le cadre réglementaire impose une traçabilité que les autres verticaux de la segmentation d’images n’exigent pas.Une conséquence pratique importante en découle. La quatrième propriété distingue ce domaine de tous les autres, la limite de ce qu’un corpus de segmentation d’images peut atteindre y étant connue avant même de commencer.

Le plafond du désaccord expert

Cette notion gouverne tout le vertical.Elle mérite d’être posée d’emblée.Deux experts qualifiés délimitant la même structure obtiennent des résultats différents.Trois conséquences en découlent en segmentation d’images.Aucun corpus ne peut être plus cohérent que ce désaccord ne le permet.Une exigence de qualité supérieure à cette valeur est intenable par construction.Et un système évalué contre une référence unique est jugé contre une seule opinion.Une observation importante en découle pour un projet de segmentation d’images. La troisième conséquence justifie la double lecture sur le corpus d’évaluation, un accord entre deux experts constituant une référence plus solide que le tracé du plus disponible d’entre eux.

Les structures et leur difficulté

Quatre catégories se distinguent par leur variabilité.Les organes à frontière nette, où le désaccord reste faible et la tâche reproductible.Les organes à frontière partielle, dont une portion se distingue mal du tissu voisin.Les lésions, dont la limite dépend du seuil que l’expert applique.Et les structures fonctionnelles, dont la définition ne coïncide avec aucune frontière visible dans l’image.Une conséquence pratique s’ensuit. Ces quatre catégories appellent des exigences distinctes, une valeur unique appliquée à tout un corpus étant soit trop lâche sur les organes nets soit intenable sur les lésions.

Ce que le protocole d’acquisition change

Quatre paramètres modifient ce qui est observable.La modalité, chaque technique rendant visibles des tissus différents.Les réglages, qui changent le contraste entre structures voisines.L’épaisseur de coupe, qui détermine la finesse des structures représentées.Et l’usage d’un produit de contraste, qui révèle certaines structures tout en masquant d’autres.Une observation importante en découle pour un projet de segmentation d’images. Ces quatre paramètres doivent être enregistrés comme métadonnées, un corpus mêlant des protocoles différents présentant une variabilité de contour que rien n’explique et que le modèle apprendra comme du bruit.

Qui doit annoter

Trois configurations se rencontrent en segmentation d’images médicales.Leur coût diffère fortement.L’annotation entièrement experte, la plus coûteuse et la plus limitée en volume.L’annotation par des opérateurs formés avec relecture experte, qui répartit l’effort selon la difficulté.Et l’annotation par des opérateurs formés seuls, praticable sur les structures nettes uniquement.Une conséquence pratique importante en découle. La deuxième configuration est la plus employée et la plus efficace, à condition que la répartition entre ce qui se délègue et ce qui remonte soit décidée structure par structure plutôt que globalement.

Ce que la formation doit couvrir

Cinq compétences distinguent un opérateur formé sur ce vertical.La reconnaissance de la structure visée dans ses variantes anatomiques normales.L’application de la règle de placement retenue sur les frontières progressives.La distinction entre une variante normale et une anomalie, qui appelle une remontée.La lecture correcte de la modalité employée, chaque technique ayant ses conventions d’affichage.Et le signalement plutôt que la décision personnelle sur les cas non couverts.Une observation en découle pour un projet de segmentation d’images. La troisième compétence est la plus déterminante, un opérateur qui délimite consciencieusement une structure anormale sans la signaler produisant une annotation correcte et une information perdue.

Les conventions propres à ce vertical

Six décisions s’ajoutent à celles d’un projet ordinaire de segmentation d’images.La règle de placement sur les frontières progressives, décidée avec un expert du domaine.Le traitement des structures partiellement hors champ.La conduite à tenir sur les artefacts d’acquisition, exclus ou signalés.Le traitement des variantes anatomiques, incluses dans la classe ou distinguées.Le seuil de taille en dessous duquel une structure n’est pas délimitée.Et la définition précise de chaque structure, reprise d’un référentiel clinique existant plutôt que rédigée.Une conséquence pratique s’ensuit. La dernière décision est la plus importante et la moins pratiquée, une définition rédigée pour le projet divergeant inévitablement de celle que les cliniciens emploient.

Mesurer le désaccord expert

Une opération précède toute exigence contractuelle et elle se conduit en amont.Quatre étapes composent cette mesure en segmentation d’images médicales.Sélectionner un échantillon représentant les difficultés réelles, structures nettes et cas limites.Faire délimiter les mêmes examens par deux experts travaillant indépendamment.Mesurer l’écart par structure et par type de frontière plutôt que globalement.Et confronter les cas de désaccord fort pour distinguer une divergence de règle d’une divergence d’appréciation.Une conséquence pratique importante en découle. La quatrième étape est la plus productive, un désaccord provenant d’une règle implicite différente se corrigeant par une convention écrite alors qu’un désaccord d’appréciation constitue le plafond irréductible.

Ce que le contrôle qualité exige

Cinq vérifications s’appliquent spécifiquement à ce vertical.La mesure du désaccord entre experts sur un échantillon, préalable à toute exigence.La double lecture systématique sur le corpus d’évaluation.La comparaison des volumes moyens par structure, révélatrice d’un biais de placement.La vérification de la cohérence anatomique, une structure ne pouvant occuper certaines positions.Et la traçabilité de chaque annotation, avec opérateur, relecteur et date.Une observation importante en découle. La dernière vérification est imposée par le cadre réglementaire et elle sert aussi au diagnostic, un défaut systématique se rattachant à un opérateur ou à une période plutôt qu’au corpus entier.

Ce que l’assistance apporte ici

Trois observations situent l’aide automatique en segmentation d’images médicales.Elle fonctionne correctement sur les organes à frontière nette, précisément ceux que la tâche traitait déjà bien.Elle échoue sur les lésions et les frontières progressives, où la limite relève d’un seuil expert.Et elle produit des contours nets sur des transitions douces, ce qui masque l’incertitude réelle.Une conséquence pratique importante en découle pour un projet de segmentation d’images. Le troisième constat est le plus problématique dans ce contexte, un contour net suggérant une certitude que la donnée ne porte pas, ce qui peut orienter une décision clinique sur une frontière arbitraire.

Ce que la réglementation impose

Quatre exigences pèsent sur les corpus destinés à un dispositif médical.La traçabilité complète de la production, du fichier source à l’annotation validée.La qualification documentée des personnes intervenues.La description du protocole d’annotation et de ses évolutions.Et la conservation des données selon une durée définie à l’avance.Une observation en découle. Ces quatre exigences recouvrent largement les bonnes pratiques exposées dans les chapitres précédents, ce qui fait de la conformité un sous-produit d’un travail correctement conduit plutôt qu’une charge distincte.

Ce que ce travail coûte

Quatre facteurs déterminent la charge de segmentation d’images sur ce vertical.Le type de structure, du contour net à la lésion diffuse.Le niveau d’intervention experte requis, principal poste du budget.Le nombre de coupes par examen, une acquisition volumique multipliant considérablement le travail.Et le taux de double lecture retenu, qui s’ajoute intégralement à la production.Une conséquence pratique s’ensuit. Le deuxième facteur domine tous les autres, ce qui fait de la répartition entre travail délégué et relecture experte la décision économique principale d’un projet de segmentation d’images médicales.

Aborder un projet médical

Cinq questions cadrent un projet médical de segmentation d’images.Le désaccord entre experts a-t-il été mesuré. Sa valeur borne toute exigence.Quelle définition de structure s’applique. Elle doit provenir d’un référentiel clinique.Quelle part du travail se délègue à des opérateurs formés. Cette réponse détermine le budget.Les protocoles d’acquisition sont-ils homogènes. Une réponse négative appelle une métadonnée.Et la traçabilité est-elle organisée dès le départ. Elle ne se reconstitue jamais après coup.Ces cinq réponses déterminent la faisabilité et le coût. Les poser avant de commencer évite un corpus dont la variabilité dépasse ce que l’usage clinique tolère.

Ce que ce chapitre enseigne

Une observation transversale mérite de clore cet examen.Ce vertical est le seul où la limite de qualité est connue avant de commencer.Trois constats la composent.Le désaccord entre experts constitue un plafond documenté, ce qui rend toute exigence supérieure intenable par construction.La définition des structures provient d’un savoir clinique extérieur au projet, ce qui interdit de la rédiger.Et l’assistance produit des contours nets sur des transitions douces, ce qui masque une incertitude que le contexte rend importante.Ce constat prolonge le chapitre précédent, l’écart entre contraste et convention atteignant ici sa forme la plus marquée.

Les erreurs les plus fréquentes

• Fixer une exigence sans avoir mesuré le désaccord entre experts.
• Rédiger une définition de structure au lieu de reprendre un référentiel clinique.
• Appliquer une exigence unique aux organes nets et aux lésions.
• Confier l’intégralité du travail à des experts sans répartition.
• Négliger l’enregistrement des paramètres d’acquisition.
• Mélanger des protocoles différents sans métadonnée.
• Évaluer un système contre une référence à lecteur unique.
• Accepter un contour assisté net sur une transition progressive.
• Organiser la traçabilité après le début de la production.
• Former les opérateurs au tracé sans les former au signalement.

Ce que l’incertitude devrait porter

Une pratique reste rare et elle changerait la valeur de ces corpus.Un contour peut être accompagné d’une indication de confiance plutôt que livré seul.Trois formes existent pour la porter en segmentation d’images.Un attribut par région, signalant que la frontière relève d’une appréciation.Une bande d’incertitude, zone où la frontière pourrait légitimement se situer.Et la conservation de plusieurs lectures plutôt que leur fusion en une référence unique.Une observation importante en découle. La troisième forme est la plus informative et la plus coûteuse, elle permet d’évaluer un système contre l’éventail des opinions expertes plutôt que contre l’une d’elles, ce qui correspond mieux à la réalité du domaine.

Les acquisitions volumiques

Une propriété fréquente de ce vertical modifie l’organisation du travail.Un examen produit une pile de coupes plutôt qu’une image isolée.Quatre conséquences en découlent en segmentation d’images.Le volume de travail se compte en coupes et non en examens, rapport que les commanditaires sous-estiment.La cohérence entre coupes voisines devient une exigence à part entière.La propagation d’une coupe à la suivante réduit fortement la charge sur les structures régulières.Et une erreur se répète sur toute une série lorsqu’elle provient d’une propagation non vérifiée.Une conséquence pratique importante en découle. La dernière conséquence appelle un contrôle propre à ce contexte, l’examen de la variation de surface le long de la pile révélant en un graphique une propagation qui a dérivé.

Ce que la confidentialité impose

Quatre contraintes distinguent la gestion des données en segmentation d’images médicales.La pseudonymisation avant toute sortie, les identifiants patient ne devant pas accompagner les images.Le contrôle du lieu de traitement, souvent restreint par le cadre applicable ou par le contrat.La journalisation des accès, chaque consultation devant être rattachable à une personne.Et la suppression des informations résiduelles, certaines images portant du texte directement incrusté.Une observation en découle pour un projet de segmentation d’images. La dernière contrainte est la plus souvent oubliée, une information identifiante incrustée dans l’image elle-même survivant à toute pseudonymisation portant sur les métadonnées.

Le lot pilote sur ce vertical

Quatre examens composent un lot pilote adapté à ce vertical de la segmentation d’images.Un examen présentant la structure dans sa forme la plus commune, qui fournit la cadence de référence.Un examen où la frontière est partiellement indistincte, qui éprouve la règle de placement.Un examen comportant une variante anatomique, qui teste la consigne de signalement.Et un examen issu d’un protocole d’acquisition différent, qui mesure l’effet du contraste obtenu sur la cadence.Une observation en découle. Le quatrième examen est celui que l’on omet le plus souvent et celui qui révèle le facteur de variabilité le plus important, deux protocoles produisant des cadences et des désaccords sensiblement différents sur la même structure.

Organiser la relecture experte

Cinq principes rendent cette organisation efficace en segmentation d’images médicales.Réserver l’expert aux structures dont le désaccord mesuré est élevé, mesure qui précède la répartition.Faire remonter les cas signalés plutôt que soumettre tout le corpus à relecture.Regrouper les relectures par structure, ce qui évite le changement de contexte permanent.Fournir à l’expert la comparaison avec l’annotation initiale plutôt que l’image seule.Et consigner chaque correction avec son motif, qui alimente la convention pour le lot suivant.Une conséquence pratique importante en découle. Le dernier principe transforme la relecture en source d’amélioration, un motif récurrent révélant une règle manquante que le tracé suivant appliquera sans nouvelle intervention.

Ce qu’un prestataire doit démontrer

Quatre éléments établissent la crédibilité d’un prestataire sur ce vertical de la segmentation d’images.Un dispositif de traçabilité opérationnel avant le premier examen, non ajouté ensuite.Une procédure de formation documentée pour les opérateurs, avec évaluation de leur qualification.Une mesure de désaccord conduite sur les structures visées, qui montre que la limite est connue.Et un dispositif de confidentialité couvrant le lieu de traitement, les accès et le texte incrusté.Une observation en découle pour un prestataire de segmentation d’images médicales. Le troisième élément distingue le plus, il montre qu’un prestataire a compris que ce vertical se juge à la reproductibilité plutôt qu’à la finesse du tracé, distinction que peu formulent.

La question qui cadre l’exigence

Une question détermine le niveau de reproductibilité à viser.La grandeur livrée sera-t-elle lue par un clinicien ou consommée par un calcul.Une réponse orientée lecture tolère une variabilité comparable à celle des experts, le résultat étant interprété par quelqu’un qui connaît cette variabilité.Une réponse orientée calcul, suivi volumétrique ou seuil de décision, exige une reproductibilité supérieure, un écart entre deux mesures successives devant provenir du patient et non du tracé.Cette question se pose en une phrase, elle relève de l’usage clinique et non de la technique, et elle détermine si le corpus doit viser le plafond expert ou simplement s’en approcher.

Trois décisions avant le premier examen

Trois décisions engagent un projet médical de segmentation d’images.Mesurer le désaccord entre experts sur les structures visées, valeur qui borne l’exigence contractuelle.Obtenir la définition des structures auprès d’un référentiel clinique plutôt que la rédiger.Et organiser la traçabilité avant la production, puisqu’elle ne se reconstitue pas après coup.Ces trois décisions coûtent quelques jours et l’accès à un expert, elles précèdent le premier examen, et leur absence produit un corpus soigné dont personne ne peut établir la reproductibilité.

Ce que ce vertical apporte aux autres

Trois pratiques nées ici valent au delà de l’imagerie médicale.La mesure du désaccord entre annotateurs avant de fixer une exigence, applicable partout où la tâche comporte un jugement.La conservation de plusieurs lectures plutôt que leur fusion, transposable dès qu’une référence unique masque une variabilité réelle.Et la reprise d’une définition établie par le domaine plutôt que sa rédaction, nécessaire chaque fois qu’un métier a déjà nommé ce qu’on annote.Une observation en découle. Ces trois pratiques répondent à une même situation, celle où l’annotation transcrit un jugement expert plutôt qu’une observation, configuration que ce vertical rend visible et que d’autres domaines connaissent sans la nommer.

Ce que le corpus doit déclarer

Six informations accompagnent une livraison de segmentation d’images médicales.La définition employée pour chaque structure, avec sa source clinique.La règle de placement retenue sur les frontières progressives.Le désaccord entre experts mesuré sur les structures visées.Les protocoles d’acquisition présents dans le corpus, avec leur répartition.Le dispositif de relecture appliqué, structure par structure.Et la traçabilité complète, opérateur, relecteur et date pour chaque annotation.Une conséquence pratique s’ensuit. La troisième information est celle qui manque le plus souvent et celle qui rend le corpus interprétable, une performance annoncée n’ayant de sens que rapportée à la variabilité que les experts eux-mêmes présentent.

Ce que ce chapitre laisse au suivant

Un vertical présente une difficulté inverse et mérite d’être examiné à sa suite.L’imagerie satellitaire partage la question des frontières floues et diffère sur tout le reste.Trois différences la caractérisent.Les objets y sont vus de dessus, ce qui supprime l’occlusion et les remplace par d’autres difficultés.Les matières continues y dominent, alors que le médical annote des structures identifiées.Et l’échelle y varie considérablement, un même corpus mêlant des résolutions sans rapport.Ces trois différences font de ce vertical un contrepoint utile, il éprouve les mêmes conventions dans un contexte où le jugement expert cède la place à la variabilité du terrain.

Ce qu’il faut retenir

La segmentation d’images médicales est bornée par le désaccord entre experts avant de l’être par la méthode.Trois lectures se dégagent. Le désaccord entre experts se mesure et constitue un plafond documenté, ce qui rend toute exigence supérieure intenable et impose une double lecture sur le corpus d’évaluation. La définition des structures relève d’un référentiel clinique extérieur, qu’il faut reprendre plutôt que rédiger. Et l’assistance produit des contours nets sur des transitions progressives, ce qui masque une incertitude qui a des conséquences dans ce contexte.Pour un vertical où la difficulté prend une forme opposée, l’article consacré à la segmentation d’images satellites expose le contexte. Pour la mesure de qualité, l’article sur les métriques de segmentation détaille les indicateurs.Pour approfondir les modalités d’exécution, les formats pris en charge et les dispositifs de contrôle applicables, vous pouvez consulter notre page dédiée à l’annotation 2D et 3D. Et si vous préparez un corpus d’imagerie médicale, échangeons sur votre projet.