Résumé
Cette discussion, animée par Caitlin Kraft-Buchman de Women at the Table, a porté sur l'exclusion systémique des femmes de la recherche médicale et des données, ainsi que sur l'effet amplificateur de ce phénomène lorsque l'intelligence artificielle est construite sur ces bases défaillantes. Les intervenantes Oriana Kraft, de FemTechnology, et Yu Ping Chan, du PNUD, ont analysé comment les biais de genre sont intégrés à chaque niveau de la chaîne des soins de santé et des technologies. Oriana Kraft a décrit l'ampleur du problème en médecine, soulignant que des différences biologiques entre les sexes existent dans chaque cellule du corps humain, alors que la recherche s'est historiquement concentrée presque exclusivement sur des sujets masculins . Les animaux mâles sont cinq fois et demie plus nombreux que les femelles dans les études, en raison d'une hypothèse erronée selon laquelle les cycles hormonaux féminins les rendraient trop imprévisibles . Les conséquences sont graves : les femmes reçoivent un diagnostic en moyenne quatre ans plus tard que les hommes pour 770 maladies , ont 50 % plus de risques de mourir à la suite d'une crise cardiaque , et sont 50 à 75 % plus susceptibles de présenter des effets indésirables médicamenteux . Des pathologies telles que l'endométriose nécessitent en moyenne sept ans avant d'être diagnostiquées, et les femmes doivent consulter en moyenne cinq médecins avant d'obtenir un diagnostic précis, ce qui entraîne l'accumulation de données inexactes dans les bases de données médicales . Lorsque les modèles d'IA sont entraînés sur ces données historiques biaisées, la précision diagnostique diminue de 11,3 % , et le problème est encore aggravé par l'utilisation de données synthétiques, qui efface progressivement les signaux relatifs à la santé des femmes aux marges des distributions de données . Yu Ping Chan a ajouté qu'une enquête du PNUD menée dans 80 pays a révélé que près de 90 % des hommes comme des femmes entretiennent au moins un préjugé à l'égard des femmes, ce qui signifie que le substrat même sur lequel reposent les systèmes numériques est déjà biaisé . Elle a averti qu'un écart numérique de genre de 10 à 15 % en matière de connectivité à l'échelle mondiale, atteignant 30 à 40 % dans les pays en développement, implique que la poursuite de la transformation numérique sans remédier à ces biais ne fera qu'aggraver les inégalités . Parmi les solutions proposées figurent l'établissement de la représentativité comme norme scientifique dans la collecte de données , l'intégration d'exigences relatives aux données ventilées par sexe dans les marchés publics , et l'incitation des médecins et des patientes à contribuer des données de santé plus riches et plus nuancées . Caitlin Kraft-Buchman a également suggéré de former des groupes de défense des droits des femmes pour qu'ils deviennent collecteurs et propriétaires de données, leur permettant ainsi de revendre ces données à des marchés qui en sont actuellement dépourvus . Une participante de Tanzanie a souligné que des recherches ancrées dans des populations féminines diversifiées pourraient ouvrir la voie à des découvertes importantes, comme comprendre pourquoi certaines communautés présentent moins de symptômes ménopausiques . La discussion s'est conclue sur un sentiment partagé d'urgence et de frustration face au fait que la prise de conscience n'a pas débouché sur des actions suffisantes . Les intervenantes ont appelé à une responsabilité politique, à des normes internationales plus claires et à l'utilisation de cadres existants tels que les indicateurs e-santé du SMSI pour promouvoir des pratiques de données représentatives du genre . Le message central était que la correction de ces biais profondément enracinés nécessite un engagement coordonné des gouvernements, du secteur privé et des organisations internationales, avant que de nouvelles infrastructures numériques ne soient construites sur des fondations déjà inégales .Points clés
Principaux points de discussion
- Les biais de genre dans la recherche médicale et les modèles d'IA en santé : Les intervenantes ont mis en évidence que la recherche médicale a historiquement été menée presque exclusivement sur des sujets masculins, entraînant des lacunes systémiques dans les soins de santé des femmes. Ce biais est ensuite amplifié lorsque les modèles d'IA sont entraînés sur ces données défaillantes. Par exemple, les seuils de troponine calibrés sur des hommes passent à côté de 42 % des crises cardiaques féminines , les femmes reçoivent un diagnostic en moyenne quatre ans plus tard que les hommes pour 770 maladies , et l'IA entraînée sur des données non représentatives réduit la précision diagnostique de 11,3 % . La « cascade de distorsion » - de la recherche préclinique aux recommandations cliniques jusqu'aux modèles d'IA - a été décrite en détail , les animaux mâles étant cinq fois et demie plus nombreux que les femelles dans les études . - La nécessité d'une collecte de données plus riche, ventilée par sexe et par étape de vie : Un thème central était l'absence de données capturant les expériences biologiques proprement féminines. Il n'existe actuellement aucun formulaire standard dans les systèmes de santé ou de ressources humaines pour recueillir des informations sur la ménopause, le cycle menstruel ou les expériences post-partum . Les intervenantes ont soutenu que les étapes de vie féminines interagissent avec chaque organe du corps et que la collecte de ces informations - y compris auprès des patientes elles-mêmes via des objets connectés et des journaux de cycle - pourrait être transformatrice . Les notes des médecins femmes se sont révélées deux fois plus détaillées que celles de leurs homologues masculins, ce qui suggère que l'incitation à une collecte de données nuancée constitue une mesure pratique . - L'inscription des biais de genre dans l'infrastructure publique numérique : Yu Ping Chan a soulevé la préoccupation que la construction d'infrastructures publiques numériques risque d'encoder les biais sociétaux existants. L'Indice des normes sociales de genre du PNUD a révélé que près de 90 % des hommes et 87 % des femmes entretiennent au moins un préjugé à l'égard des femmes, et que les progrès dans ce domaine ont stagné depuis une décennie . Combiné à un écart numérique de genre de 10 à 15 % en matière de connectivité à l'échelle mondiale - atteignant 30 à 40 % dans les pays en développement - le panel a averti que la poursuite de la transformation numérique sans remédier à ces biais ne fera qu'aggraver les inégalités . - Traduire les engagements en actions concrètes - normes, marchés publics et responsabilité : La discussion a porté sur la manière de dépasser les déclarations et les documents pour parvenir à un changement réel. La Déclaration de Hambourg sur l'IA responsable pour les ODD a été citée comme exemple d'engagement multipartite intégrant le genre comme domaine prioritaire , mais les intervenantes ont reconnu la difficulté de transformer les engagements sur le papier en actions concrètes . Les mécanismes proposés comprenaient l'établissement de la représentativité comme norme scientifique , l'intégration d'exigences relatives aux données ventilées par sexe dans les marchés publics , et l'utilisation des indicateurs e-santé du SMSI pour encourager des données d'entraînement représentatives du genre . - Autonomiser les femmes en tant que productrices de données et actrices du changement : Plutôt que de présenter les femmes uniquement comme bénéficiaires de la technologie, le panel a plaidé pour les positionner comme collectrices, propriétaires et productrices de données . Les intervenantes ont suggéré de former des groupes de défense des droits des femmes à la collecte et à la gestion des données, et ont noté que les femmes dans les contextes de la femtech sont déjà prêtes à partager leurs données pour faire avancer la santé féminine . Le panel a également appelé à une responsabilité politique, affirmant que la santé des femmes devrait figurer dans les programmes électoraux et que les efforts de lobbying et le plaidoyer de personnalités publiques ont déjà commencé à faire évoluer la sensibilisation du public . ---Objectif général
La discussion visait à mettre en lumière l'exclusion systémique des femmes de la recherche médicale et des données d'entraînement de l'IA, à illustrer les conséquences concrètes de cette exclusion sur la santé, et à explorer des voies pratiques, notamment des normes de données, des politiques d'achat public, le plaidoyer politique et la collecte de données à la base, pour corriger ces déséquilibres avant qu'ils ne s'ancrent davantage dans les infrastructures numériques et d'IA émergentes. ---Ton général
Les intervenantes se sont montrées assez préoccupées, reflétant la gravité des disparités de santé décrites. La présentation détaillée par Oriana Kraft de la « cascade de distorsion » était fondée sur des données probantes. Yu Ping Chan a fait preuve de franchise quant à ses incertitudes concernant les solutions , conférant à la discussion une qualité honnête et qui la distinguait des panels de politique plus policés. Cependant, le ton a évolué vers un optimisme prudent vers la fin de la discussion, notamment lorsque les intervenantes ont évoqué le potentiel d'innovation par bonds dans le Sud global , l'opportunité scientifique que représentent les données inexploitées sur la santé des femmes , et l'idée d'une « course aux données de santé » entre nations . Les contributions du public - en particulier de femmes partageant des expériences personnelles et culturelles de Tanzanie et de Chine - ont ajouté une dimension humaine à la discussion et ont mis en avant les efforts collectifs.Intervenantes et intervenants
- Caitlin Kraft-Buchman - Rôle : Modératrice/Animatrice du panel - Affiliation : Women at the Table (fondatrice/représentante) - Domaine d'expertise : Égalité de genre, IA et représentation des données, droits des femmes dans la technologie - Oriana Kraft - Rôle : Fondatrice - Affiliation : FemmeTechnology.org - Domaine d'expertise : Santé des femmes, données médicales ventilées par sexe, biais de l'IA dans les soins de santé, femtech, lacunes de la recherche clinique affectant les femmes - Yu Ping Chan - Rôle : Représentante/Intervenante - Affiliation : PNUD (Programme des Nations Unies pour le développement) - Domaine d'expertise : Infrastructure publique numérique, genre et équité numérique, IA responsable pour le développement durable, la Déclaration de Hambourg sur l'IA pour les ODD - Participante 1 - Rôle : Participante du public - Contexte : De Chine ; a soulevé la question des biais de genre de l'IA dans ses réponses et la pratique consistant à dissimuler son genre lors des interactions avec l'IA - Participante 2 - Rôle : Participante du public - Contexte : De Tanzanie, Afrique ; a partagé des observations sur les différences générationnelles dans les expériences de santé des femmes et l'importance de recherches fondées sur des populations féminines diversifiées - Participante 3 - Rôle : Participante du public - A soulevé des questions sur le rythme du plaidoyer en faveur de la santé des femmes et de l'inclusion technologique, ainsi que sur les mesures concrètes pouvant être prises - Participante 4 - Rôle : Participante du public - Contexte : De Chine ; a posé des questions sur la sensibilisation à l'endométriose et aux défaillances systémiques dans les soins de santé des femmes, notamment dans le contexte chinois - Yipeng - Rôle : Intervenante/Oratrice (semble être la même personne que Yu Ping Chan, désignée par une version abrégée ou alternative du nom) - Affiliation : PNUD - Domaine d'expertise : Équité numérique, genre et technologie, IA responsable Intervenantes et intervenants supplémentaires : - Intervenant·e 1 - Rôle : Panéliste ou participant·e non identifié·e ; d'après le contexte et le contenu, cet·te intervenant·e semble recouper significativement Oriana Kraft, abordant les données de santé des femmes, les lacunes de la recherche clinique et la femtech - Domaine d'expertise : Santé des femmes, biais dans la recherche médicale, IA et données de santé - Intervenant·e 2 - Rôle : Intervenant·e non identifié·e ; d'après le contexte, cet·te intervenant·e semble recouper Caitlin Kraft-Buchman, jouant un rôle de modération et de synthèse tout au long de la discussion - Domaine d'expertise : Équité de genre, normes de données IA, autonomisation numérique des femmesRésumé élargi : Biais de genre dans la recherche médicale, dans les modèles d'IA en santé et dans les infrastructures numériques publiques
#
Introduction et contexte
La session était animée par Caitlin Kraft-Buchman de Women at the Table et a réuni Oriana Kraft, fondatrice de FemmeTechnology.org, et Yu Ping Chan du PNUD . La discussion s'est tenue dans un contexte de préoccupation croissante concernant le déploiement de l'intelligence artificielle dans des environnements à risque élevé, notamment les hôpitaux, les tribunaux et les systèmes financiers, où les décisions relatives à l'attribution d'un diagnostic, d'un prêt ou d'une voie de recours juridique sont de plus en plus façonnées par des systèmes algorithmiques . Caitlin Kraft-Buchman a ouvert la session en observant que l'apprentissage automatique des systèmes d'IA fonctionne sur la base de moyennes et d'un auto-apprentissage récursif, ce qui signifie que les populations les plus éloignées des lieux bénéficiant de cette technologie, notamment les femmes, les communautés rurales et les personnes handicapées,sont progressivement effacées des résultats des modèles à mesure que la technologie évolue . La problématique principale de la séance était donc la suivante : le biais de genre n'est pas simplement un problème social, mais une caractéristique structurelle de la façon dont les systèmes d'IA sont construits, avec des conséquences profondes dans le monde réel.
#
Le biais de genre dans la recherche médicale
Oriana Kraft décrit un problème qui va de la recherche préclinique aux recommandations cliniques, jusqu'à l'entraînement des modèles d'IA . Elle a proposé une première observation scientifique : il existe des différences biologiques dans chaque cellule du corps humain, ce qui signifie que le fonctionnement de chaque organe diffère entre les hommes et les femmes . Malgré cela, la recherche médicale a historiquement été menée presque exclusivement sur des sujets masculins, avec des cellules mâles, des animaux mâles et des corps masculins . Les animaux mâles sont surreprésentés dans les études de recherche par rapport aux femelles dans un rapport de 5,5 pour un, une disparité enracinée dans une hypothèse manifestement erronée selon laquelle les cycles hormonaux féminins rendraient les sujets femelles trop imprévisibles . En réalité, Oriana Kraft a noté que les les fluctuations de testostérone des souris mâles sont moins prévisibles que les hormones des souris femelles, dont les cycles suivent au moins un schéma connu . L'exclusion des sujets féminins n'était donc pas simplement un jugement de valeur, mais une erreur scientifique.
Les conséquences de cette exclusion sont graves et bien documentées. Les femmes reçoivent un diagnostic en moyenne quatre ans plus tard que les hommes pour 770 maladies , ont 50 % plus de risques de mourir à la suite d'une crise cardiaque , et sont 50 à 75 % plus susceptibles de présenter des effets indésirables médicamenteux, en grande partie parce qu'elles ont été effectivement exclues des essais cliniques jusqu'en 1993 . Les outils diagnostiques ont été calibrés sur la physiologie masculine : les seuils de troponine utilisés pour détecter les maladies cardiovasculaires sont fixés à des niveaux adaptés au corps masculin et sont trop élevés pour les femmes, ce qui entraîne la non-détection de 42 % des crises cardiaques féminines . Les technologies d'imagerie sont également conçues autour des vaisseaux le plus souvent touchés chez les hommes, ce qui signifie que les manifestations cardiovasculaires féminines sont systématiquement négligées à plusieurs étapes du processus diagnostique . Une fois diagnostiquées, les femmes ont moins de chances de se voir prescrire un traitement de référence, et même ces traitements se sont révélés moins efficaces chez les femmes, comme Oriana Kraft l'a noté à propos de l'essai REBOOT, publié environ deux ans auparavant .
Le problème des erreurs de diagnostic est aggravé par l'accumulation de dossiers inexacts dans les bases de données médicales. Des affections telles que l'endométriose prennent en moyenne sept ans à être diagnostiquées, et les femmes doivent consulter en moyenne cinq médecins avant de recevoir un diagnostic correct . Chaque médecin consulté avant le diagnostic correct enregistre un diagnostic inexact, et à moins qu'une patiente ne se trouve dans un pays comme le Danemark, qui a investi dans de grands registres de santé interconnectés, ces dossiers inexacts ne sont jamais mis à jour . Il en résulte un corpus de données médicales qui n'est pas seulement incomplet, mais activement trompeur, et c'est sur cette base que les modèles d'IA en santé sont entraînés .
#
L'effet cumulatif de l'entraînement de l'IA sur des données biaisées
Oriana Kraft a alors donné son avis sur les affirmations qui prétendent que l'IA explicable, à savoir des systèmes conçus pour articuler leur raisonnement, peut compenser des données d'entraînement biaisées. Les données probantes n'approuvent pas cette hypothèse. Oriana Kraft a cité des chiffres indiquant que l'IA entraînée sur des données médicales non représentatives réduit la précision diagnostique de 11,3 %, et que cette réduction persiste même lorsque les médecins utilisent des systèmes d'IA explicable . La seule véritable solution réside dans des données précises et représentatives au moment de l'entraînement du système. Le problème est encore aggravé par le recours croissant aux données synthétiques, vers lesquelles les grandes entreprises d'IA se sont tournées en déclarant manquer de nouvelles données humaines . Chaque fois qu'un modèle est réentraîné sur des données synthétiques, les signaux provenant des extrémités des distributions - là où les femmes, en tant que groupe sous-représenté, se trouvent de manière disproportionnée - sont progressivement effacés . Les femmes ne sont pas rares dans la réalité, mais elles le sont dans la représentation des données, et cet écart se creuse à chaque mise à jour du modèle .
Caitlin Kraft-Buchman a approuvé ces observations et a avancé que le débiaisage des ensembles de données existants n'est pas une véritable solution : il peut atténuer les préjudices, mais ne peut pas résoudre le problème sous-jacent . Cela implique que le domaine doit s'orienter vers la construction de nouveaux ensembles de données représentatifs et de modèles d'IA sectoriels à partir de zéro, plutôt que de tenter de corriger des grands modèles de langage ayant déjà absorbé des décennies de données biaisées . Elle a également observé une volonté croissante des États à créer des IA souveraines et des modèles de langage plus petits et sectoriels, ce qui pourrait créer une opportunité de construire une IA en santé sur une base plus représentative .
#
L'ancrage du biais de genre dans les infrastructures numériques publiques
Yu Ping Chan a abordé le défi plus large de la construction d'infrastructures numériques publiques sur un substrat biaisé. Elle a cité l'Indice des normes sociales de genre du PNUD, qui a sondé 80 pays représentant 85 % de la population mondiale, et a constaté que près de 9 personnes sur 10 - 90 % des hommes et 87 % des femmes - entretiennent au moins un préjugé à l'égard des femmes, avec une décennie de stagnation dans les progrès sur cette mesure . Cela signifie que les données alimentant les modèles d'IA ne sont pas seulement techniquement incomplètes, mais socialement biaisées, encodant des hypothèses inconscientes sur les rôles et les capacités des femmes qui sont restées stables pendant une génération.
Yu Ping Chan a averti qu'un écart mondial de 10 à 15 % dans la connectivité et l'utilisation d'internet entre les genres - atteignant 30 à 40 % dans les pays en développement - signifie que les femmes sont déjà sous-représentées dans les données qui alimentent les systèmes numériques . À mesure que les infrastructures numériques publiques continuent de se développer sans remédier à ces biais, les inégalités ne sont pas simplement préservées, mais ancrées et aggravées . Elle a reconnu que le secteur technologique a historiquement résisté aux quotas et aux réglementations strictes, et qu'elle ne savait pas vraiment quelle était la solution .
#
Données manquantes : étapes de vie féminines et informations générées par les patientes
Un thème central de la discussion était l'absence quasi totale de données capturant les expériences biologiques propres aux femmes. Oriana Kraft a noté qu'il n'existe aucun formulaire standard dans les systèmes de santé ou de ressources humaines pour enregistrer si une femme traverse la ménopause, connaît des changements de cycle menstruel ou se trouve en période post-partum . Il ne s'agit pas d'une omission mineure : les étapes de vie féminines interagissent avec chaque organe du corps, et des affections telles que la prééclampsie et le diabète gestationnel augmentent le risque de maladie cardiovasculaire à vie de deux à quatre fois . Sans collecte systématique de ces informations, il est impossible de surveiller les femmes de manière appropriée ou de procéder à une détection précoce susceptible de réduire les comorbidités ultérieures et de sauver des vies .
Le cycle menstruel lui-même contient des signaux cliniquement significatifs que les instruments actuels ne sont pas conçus pour capturer. Le profil immunitaire d'une femme évolue tout au long du cycle, affectant les taux de réponse à la vaccination, les effets indésirables médicamenteux et même les résultats de la chimiothérapie . Il ne s'agit pas d'effets marginaux, mais potentiellement transformateurs, pourtant l'infrastructure de données permettant de les capturer n'existe sous aucune forme systématique . Pendant ce temps, les femmes génèrent déjà des données de santé riches grâce aux objets connectés, aux journaux de cycle et à des notes personnelles détaillées, et apportent ces informations lors de leurs consultations médicales, où elles sont largement ignorées . Les femtech ont constaté que les femmes sont prêtes à donner leurs données simplement pour bénéficier de meilleurs soins et contribuer à l'avancement de la santé féminine dans son ensemble . Le paradoxe, comme l'a observé Oriana Kraft, est que cette volonté existe précisément au moment où les grandes entreprises d'IA déclarent manquer de nouvelles données humaines .
Une étude non précisée citée par Oriana Kraft a révélé que les notes des médecins femmes étaient environ deux fois plus détaillées que celles de leurs homologues masculins, ce qui suggère qu'inciter à une collecte de données nuancées - notamment en récompensant les cliniciens pour une documentation plus riche - pourrait constituer une étape pratique vers l'amélioration de la qualité des données d'entraînement . Le point plus large est que le problème ne réside pas dans un manque d'informations disponibles, mais dans l'incapacité à les capturer, à les valoriser et à les intégrer dans les systèmes qui comptent.
#
La dimension intersectionnelle : les femmes de couleur et le Sud global
La discussion a reconnu, sans toutefois pleinement résoudre, les couches supplémentaires de désavantage auxquelles font face les femmes de couleur et les femmes du Sud global. Même aux États-Unis, les données sur la mortalité maternelle sont insuffisamment nuancées, les femmes afro-américaines étant confrontées à des taux disproportionnellement élevés qui ne sont pas adéquatement reflétés dans la recherche ou les recommandations cliniques . Les facteurs de risque spécifiques à certains groupes ethniques, tels que le risque accru de certaines formes d'anémie chez les femmes d'origine sud-asiatique, ne sont pas systématiquement intégrés dans les protocoles de dépistage . Le modèle universel, prévu pour un jeune homme blanc en bonne santé, ne fonctionne tout simplement pas pour la majorité de la population mondiale .
Une participante de Tanzanie a suggéré que des recherches ancrées dans les expériences des femmes africaines pourraient produire des avancées scientifiques transformatrices, notamment concernant la ménopause, y compris pour les femmes d'autres régions du monde qui connaissent aujourd'hui ces symptômes . Elle a également noté que si ses enfants de neuf et dix ans portaient déjà des lunettes, elle-même n'avait aucun problème de vue à près de cinquante ans, une illustration supplémentaire de la valeur potentielle de recherches ancrées dans des populations spécifiques. Cette contribution a renforcé l'argument selon lequel les populations les plus exclues de la recherche peuvent contenir les informations scientifiques les plus précieuses. Yu Ping Chan a soulevé la préoccupation supplémentaire : les données sur les femmes du Sud global doivent tenir compte non seulement de la race et de l'ethnicité, mais aussi de la langue, du contexte culturel et des conditions de vie très différentes dans lesquelles vivent les femmes des pays en développement .
#
Solutions proposées : normes, marchés publics et modèles réglementaires
La discussion a généré plusieurs propositions concrètes pour remédier à ces défaillances systémiques. Caitlin Kraft-Buchman a proposé d'établir la représentativité comme norme scientifique formelle, en s'appuyant sur le principe d'égalité substantielle inscrit dans la CEDAW, le traité international sur les droits des femmes, qui prévoit que l'égalité signifie garantir que chacun reçoit ce qui est véritablement adapté à ses besoins, plutôt qu'une solution universelle . Dans un contexte de santé, cela signifierait s'assurer que les personnes d'une population donnée soient sincèrement représentées dans les données utilisées pour entraîner les modèles destinés à ce cas d'usage .
Yu Ping Chan a proposé des exigences en matière de marchés publics comme mécanisme plus immédiatement actionnable, arguant qu'il est plus facile d'exiger des données désagrégées par sexe et une transparence algorithmique avant de signer un contrat gouvernemental que de vérifier la conformité après coup . Cette approche placerait la charge de la preuve sur les fournisseurs de technologie et les concepteurs de modèles avant qu'ils ne se voient attribuer des contrats publics, plutôt que de s'appuyer sur des engagements volontaires ou une responsabilisation a posteriori. Les pays nordiques ont été cités comme modèle réglementaire : plusieurs ont rendu obligatoire la collecte de données désagrégées par sexe dans les registres nationaux, permettant aux chercheurs de suivre l'impact sur l'ensemble du cycle de vie des problèmes de santé chez les femmes et de constituer la base de données probantes nécessaire pour impulser un changement systémique .
Oriana Kraft a également décrit une approche de concertation multipartite qui réunirait des ministres de la santé, des entreprises pharmaceutiques, des systèmes de santé et des institutions financières pour remédier à la nature cloisonnée du problème . Chaque acteur du système de santé tend à pointer du doigt un autre : les cliniciens veulent de meilleurs médicaments, les entreprises pharmaceutiques veulent des incitations gouvernementales, et les gouvernements veulent des données cliniques. Ce phénomène rend la responsabilité collective essentielle . Une enquête auprès d'environ un millier de médecins dans six pays a révélé qu'environ 80 % reconnaissaient des différences biologiques entre les sexes chez leurs patients, mais estimaient manquer des outils, des ressources et des recommandations cliniques pour dispenser des soins adéquats . Cela suggère que le problème n'est pas principalement lié aux attitudes des cliniciens, mais à l'infrastructure systémique.
#
Donner aux femmes les moyens d'être productrices de données
Une idée est née durant la discussion : les femmes devraient devenir des productrices actives de données, ainsi que des propriétaires et vendeuses potentielles de données de santé. Caitlin Kraft-Buchman a proposé de former des groupes de défense des droits des femmes pour qu'ils deviennent collecteurs, gestionnaires et propriétaires de données, leur permettant de vendre ces données à des marchés qui en manquent actuellement, et aussi de comprendre le fonctionnement de leur propre écosystème d'information, notamment dans le contexte de la mésinformation et de la désinformation . Cela fonctionnerait à plusieurs niveaux : améliorer la qualité des données de santé, renforcer les capacités locales et créer des opportunités économiques pour les organisations de femmes . La vision plus large était celle de femmes productrices d'informations et de solutions numériques, et non simplement bénéficiaires de la technologie. Cela signifierait que les femmes n'auraient plus simplement accès au système mais également la capacité de déposer des brevets, de créer de nouvelles technologies et de détenir les moyens de production numérique .
De plus, le Sud global devrait devenir une source potentielle d'innovation plutôt qu'un simple récepteur. Les technologies développées sous contraintes de ressources peuvent dépasser les infrastructures traditionnelles et être ensuite appliquées dans le Nord global, y compris dans les zones rurales reculées des États-Unis . Caitlin Kraft-Buchman a prolongé cette réflexion en suggérant que les pays africains, avec leurs populations diversifiées, pourraient collecter des données de santé nuancées et les revendre au Nord global, qui manque de données sur ses propres populations racialement diverses . Ce renversement de la direction habituelle du transfert de technologie a été identifié comme une opportunité à la fois scientifique et commerciale.
Une participante de Chine a demandé spécifiquement ce que les individus peuvent faire au quotidien pour attirer l'attention sur l'endométriose et l'incapacité du système médical à servir les femmes, en particulier dans des contextes où les manifestations publiques sont difficiles. Oriana Kraft a répondu en soulignant le rôle de certaines célébrités dans la sensibilisation aux problèmes de santé des femmes, et les réseaux sociaux comme moteur important du progrès dans ce domaine, notant que les femmes partageant publiquement leurs expériences avaient contribué à faire évoluer la conversation d'une manière que la mobilisation classique n'avait pas toujours réussi à accomplir.
#
Le biais de genre de l'IA dans les interactions quotidiennes
Une participante de Chine a introduit une illustration frappante de la façon dont le biais de genre de l'IA se manifeste dans l'usage quotidien, décrivant des publications sur les réseaux sociaux chinois conseillant aux femmes de dissimuler leur genre lorsqu'elles interagissent avec l'IA, car les systèmes d'IA répondent de manière plus logique aux utilisateurs se présentant comme masculins et de manière plus émotionnelle à ceux se présentant comme féminins . Cette intervention a suscité une réponse de Yu Ping Chan, qui s'est adressée à l'intervenante en tant que femme de couleur d'origine est-asiatique, reconnaissant les pressions culturelles particulières autour de l'affirmation de soi et de la non-confrontation qui aggravent le problème . Son conseil pratique était que les femmes rédigent des instructions explicites dans leurs requêtes adressées à l'IA, en précisant qu'elles attendent des réponses logiques plutôt qu'émotionnelles, et qu'elles n'acceptent pas les résultats biaisés selon le genre comme inévitables .
Oriana Kraft a apporté un contexte important, expliquant que ces réponses biaisées émergent parce que les systèmes d'IA ont été entraînés sur des données internet qui encodent des générations de stéréotypes de genre et de normes sociales . Elle a également mis en lumière une forme connexe de biais algorithmique : le mot « vagin » est effectivement le mot le plus censuré sur internet, et des affections de santé telles que l'endométriose et le post-partum font l'objet d'un shadow-ban sur les plateformes de réseaux sociaux, tandis que les termes équivalents relatifs à la santé masculine ne le sont pas . Cela signifie que le problème ne concerne pas seulement les données d'entraînement, mais aussi les choix algorithmiques intégrés dans les systèmes de modération de contenu, qui suppriment activement les informations sur la santé des femmes et réduisent encore davantage leur représentation dans les données utilisées pour entraîner les grands modèles de langage.
#
Traduire les engagements en actions
Un thème récurrent était la frustration partagée par toutes les intervenantes face à l'écart entre les engagements internationaux et les résultats concrets. Yu Ping Chan a décrit la Déclaration de Hambourg sur l'IA responsable pour les ODD, un document multipartite qui inclut le genre comme domaine prioritaire spécifique et élaboré dans le cadre de la collaboration du PNUD avec le gouvernement allemand, comme un exemple d'engagement qui existe sur le papier mais fait face au même défi de mise en œuvre que d'innombrables autres cadres internationaux . Elle a reconnu que la communauté internationale est habile à produire des documents, notamment le SMSI, le Pacte numérique mondial et la Déclaration de Hambourg, mais échoue systématiquement à les transformer en actions mesurables et responsables . Une participante a exprimé directement la frustration commune, notant que malgré cinq années de discussions soutenues sur l'intégration des perspectives des femmes dans les technologies et les produits pharmaceutiques, les progrès n'ont pas été à la hauteur du volume des discussions .
Caitlin Kraft-Buchman a proposé que les indicateurs e-santé du SMSI puissent être mis à jour pour exiger des données d'entraînement représentatives du genre, avec l'OMS et l'UIT comme facilitateurs, créant une cascade de responsabilisation à travers la normalisation internationale . Oriana Kraft a introduit le concept d'une « course aux données de santé », dans laquelle les pays se disputent la primauté de la collecte de données de santé complètes, diversifiées et nuancées, comme une incitation compétitive positive, en particulier pour les nations cherchant une reconnaissance scientifique et un avantage commercial . Le message de clôture était celui d'un optimisme prudent : l'opportunité scientifique représentée par les données inexploitées sur la santé des femmes est immense, la volonté des femmes de contribuer leurs données est déjà démontrée, et les outils politiques, tels que des exigences en matière de marchés publics, des normes scientifiques et des mandats réglementaires, sont déjà disponibles . Ce qui reste, c'est la volonté politique et la coordination institutionnelle nécessaires pour les déployer avant que de nouvelles infrastructures numériques ne soient construites sur une base déjà inégale .
Les différences biologiques entre les sexes ignorées dans la recherche
Arg. 1Oriana Kraft soutient que les différences biologiques entre les sexes existent dans chaque cellule du corps humain, ce qui signifie que chaque organe fonctionne différemment chez les hommes et chez les femmes. Malgré cela, la recherche médicale a historiquement étudié uniquement des cellules, des animaux et des corps masculins, créant ainsi un manque fondamental dans la compréhension de la santé féminine.
Elle a souligné que les animaux mâles sont surreprésentés dans la recherche par rapport aux femelles dans un rapport de 5,5 pour un , et que l'exclusion des rongeurs femelles reposait sur une fausse hypothèse selon laquelle les cycles hormonaux féminins les rendaient trop complexes à étudier, alors qu'en réalité les souris mâles avec leurs fluctuations de testostérone sont moins prévisibles . Les femmes ont été effectivement exclues des essais cliniques jusqu'en 1993, ce qui signifie que pratiquement tous les médicaments sur le marché n'ont jamais été testés sur des femmes .
on: La recherche médicale a systématiquement exclu les femmes, produisant des données biaisées qui nuisent à leurs résultats de santé
Les moins bons résultats de santé des femmes dus à une recherche centrée sur les hommes
Arg. 2Parce que la recherche médicale s'est concentrée sur le corps masculin, les femmes font face à des résultats de santé nettement moins bons dans un large éventail de pathologies. Ces disparités ne sont pas accidentelles, mais sont directement causées par l'exclusion systématique des femmes de la recherche clinique et par le calibrage des outils de diagnostic et des traitements sur la physiologie masculine.
Les femmes reçoivent un diagnostic en moyenne quatre ans plus tard que les hommes pour 770 maladies , ont 50 % plus de risques de mourir à la suite d'une crise cardiaque , et sont 50 à 75 % plus susceptibles de présenter des effets indésirables médicamenteux en raison de leur exclusion des essais cliniques jusqu'en 1993 . Les femmes passent également cinq années supplémentaires en mauvaise santé par rapport aux hommes, et ce fardeau survient pendant leurs années de vie plutôt qu'en fin de vie .
on: La recherche médicale a systématiquement exclu les femmes, produisant des données biaisées qui nuisent à leurs résultats de santé
Les outils de diagnostic calibrés pour les hommes passent à côté des pathologies féminines
Arg. 3Les outils de diagnostic et les seuils de biomarqueurs ont été calibrés sur la physiologie masculine, ce qui signifie que les pathologies se manifestant différemment chez les femmes sont régulièrement méconnues. Cela concerne à la fois les marqueurs biochimiques utilisés et les technologies d'imagerie déployées en milieu clinique.
Les taux de troponine, biomarqueur des maladies cardiovasculaires, ont un seuil de référence basé sur le corps masculin qui est trop élevé pour les femmes, entraînant le rejet de nombreux cas de maladies cardiovasculaires féminines . Les technologies d'imagerie sont également conçues autour des vaisseaux le plus souvent touchés chez les hommes, passant à côté des différents vaisseaux plus susceptibles de provoquer des crises cardiaques chez les femmes . En conséquence, les seuils de troponine calibrés sur les hommes manquent 42 % des crises cardiaques féminines .
La cascade de diagnostics erronés due à l'absence de recommandations cliniques axées sur les femmes
Arg. 4Les recommandations cliniques étant fondées sur des recherches centrées sur les hommes, les femmes font systématiquement l'objet de diagnostics erronés, ce qui génère une cascade de dossiers médicaux inexacts qui alimentent ensuite les données d'entraînement des systèmes d'IA. Il en résulte un problème cumulatif dans lequel les inexactitudes historiques ne sont jamais corrigées, mais au contraire perpétuées par les systèmes algorithmiques.
L'endométriose met en moyenne sept ans à être diagnostiquée, et les femmes atteintes de cette pathologie doivent consulter en moyenne cinq médecins avant d'obtenir un diagnostic correct, ce qui signifie que chaque médecin consulté auparavant a enregistré un diagnostic erroné . Avec un ratio de quatre diagnostics erronés pour un diagnostic correct dans le cas de l'endométriose, et en l'absence de processus systématique de mise à jour des dossiers, les grands modèles de langage sont entraînés sur ces données inexactes .
Les données d'entraînement biaisées réduisent la précision des diagnostics par IA
Arg. 5Les modèles d'IA entraînés sur des données médicales historiquement biaisées produisent des résultats diagnostiques moins précis, et ce problème ne peut pas être résolu simplement en demandant à l'IA d'expliquer son raisonnement. La seule véritable solution consiste à garantir que les données d'entraînement sous-jacentes sont exactes et représentatives dès le départ.
Une IA entraînée sur des données non représentatives réduit la précision diagnostique de 11,3 %, et même l'IA explicable - dans laquelle le modèle justifie son raisonnement - entraîne la même réduction de précision . Cela démontre que le problème réside dans les données elles-mêmes, et non dans les mécanismes de transparence du modèle.
on: Les systèmes d'IA entraînés sur des données médicales et sociales biaisées perpétuent et amplifient les inégalités existantes à l'encontre des femmes
on: La capacité de l'IA explicable à compenser les biais présents dans les données d'entraînement
Les étapes de la vie féminine absentes de la collecte de données de santé
Arg. 6Bien que les grandes étapes de la vie féminine aient une incidence profonde sur l'ensemble des organes du corps, celles-ci ne sont pas consignées dans les dossiers médicaux électroniques ni dans les systèmes RH. Cette absence signifie que des signaux de santé essentiels liés à la menstruation, à la grossesse, au post-partum et à la ménopause sont systématiquement exclus des données utilisées pour entraîner les modèles d'IA et orienter les soins cliniques.
Les systèmes RH ne disposent d'aucun formulaire standard ni d'aucun bouton permettant de consigner qu'une femme traverse la ménopause, ni de fonctionnalité pour enregistrer le cycle menstruel ou l'expérience post-partum . Les complications de grossesse telles que la prééclampsie et le diabète gestationnel multiplient par deux à quatre le risque de maladies cardiovasculaires sur l'ensemble de la vie, pourtant ces informations ne sont pas systématiquement recueillies et associées à un suivi à long terme .
on: La collecte de données actuelle manque de nuance et ne parvient pas à saisir les signaux de santé spécifiques aux femmes ni les grandes étapes de leur vie
Les signaux du cycle menstruel non captés par les instruments médicaux actuels
Arg. 7Le profil immunitaire d'une femme évolue tout au long de son cycle menstruel, ce qui influe sur les taux de réponse à la vaccination, les réactions indésirables aux médicaments et les résultats de la chimiothérapie. Or, les instruments médicaux actuels ne sont pas conçus pour capter ces signaux, ce qui entraîne la perte d'informations de santé potentiellement déterminantes.
Oriana Kraft a expliqué que les taux de réponse à la vaccination et les réactions indésirables aux médicaments varient selon la phase du cycle menstruel dans laquelle se trouve une femme, et que les réponses à la chimiothérapie diffèrent également en conséquence . Elle a souligné que le corps féminin recèle de nombreux signaux cachés que les instruments n'ont pas été conçus pour collecter, et que personne n'est actuellement incité à recueillir ces informations .
on: La collecte de données actuelle manque de nuance et ne parvient pas à saisir les signaux de santé spécifiques aux femmes ni les grandes étapes de leur vie
Les complications de grossesse non reliées au suivi du risque cardiovasculaire à long terme
Arg. 8Les pathologies survenant pendant la grossesse, telles que la prééclampsie et le diabète gestationnel, augmentent considérablement le risque de maladies cardiovasculaires sur l'ensemble de la vie d'une femme, mais ces informations ne sont pas systématiquement enregistrées et associées à un suivi de santé continu. La collecte et la prise en compte de ces données pourraient permettre une détection précoce et potentiellement sauver des vies.
La prééclampsie et le diabète gestationnel entraînent une multiplication par deux à quatre du risque de maladies cardiovasculaires sur l'ensemble de la vie , mais ces informations ne font l'objet d'aucune collecte systématique permettant un suivi à long terme et une détection précoce .
on: La collecte de données actuelle manque de nuance et ne parvient pas à saisir les signaux de santé spécifiques aux femmes ni les étapes de leur vie
L'entraînement sur données synthétiques efface les signaux de santé propres aux femmes
Arg. 9Lorsque les modèles d'IA sont entraînés sur des données synthétiques, les signaux provenant des extrémités des distributions — là où les femmes sont sous-représentées — se perdent progressivement à chaque nouvelle itération du modèle. Cela signifie que même les rares signaux de santé relatifs aux femmes qui existent dans les données réelles sont effacés plutôt que préservés.
Oriana Kraft a expliqué qu'à chaque fois qu'un nouveau modèle est entraîné sur des données synthétiques, il perd les signaux provenant des extrémités de la distribution, et comme les femmes sont peu représentées dans les données, même si elles ne le sont pas dans la réalité, leurs signaux de santé s'effacent à chaque itération . Cela aggrave le problème existant du fait que les signaux de santé des femmes ne sont pas capturés dès le départ .
Le cloisonnement du système de santé empêche une responsabilité collective
Arg. 10Le système de santé est organisé autour de spécialités par organe et de silos institutionnels distincts, les cliniciens, les entreprises pharmaceutiques et les gouvernements se renvoyant mutuellement la responsabilité plutôt que d'assumer collectivement la charge de combler les lacunes en matière de santé des femmes. Cette fragmentation empêche le changement systémique nécessaire à l'amélioration des soins de santé pour les femmes.
Oriana Kraft a décrit un événement réunissant des ministres de la santé, au cours duquel le problème central identifié était le suivant : les cliniciens affirment avoir besoin de meilleurs médicaments, les entreprises pharmaceutiques estiment que les gouvernements doivent inciter à la réalisation d'essais cliniques, et les gouvernements n'agissent pas sans pression publique . Une enquête menée auprès d'environ 1 000 à 1 200 médecins dans six pays a révélé qu'environ 80 % d'entre eux observent des différences liées au sexe chez leurs patients, mais estiment ne pas disposer des outils ni des recommandations cliniques nécessaires pour prodiguer des soins adéquats .
on: Des solutions systémiques et multipartites sont nécessaires, car aucun acteur seul ne peut résoudre le problème
on: Le rôle des quotas et des mandats dans la lutte contre les biais de genre dans les secteurs technologique et de la santé
L'absence d'incitations gouvernementales freine l'innovation pharmaceutique pour les femmes
Arg. 11Les entreprises pharmaceutiques font valoir que, sans incitations gouvernementales, elles n'ont aucune raison commerciale de mener des essais cliniques spécifiquement pour les pathologies touchant les femmes de manière disproportionnée. Cela crée une impasse structurelle dans laquelle l'innovation en matière de santé féminine reste commercialement reléguée au second plan.
Oriana Kraft a souligné que l'industrie pharmaceutique invoque la nécessité d'incitations gouvernementales pour mener des essais cliniques ou innover dans le domaine des maladies qui touchent de manière disproportionnée les femmes . Elle a mis en avant l'exemple de certains pays nordiques qui ont rendu obligatoire la collecte de données ventilées par sexe dans les registres nationaux, illustrant ainsi comment l'action gouvernementale peut impulser un changement systémique .
on: Des solutions systémiques et multipartites sont nécessaires, car aucun acteur seul ne peut résoudre le problème
La collecte obligatoire de données désagrégées par sexe comme modèle réglementaire
Arg. 12Les pays nordiques qui ont rendu obligatoire la collecte de données ventilées par sexe dans les registres nationaux démontrent que la réglementation gouvernementale peut impulser un changement systémique dans la manière dont les données de santé sont collectées et utilisées. Cette approche permet aux chercheurs d'appréhender l'impact des problèmes de santé sur l'ensemble du cycle de vie des femmes, y compris les effets sur leur potentiel de revenus tout au long de leur vie et sur les coûts pour les systèmes de santé.
Oriana Kraft a cité les pays nordiques, en particulier le Danemark, comme ayant mené des recherches à grande échelle à partir de dossiers patients interconnectés et ayant rendu obligatoire la collecte de données ventilées par sexe dans les registres nationaux . Elle a soutenu que ce type de données permet de comprendre l'impact des problèmes de santé sur le potentiel de revenus d'une femme tout au long de sa vie, ainsi que le coût pour les systèmes de santé du manque d'innovation en matière de santé féminine .
Les riches données générées par les patientes et les médecins femmes gaspillées
Arg. 13Les médecins femmes rédigent des notes cliniques nettement plus détaillées que leurs homologues masculins, et les patientes elles-mêmes apportent des données de santé riches via des appareils connectés et des journaux de cycle. Ces informations sont pourtant largement ignorées plutôt que systématiquement exploitées, ce qui représente une occasion manquée majeure à une époque où les entreprises d'IA affirment manquer de nouvelles données humaines.
Des recherches ont montré que les notes des médecins femmes étaient deux fois plus détaillées que celles de leurs confrères masculins, ce qui suggère qu'encourager une saisie détaillée des données pourrait améliorer la qualité des données d'entraînement . Les femmes apportent déjà des données provenant d'appareils tels que les bagues Oura et des journaux de cycle à leurs consultations médicales, et des startups de femtech ont constaté que les femmes sont prêtes à partager leurs données pour faire avancer la recherche en santé féminine - pourtant, cette riche source d'information est ignorée . C'est particulièrement paradoxal, alors que les grandes entreprises d'IA déclarent avoir épuisé les nouvelles données humaines disponibles et avoir recours à des données synthétiques .
Les groupes marginalisés effacés par les moyennes de l'apprentissage automatique
Arg. 1Les systèmes d'apprentissage automatique fonctionnent sur la base de moyennes et d'un apprentissage récursif, ce qui signifie que les populations les plus éloignées du centre privilégié de la représentation des données sont progressivement effacées des résultats des modèles. Il s'agit d'un problème systémique qui touche les femmes à l'échelle mondiale, avec des effets cumulatifs pour celles qui cumulent plusieurs identités marginalisées.
Caitlin Kraft-Buchman a expliqué que plus une personne est éloignée du centre privilégié - que ce soit en raison de son caractère plus rural, plus pauvre ou plus handicapé - moins elle est représentée dans les données . Elle a décrit comment l'apprentissage récursif entraîne un rétrécissement progressif du champ de représentation effectif, réduisant à terme même la prééminence du centre privilégié . Elle a qualifié ce phénomène de problème majeur pour les femmes du monde entier, aggravé et particulièrement urgent pour les femmes cumulant davantage d'identités croisées .
on: Les systèmes d'IA entraînés sur des données médicales et sociales biaisées perpétuent et amplifient les inégalités existantes à l'encontre des femmes
La correction des biais dans les données existantes est insuffisante ; de nouvelles données sont nécessaires
Arg. 2Caitlin Kraft-Buchman soutient que la correction des biais dans les ensembles de données existants ne constitue pas une véritable solution au problème des biais de genre dans l'IA, car elle ne peut qu'atténuer les préjudices sans résoudre le problème sous-jacent. La véritable solution réside dans la constitution de nouveaux ensembles de données représentatifs et de modèles sectoriels construits de toutes pièces.
Elle a indiqué qu'il existe un large consensus sur le fait que la correction des biais dans les données n'est pas véritablement possible - elle peut améliorer les choses sans pour autant résoudre le problème . Elle a évoqué la tendance vers l'IA souveraine et les modèles de langage plus petits et sectoriels comme une voie plus viable, suggérant qu'un modèle de santé construit de zéro sur des données représentatives pourrait fonctionner .
on: Les engagements et déclarations internationaux sur le genre et l'IA sont insuffisants sans actions concrètes et responsables
on: La viabilité de la correction des biais dans les données existantes comme solution
La représentativité comme norme scientifique
Arg. 3Caitlin Kraft-Buchman propose d'établir la représentativité comme norme scientifique, garantissant que les populations concernées par un cas d'usage spécifique soient véritablement et sincèrement représentées dans les données utilisées pour construire les systèmes d'IA. Cette approche s'appuie sur le principe d'égalité substantielle consacré par la CEDAW, qui exige que les solutions soient adaptées aux besoins réels des différentes populations plutôt que d'appliquer une approche uniforme.
Elle a décrit le concept de représentativité comme norme scientifique, selon lequel, dans un cas d'usage portant sur la population générale, la moitié des données refléterait les femmes, tandis que dans des contextes plus spécifiques - comme une application en langue des signes - la communauté démographique concernée serait pleinement représentée . Elle a établi une analogie avec le principe d'égalité substantielle de la CEDAW, le comparant à l'idée de s'assurer que chacun dispose d'un vélo à sa taille plutôt qu'une taille unique standard .
Des modèles d'IA sectoriels fondés sur des données représentatives comme solution
Arg. 4Plutôt que de tenter de corriger les grands modèles de langage déjà entraînés sur des données biaisées, Caitlin Kraft-Buchman soutient que des modèles de langage sectoriels plus petits, construits de zéro sur des données représentatives, offrent une voie plus viable et plus efficace. La tendance croissante vers l'IA souveraine pour des raisons géopolitiques pourrait accélérer cette approche.
Elle a noté que, dans un contexte où les pays se tournent vers l'IA souveraine pour des raisons géopolitiques, les modèles de langage plus petits à vocation sectorielle sont de plus en plus considérés comme viables, et qu'un modèle de santé construit de zéro sur des données représentatives pourrait fonctionner efficacement . Elle a proposé cette orientation comme un moyen d'éviter le problème insoluble que représente la correction des grands modèles de langage aux biais profondément ancrés .
Les femmes en tant que collectrices et propriétaires de données
Arg. 5Caitlin Kraft-Buchman propose de former les groupes de défense des droits des femmes pour qu'ils deviennent collectrices, propriétaires, organisatrices et vendeuses de données, faisant ainsi passer les femmes du statut de sujets passifs du développement à celui de productrices actives d'informations et de solutions numériques. Cette approche s'appliquerait à de multiples domaines, notamment la collecte de données de santé et la lutte contre la désinformation.
Elle a décrit une idée visant à former des femmes dans tout contexte - en particulier les groupes de défense des droits des femmes - à collecter des données sur le terrain, en devenant collectrices, propriétaires, organisatrices et vendeuses de données, capables également de gérer et de revendre ces données . Elle a rattaché cette idée à une vision plus large consistant à passer de la protection des femmes à leur autonomisation en tant que productrices d'informations, de solutions et de technologies numériques, notamment en déposant des brevets et en détenant les moyens de production numérique .
Les biais liés aux normes sociales déjà intégrés dans les données d'entraînement des IA
Arg. 1Yu Ping Chan soutient que les données sur lesquelles les modèles d'IA sont entraînés encodent déjà des préjugés inconscients profondément ancrés contre les femmes, reflétant des normes sociales qui n'ont connu aucune évolution significative depuis une décennie. Cela signifie que, même avant tout traitement algorithmique, le substrat des données d'entraînement de l'IA est fondamentalement biaisé.
L'Indice des normes sociales de genre du PNUD, qui a interrogé 80 pays représentant 85 % de la population mondiale en 2023, a révélé que près de 9 personnes sur 10 - 90 % des hommes et 87 % des femmes - nourrissent au moins un préjugé à l'égard des femmes . Elle a souligné qu'une décennie de stagnation a été observée dans l'évolution de ces normes, ce qui signifie que les biais intégrés dans les données d'entraînement ne s'améliorent pas avec le temps .
on: Les systèmes d'IA entraînés sur des données médicales et sociales biaisées perpétuent et amplifient les inégalités existantes à l'encontre des femmes
on: La question de savoir si l'IA explicable peut compenser des données d'entraînement biaisées
Le fossé numérique de genre amplifie les biais algorithmiques dans les infrastructures
Arg. 2Un fossé numérique de genre considérable en matière de connectivité et d'utilisation d'Internet signifie que les femmes sont déjà sous-représentées dans les données qui alimentent les systèmes numériques. Les infrastructures numériques publiques étant construites sur ces bases biaisées, les inégalités se trouvent intégrées dans les systèmes eux-mêmes, et le problème s'aggrave à mesure que la numérisation s'accélère sans que ces écarts ne soient comblés.
Yu Ping Chan a cité des enquêtes mondiales faisant état d'un écart de 10 à 15 % entre les femmes et les hommes en matière de connectivité et d'utilisation d'Internet à l'échelle mondiale, cet écart atteignant 30 à 40 % dans les pays en développement . Elle a soutenu que continuer à construire des infrastructures numériques publiques sans remédier à ces écarts revient à ancrer des hypothèses biaisées dans les fondements mêmes des systèmes numériques, aggravant ainsi progressivement le problème .
on: La collecte de données actuelle manque de nuance et ne parvient pas à saisir les signaux de santé spécifiques aux femmes ni les différentes étapes de leur vie
Écart entre les engagements internationaux et les actions concrètes
Arg. 3Malgré de nombreux documents et déclarations internationaux engageant à une IA responsable et à l'égalité de genre dans les systèmes numériques, la traduction de ces engagements en actions concrètes et imputables demeure le défi central non résolu. Yu Ping Chan reconnaît que la communauté internationale excelle dans la production de documents, mais échoue systématiquement au stade de la mise en œuvre.
Elle a fait référence à la Déclaration de Hambourg sur l'utilisation responsable de l'IA pour les ODD, qui inclut le genre comme domaine d'action et priorité spécifique pour les entreprises du secteur privé, les organisations de développement international et les gouvernements nationaux . Elle a noté que le même défi de traduction des engagements sur le papier en actions concrètes se pose à l'ensemble du système des Nations Unies, y compris le SMSI et le Pacte numérique mondial, et que même la communauté du secteur privé partage cette frustration .
on: Des solutions systémiques et multipartites sont nécessaires, car aucun acteur seul ne peut résoudre le problème
on: Le rôle des quotas et des mandats dans la lutte contre les biais de genre dans les secteurs technologique et de la santé
Les marchés publics comme outil pour imposer des exigences en matière de données ventilées par genre
Arg. 4Yu Ping Chan soutient que les exigences en matière de marchés publics offrent un mécanisme pratique et direct pour imposer des données ventilées par genre et la transparence algorithmique, car il est plus aisé d'intégrer ces exigences dans les contrats avant leur signature que de procéder à des audits de conformité après coup. Cette approche pourrait ancrer des pratiques tenant compte du genre dans les systèmes commandités par les gouvernements et les organisations internationales.
Elle a suggéré qu'intégrer des exigences de données ventilées et stratifiées par genre dans les contrats gouvernementaux avant leur signature - plutôt que de procéder à des audits après coup - pourrait constituer un moyen d'ancrer des correctifs liés au genre dans les infrastructures numériques publiques . Elle a cité les gouvernements nordiques comme exemples de juridictions ayant imposé la divulgation de données ventilées par sexe, et a demandé si cette pratique pourrait être étendue plus largement aux marchés publics .
on: Des solutions systémiques impliquant de multiples parties prenantes sont nécessaires, car aucun acteur seul ne peut résoudre le problème à lui seul
Données insuffisantes sur les femmes de couleur et les femmes du Sud global
Arg. 1Les données utilisées dans la recherche médicale et les systèmes d'IA ne sont pas suffisamment nuancées pour tenir compte des profils de santé spécifiques des femmes de couleur ou des femmes du Sud global. Les facteurs de risque propres à certaines ethnies ne sont pas intégrés dans les protocoles de dépistage, et le modèle d'un jeune homme blanc en bonne santé a été extrapolé à l'ensemble de la population mondiale.
Speaker 1 a souligné que les États-Unis affichent des taux de mortalité maternelle honteusement élevés, en particulier chez les femmes afro-américaines, et que les données ne sont pas suffisamment nuancées pour traiter ce problème . Elle a cité l'exemple des femmes d'origine sud-asiatique, qui sont plus susceptibles de présenter une certaine forme d'anémie, ce qui devrait constituer un facteur de risque dans le dépistage, mais ne l'est pas . Elle a décrit comment un échantillon de parfois 20 à 30 personnes a historiquement été extrapolé à une population de 7 milliards d'individus, plutôt que de collecter des signaux auprès du plus grand nombre de personnes diversifiées possible .
on: La collecte de données actuelle manque de nuance et ne parvient pas à saisir les signaux de santé spécifiques aux femmes ni les différentes étapes de leur vie
Censure algorithmique de la terminologie relative à la santé des femmes en ligne
Arg. 2Les plateformes de réseaux sociaux suppriment algorithmiquement la terminologie relative à la santé des femmes, y compris le mot « vagin » et des pathologies telles que l'endométriose et le post-partum, tandis que les termes masculins équivalents ne font pas l'objet des mêmes restrictions. Ce biais algorithmique à l'encontre du contenu lié à la santé des femmes limite la sensibilisation du public et perpétue la marginalisation des problèmes de santé féminins.
Speaker 1 a déclaré que « vagin » est le mot le plus censuré sur Internet et qu'il est effectivement victime de shadow-ban sur les réseaux sociaux, tout comme des pathologies telles que l'endométriose et le post-partum . Elle a mis cela en contraste avec le fait que des termes masculins équivalents comme « sperme » ne sont pas soumis aux mêmes restrictions , faisant valoir que cela reflète le fait que la majorité des personnes qui façonnent les algorithmes formulent des hypothèses sur les femmes .
on: La question de savoir si inonder Internet de représentations positives des femmes constitue une stratégie de plaidoyer efficace
Le grand public ignore les hypothèses que l'IA formule à son sujet
Arg. 3Il existe un manque généralisé de culture publique concernant les hypothèses que les modèles d'IA formulent sur les utilisateurs, et les citoyens ne sont pas informés des bases sur lesquelles sont prises les décisions algorithmiques qui les concernent. Speaker 1 soutient que dans des contextes à hauts risques tels que la santé et le droit, les personnes devraient avoir le droit de savoir quelles hypothèses un modèle formule à leur sujet.
Speaker 1 a noté qu'il existe un très faible niveau de compréhension des hypothèses qu'un modèle formule sur une personne , et que les modèles sont actuellement déployés dans des contextes à hauts risques tels que la santé et le droit, formulant des hypothèses basées sur des facteurs tels que le niveau de revenu, sans que les utilisateurs en soient conscients . Elle a soutenu que les citoyens devraient avoir le droit de savoir quelles hypothèses un modèle formule à leur sujet, en particulier dans ces contextes à hauts risques .
L'innovation du Sud global peut faire un bond en avant et éclairer le Nord global
Arg. 4Les technologies développées dans des contextes de ressources limitées dans le Sud global peuvent faire un bond en avant par rapport aux infrastructures traditionnelles et produire des innovations ensuite applicables dans le Nord global, inversant ainsi la direction habituelle du transfert de technologie. Cela représente une opportunité significative de combler simultanément les lacunes en matière de santé des femmes dans les deux contextes.
Speaker 1 a cité l'exemple d'un appareil d'échographie à distance utilisable via un téléphone mobile, développé pour le Sud global afin de permettre une surveillance à distance sans nécessiter la présence d'un médecin, et qui pourrait ensuite être applicable aux États-Unis ou dans d'autres zones rurales éloignées . Elle a noté que la Fondation Gates a observé cette dynamique de bond en avant dans le domaine de la santé des femmes, où les contraintes dans des contextes à ressources limitées forcent l'innovation, laquelle est ensuite applicable plus largement .
La santé des femmes doit devenir une priorité politique
Arg. 5Speaker 1 soutient que faire de la santé des femmes un enjeu politique — en exigeant que les responsables politiques l'inscrivent à leur programme et en soutenant les groupes de plaidoyer — est essentiel pour créer les incitations réglementaires et financières nécessaires à un changement systémique. Sans volonté politique, les blocages structurels dans le domaine des soins de santé et de l'innovation pharmaceutique ne pourront pas être surmontés.
Elle a cité la hausse des coûts de l'assurance maladie en Suisse et aux États-Unis comme exemples illustrant le fait que la santé des femmes est devenue une crise du coût de la vie que les responsables politiques doivent impérativement traiter . Elle a souligné l'émergence aux États-Unis d'un comité d'action politique dédié au lobbying en faveur de la santé des femmes, faisant valoir que celle-ci mérite le même plaidoyer politique organisé que les autres groupes d'intérêt . Elle a soutenu que, les gouvernements étant les principaux acheteurs pour l'industrie pharmaceutique, les incitations politiques et la réglementation constituent le levier de changement le plus puissant .
on: Des solutions systémiques et multipartites sont nécessaires, car aucun acteur seul ne peut résoudre le problème
Les célébrités et la narration sur les réseaux sociaux comme outils de plaidoyer
Arg. 6Le plaidoyer par le biais de témoignages de célébrités et des réseaux sociaux a déjà permis de faire progresser la prise en charge de certaines pathologies, comme l'endométriose et la ménopause, en démontrant que ces problèmes touchent les femmes indépendamment de leur richesse ou de leur statut. Amplifier des témoignages personnels variés demeure un outil essentiel pour sensibiliser le public et exercer une pression politique, notamment dans les contextes où les manifestations publiques ne sont pas envisageables.
Speaker 1 a cité des célébrités telles que Padma Lakshmi et Oprah, qui se sont exprimées publiquement sur l'endométriose et la ménopause respectivement, soulignant que leur visibilité a contribué à montrer que ces pathologies touchent les femmes quelle que soit leur aisance financière ou leur notoriété . Elle a soutenu que les réseaux sociaux ont joué un rôle déterminant dans l'évolution de la perception des problèmes de santé des femmes, passant de problèmes individuels à des enjeux collectifs, et qu'encourager les personnes à partager leurs témoignages constitue un premier pilier essentiel du plaidoyer .
on: La question de savoir si inonder Internet de représentations positives des femmes constitue une stratégie de plaidoyer efficace
Les modèles d'IA reproduisent les stéréotypes de genre dans leurs réponses
Arg. 1Les chatbots d'IA répondent de manière plus logique aux utilisateurs se présentant comme des hommes et de manière plus émotionnelle à ceux se présentant comme des femmes, reflétant ainsi les stéréotypes de genre issus du contenu internet. Cela a conduit à la circulation de conseils en ligne — notamment en Chine — encourageant les femmes à dissimuler leur genre lorsqu'elles interagissent avec l'IA afin d'obtenir des réponses plus rationnelles.
Audience Member 1 a décrit une publication circulant sur internet en Chine conseillant aux filles de cacher leur genre lorsqu'elles s'adressent à une IA, car celle-ci répond de manière plus logique aux utilisateurs se présentant comme des hommes et de manière plus émotionnelle à ceux se présentant comme des femmes . Elle a demandé comment ce biais pourrait être modifié ou corrigé .
on: Les systèmes d'IA entraînés sur des données médicales et sociales biaisées perpétuent et amplifient les inégalités existantes à l'encontre des femmes
Les expériences de santé spécifiques aux femmes africaines négligées par la recherche
Arg. 1Audience Member 2 a partagé des observations issues de la Tanzanie suggérant que les générations précédentes de femmes africaines ne souffraient pas de symptômes ménopausiques sévères, soulevant ainsi la possibilité qu'une recherche ancrée dans des populations féminines diversifiées pourrait produire des résultats transformateurs. Elle a soutenu que fonder la recherche sur les populations réellement étudiées — y compris les femmes africaines — est indispensable.
Elle a souligné que sa grand-mère, sa mère et les femmes âgées de sa communauté n'avaient jamais souffert de symptômes ménopausiques sévères, et a suggéré qu'une recherche portant sur des femmes d'origine africaine pourrait permettre de comprendre pourquoi, au bénéfice potentiel des générations futures . Elle a également observé des changements générationnels dans la santé visuelle au sein de sa famille, laissant entendre qu'une recherche spécifique aux populations pourrait éclairer ces tendances .
on: La recherche médicale a systématiquement exclu les femmes, produisant des données biaisées qui nuisent aux résultats de santé des femmes
Les femmes doivent activement résister aux biais de genre dans l'IA et les corriger dans leurs interactions
Arg. 1Yipeng soutient que les femmes — en particulier les femmes est-asiatiques, qui font face à des stéréotypes culturels supplémentaires liés à la soumission — ne devraient pas accepter comme inévitables les résultats biaisés selon le genre produits par l'IA, mais devraient activement instruire les modèles d'IA à répondre de manière non stéréotypée. Elle encourage les femmes à intégrer des instructions permanentes dans leurs modèles d'IA précisant la manière dont elles souhaitent être traitées.
Elle s'est adressée spécifiquement à la questionneuse en tant que femme de couleur d'origine asiatique, soulignant que les femmes est-asiatiques sont particulièrement stéréotypées comme soumises et non conflictuelles dans les résultats produits par l'IA . Elle a recommandé d'intégrer des instructions explicites dans les invites adressées à l'IA - par exemple en indiquant qu'une réponse est « trop émotionnelle » et en demandant une réponse plus logique - et d'en faire une instruction permanente dans son modèle d'IA . Elle a exhorté les jeunes femmes est-asiatiques présentes dans la salle à ne pas accepter cela comme la norme à laquelle elles devraient se conformer .
Les indicateurs de santé en ligne du SMSI devraient imposer des données représentatives selon le genre
Arg. 1Speaker 2 propose d'utiliser les indicateurs de santé en ligne du SMSI comme mécanisme concret pour exiger des données d'entraînement représentatives selon le genre, avec l'OMS et l'UIT comme organes facilitateurs. L'intégration de cette exigence dans l'élaboration de normes internationales pourrait créer un effet en cascade de responsabilisation, entraînant des changements au sein des États membres et des organisations.
Speaker 2 a suggéré que l'indicateur de santé en ligne du SMSI pourrait être utilisé pour encourager les facilitateurs - l'OMS et l'UIT - à exiger une formation sur les données représentatives selon le genre, et que l'établissement d'une série d'indicateurs dans ce domaine pourrait commencer à induire des changements de manière progressive et en cascade . Elle a également évoqué la possibilité qu'un pays choisisse de montrer l'exemple en étant le premier à mettre en œuvre de telles normes, présentant cela comme une opportunité scientifique et de réputation .
Le plaidoyer en faveur des femmes dans les domaines de la technologie et de la santé n'a pas progressé à un rythme suffisant malgré des années de discussion
Arg. 1Audience Member 3 exprime sa frustration face au fait que, malgré cinq ans de discussions soutenues sur l'intégration des perspectives féminines dans le secteur technologique et pharmaceutique, les progrès n'ont pas été à la hauteur du volume des échanges et des efforts organisationnels déployés. Elle s'interroge sur les lacunes du plaidoyer et sur les actions concrètes qui pourraient accélérer le changement pour les générations futures.
Elle a souligné que ces cinq dernières années ont été marquées par de nombreuses discussions autour de l'intégration des femmes dans la technologie et des perspectives de santé féminine dans le secteur pharmaceutique, sans que l'on ait l'impression d'avancer au rythme souhaitable compte tenu du nombre de conversations et d'organisations impliquées . Elle a posé une question précise sur les lacunes du plaidoyer à l'approche de 2026 et sur ce qui pourrait être fait pour accélérer les choses afin que la prochaine génération ne rencontre pas les mêmes obstacles .
on: Les engagements et déclarations internationaux sur le genre et l'IA sont insuffisants sans actions concrètes et responsables
Les contraintes culturelles et politiques en Chine limitent les approches conventionnelles de sensibilisation aux problèmes de santé féminine tels que l'endométriose
Arg. 1Audience Member 4 souligne que si des campagnes de sensibilisation, telles que des marches, existent dans certains pays pour attirer l'attention sur des maladies comme l'endométriose, ces approches ne sont pas réalisables en Chine en raison des contraintes culturelles et politiques. Elle demande ce que les individus peuvent faire au quotidien pour dénoncer l'échec systémique des systèmes médicaux à répondre aux besoins des femmes.
Elle a noté qu'un événement de sensibilisation fin mars vise à promouvoir la prise de conscience autour de l'endométriose, mais qu'en Chine, organiser une marche ou un défilé pour attirer l'attention sur cette maladie ne fonctionne généralement pas de la même manière . Elle a demandé ce que les individus pourraient faire dans leur vie quotidienne pour attirer l'attention non seulement sur l'endométriose, mais aussi sur l'échec plus large du système médical à répondre aux besoins des femmes, et comment promouvoir le changement .
Graphe de connaissances de la session
Intervenants · Sujets · Arguments · Relations
L'ensemble des intervenants s'est accordé à reconnaître que la recherche médicale a été construite sur des corps masculins et des données masculines, engendrant une série de préjudices pour les femmes. Oriana Kraft a détaillé comment les animaux mâles sont cinq fois et demie plus nombreux que les femelles dans la recherche , et que les femmes ont été effectivement exclues des essais cliniques jusqu'en 1993 . Speaker 1 a souligné que même aux États-Unis, les données sur la mortalité maternelle ne sont pas suffisamment nuancées, notamment pour les femmes afro-américaines , et qu'un échantillon de parfois 20 à 30 personnes a été extrapolé à une population de 7 milliards . Audience Member 2, originaire de Tanzanie, a observé que sa grand-mère et sa mère n'avaient jamais souffert de symptômes ménopausiques sévères, laissant entendre qu'une recherche ancrée dans les expériences des femmes africaines pourrait produire des résultats transformateurs , renforçant ainsi le consensus selon lequel l'exclusion de populations féminines diversifiées de la recherche a causé des préjudices généralisés.
Différences biologiques entre les sexes ignorées dans la recherche
Résultats de santé défavorables pour les femmes en raison d'une recherche centrée sur les hommes
Données insuffisantes sur les femmes de couleur et les femmes du Sud global
Expériences de santé spécifiques aux femmes africaines négligées par la recherche
Un fort consensus s'est dégagé sur le fait que les systèmes d'IA ne se contentent pas de refléter les biais existants, mais les amplifient activement. Oriana Kraft a démontré qu'une IA entraînée sur des données non représentatives réduit la précision des diagnostics de 11,3 %, et que même l'IA explicable ne résout pas ce problème . Caitlin Kraft-Buchman a expliqué que l'apprentissage automatique récursif conduit à l'effacement progressif des populations les plus éloignées du centre privilégié . Yu Ping Chan a cité l'Indice des normes sociales de genre du PNUD, qui montre que près de 9 personnes sur 10 entretiennent au moins un préjugé envers les femmes , ce qui signifie que le substrat des données d'entraînement de l'IA est déjà fondamentalement biaisé. Audience Member 1 a décrit comment l'IA répond de manière plus logique aux utilisateurs se présentant comme des hommes et de manière plus émotionnelle à ceux se présentant comme des femmes , illustrant ainsi la façon dont ces biais se manifestent dans les interactions quotidiennes avec l'IA.
Les données d'entraînement biaisées réduisent la précision des diagnostics par IA
Les groupes marginalisés effacés par les moyennes de l'apprentissage automatique
Les biais liés aux normes sociales déjà intégrés dans les données d'entraînement de l'IA
Les modèles d'IA reproduisent les stéréotypes de genre dans leurs réponses
Plusieurs intervenants ont exprimé leur frustration face à l'écart persistant entre les engagements déclarés et les changements concrets. Yu Ping Chan a reconnu que la communauté internationale excelle dans la production de documents tels que la Déclaration de Hambourg et le Pacte numérique mondial, mais échoue systématiquement au stade de la mise en œuvre . Caitlin Kraft-Buchman a noté un large accord sur le fait que la correction des biais dans les données n'est pas véritablement possible et ne peut qu'atténuer les préjudices sans résoudre le problème sous-jacent . Audience Member 3 a exprimé directement la frustration partagée, notant que malgré cinq années de discussions soutenues sur l'intégration des perspectives féminines dans les domaines de la technologie et de la pharmacologie, les progrès n'ont pas été à la hauteur du volume des échanges .
Écart entre les engagements internationaux et les actions concrètes
La correction des biais dans les données existantes est insuffisante ; de nouvelles données sont nécessaires
Le plaidoyer en faveur des femmes dans les domaines de la technologie et de la santé n'a pas progressé à un rythme suffisant malgré des années de discussion
Les intervenants ont convenu que l'absence de données spécifiques aux femmes ne constitue pas seulement un héritage historique, mais représente un échec continu des systèmes actuels. Oriana Kraft a noté qu'il n'existe aucun formulaire standard dans les systèmes RH pour recueillir des informations sur la ménopause, le cycle menstruel ou l'expérience post-partum , et que des complications de grossesse telles que la prééclampsie augmentent le risque de maladies cardiovasculaires tout au long de la vie de deux à quatre fois, sans pour autant être systématiquement enregistrées . Speaker 1 a souligné que les données ne sont pas suffisamment nuancées pour tenir compte des femmes de couleur, citant en exemple le fait que l'ascendance sud-asiatique augmente le risque de certaines formes d'anémie, sans que cela soit intégré dans les protocoles de dépistage . Yu Ping Chan a mis en évidence un écart mondial de 10 à 15 % en matière de connectivité entre les femmes et les hommes, atteignant 30 à 40 % dans les pays en développement, ce qui signifie que les femmes sont déjà sous-représentées dans les données alimentant les systèmes numériques .
Les étapes de la vie féminine absentes de la collecte de données de santé
Les signaux du cycle menstruel non captés par les instruments médicaux actuels
Les complications de grossesse non reliées au suivi du risque cardiovasculaire à long terme
Données insuffisantes sur les femmes de couleur et les femmes du Sud global
La fracture numérique de genre aggrave les biais de l'IA dans les infrastructures
L'ensemble des intervenants a convergé vers l'idée que le problème est structurel et nécessite une action coordonnée entre les gouvernements, l'industrie, la société civile et les organisations internationales. Oriana Kraft a décrit comment les cliniciens, les entreprises pharmaceutiques et les gouvernements se renvoient mutuellement la responsabilité . Yu Ping Chan a proposé les exigences en matière de marchés publics comme mécanisme pratique, arguant qu'il est plus facile d'intégrer des exigences relatives aux données de genre dans les contrats avant leur signature que de les auditer après . Caitlin Kraft-Buchman a suggéré la représentativité comme norme scientifique et la création de modèles d'IA sectoriels construits de zéro . Speaker 1 a soutenu que, les gouvernements étant les principaux acheteurs de l'industrie pharmaceutique, les incitations politiques et la réglementation constituent le levier de changement le plus puissant .
Le cloisonnement du système de santé empêche une responsabilité collective
L'absence d'incitations gouvernementales freine l'innovation pharmaceutique pour les femmes
Écart entre les engagements internationaux et les actions concrètes
Les marchés publics comme outil pour imposer des exigences en matière de données ventilées par sexe
La santé des femmes doit devenir une priorité politique
Oriana Kraft et Caitlin Kraft-Buchman ont toutes deux estimé que le problème de l'IA biaisée dans le domaine de la santé ne peut être résolu en tentant de corriger les grands modèles de langage existants, et que la véritable solution réside dans la construction de nouveaux ensembles de données représentatifs et de modèles sectoriels spécifiques à partir de zéro. Oriana Kraft a démontré qu'une IA entraînée sur des données non représentatives réduit la précision diagnostique de 11,3 % et que même l'IA explicable ne résout pas ce problème , tandis que Caitlin Kraft-Buchman a affirmé que le débiaisage des données n'est pas véritablement possible et ne peut qu'atténuer les préjudices . Toutes deux ont désigné les modèles sectoriels plus petits et la collecte de données représentatives comme la voie à suivre , Oriana Kraft soulignant la collecte de données désagrégées par sexe imposée par les pays nordiques comme modèle réglementaire . Yu Ping Chan et Caitlin Kraft-Buchman ont toutes deux partagé l'idée que construire une infrastructure numérique publique sur des bases biaisées revient à ancrer les inégalités dans les systèmes, et que des mécanismes structurels proactifs sont nécessaires pour garantir la représentativité. Yu Ping Chan a soutenu que continuer à construire une infrastructure numérique publique sans combler les écarts de genre revient à intégrer des hypothèses biaisées dans les systèmes numériques , tandis que Caitlin Kraft-Buchman a décrit comment l'apprentissage automatique récursif efface progressivement les populations marginalisées . Toutes deux ont proposé des mécanismes d'application concrets : Yu Ping Chan par le biais d'exigences en matière de marchés publics et Caitlin Kraft-Buchman en faisant de la représentativité une norme scientifique . Oriana Kraft et Speaker 1 ont toutes deux partagé l'idée que de riches sources de données et d'informations sur la santé des femmes sont activement supprimées ou ignorées plutôt qu'exploitées. Oriana Kraft a noté que les femmes apportent des données issues d'objets connectés et de journaux de cycle à leurs consultations médicales, mais que ces informations sont largement ignorées, et que les startups femtech constatent que les femmes sont prêtes à faire don de leurs données, alors même que les grandes entreprises d'IA affirment manquer de données humaines récentes . Speaker 1 a souligné que le mot « vagin » est le terme le plus censuré sur internet et que des problèmes de santé tels que l'endométriose et le post-partum font l'objet d'un shadow-ban sur les réseaux sociaux, contrairement aux termes masculins équivalents , démontrant ainsi que des choix algorithmiques suppriment activement les informations relatives à la santé des femmes. Caitlin Kraft-Buchman et Yu Ping Chan ont toutes deux partagé une vision consistant à faire passer les femmes du statut de sujets passifs du développement à celui d'actrices actives de l'écosystème numérique, tout en reconnaissant le fossé persistant entre les engagements et les actes. Caitlin Kraft-Buchman a proposé de former les groupes de défense des droits des femmes pour qu'ils deviennent collecteurs, propriétaires, organisateurs et vendeurs de données , reliant cela à une vision plus large des femmes en tant que productrices d'informations et de technologies numériques . Yu Ping Chan a exprimé la même frustration face à l'écart entre les engagements sur le papier et les résultats concrets, notant que la communauté internationale échoue systématiquement au stade de la mise en œuvre , et a proposé les marchés publics comme mécanisme direct pour imposer le changement . Speaker 1 et Audience Member 4 ont tous deux abordé la question de la manière de défendre la santé des femmes dans des contextes où les manifestations publiques conventionnelles ne sont pas envisageables, convergeant vers les réseaux sociaux et les témoignages personnels comme outils essentiels. Audience Member 4 a noté qu'en Chine, organiser une marche ou un défilé pour attirer l'attention sur l'endométriose ne fonctionne généralement pas et a demandé ce que les individus pouvaient faire au quotidien. Speaker 1 a répondu que les réseaux sociaux ont joué un rôle déterminant dans le changement de perception des problèmes de santé des femmes, passant de problèmes individuels à des problèmes collectifs, et que encourager les gens à partager leurs témoignages constitue un premier pilier essentiel du plaidoyer , citant des célébrités telles que Padma Lakshmi et Oprah comme exemples de l'impact des récits personnels sur la sensibilisation . Yipeng et Speaker 1 ont tous deux convenu que les femmes ne devraient pas accepter passivement les résultats d'une IA biaisée selon le genre et qu'une meilleure prise de conscience des présupposés de l'IA est essentielle. Speaker 1 a soutenu que la compréhension des hypothèses que les modèles d'IA formulent sur leurs utilisateurs est très faible, et que dans des contextes à risque élevé tels que la santé et le droit, les citoyens devraient avoir le droit de savoir quelles hypothèses un modèle fait à leur sujet . Yipeng a complété ce propos en fournissant des conseils pratiques, recommandant aux femmes — en particulier aux femmes est-asiatiques — d'intégrer des instructions explicites dans leurs requêtes adressées à l'IA pour corriger les réponses stéréotypées et d'en faire une instruction permanente , exhortant les jeunes femmes asiatiques à ne pas accepter les comportements biaisés de l'IA comme une norme .
Alors que la discussion avait commencé en présentant le Sud global comme un contexte de désavantage accru et de pauvreté des données, un consensus inattendu a émergé autour de l'idée que les contraintes propres aux environnements à faibles ressources peuvent stimuler l'innovation, laquelle s'avère ensuite applicable dans le Nord global, inversant ainsi la direction habituelle du transfert de technologie. Speaker 1 a cité l'exemple d'un dispositif d'échographie à distance utilisable via un téléphone mobile, développé pour le Sud global, qui pourrait ensuite être applicable aux États-Unis ou dans d'autres zones rurales éloignées , notant que la Fondation Gates a observé cette dynamique de bond en avant . Caitlin Kraft-Buchman a prolongé cette réflexion en suggérant que des collègues africains ayant bien structuré leurs données pourraient les revendre au Nord, qui manque de données sur ses propres populations racialement diverses . Yu Ping Chan a ajouté que des États de petite taille dotés de technologies avancées pourraient collecter des données nuancées et exporter le modèle . Ce consensus était inattendu compte tenu du cadrage initial de la session, qui présentait le Sud global principalement comme un contexte de désavantage.
Un point de consensus inattendu a émergé autour du paradoxe suivant : les femmes sont activement disposées à faire don de leurs données de santé pour faire progresser la santé féminine, et pourtant cette riche source d'information est écartée au moment précis où les grandes entreprises d'IA déclarent manquer de données humaines fraîches. Oriana Kraft a souligné que les startups de la femtech constatent que les femmes sont prêtes à donner leurs données simplement pour bénéficier de meilleurs soins et contribuer à l'avancement de la santé féminine, mais que cette source de données est néanmoins rejetée . Elle a mis en lumière le paradoxe particulier que représente le fait que les grandes entreprises d'IA et les laboratoires de modèles affirment manquer de données humaines fraîches et avoir recours à des données synthétiques , lesquelles effacent elles-mêmes les signaux de santé féminins à chaque nouvelle itération de modèle . Caitlin Kraft-Buchman a renforcé ce point en proposant de former des groupes de défense des droits des femmes en tant que collectrices et propriétaires de données , suggérant que la solution au problème de rareté des données et au déficit de données de genre pourrait se trouver au même endroit.
Un consensus inattendu a émergé autour de la révélation que l'exclusion des animaux femelles de la recherche médicale - qui a eu de profondes répercussions sur la santé des femmes - ne relevait pas simplement d'un jugement de valeur, mais reposait sur une hypothèse scientifique manifestement erronée. Oriana Kraft a expliqué que les rongeurs femelles avaient été exclus au motif que leurs cycles hormonaux les rendaient trop complexes à étudier, mais qu'il s'avère en réalité que les souris mâles, avec leurs fluctuations de testostérone, sont moins prévisibles que les souris femelles, dont les cycles sont au moins réguliers . Speaker 1 a renforcé ce point en notant que l'ensemble du modèle basé sur un jeune homme blanc en bonne santé a été extrapolé à l'ensemble de la population, et que cette approche universelle ne fonctionne tout simplement pas . Le consensus selon lequel l'exclusion fondamentale était scientifiquement injustifiée - et pas seulement éthiquement problématique - constitue un point d'accord notable et quelque peu inattendu qui renforce les arguments en faveur d'une réforme.
Malgré l'accent initial de la session sur la sensibilisation et le plaidoyer, un consensus inattendu a émergé autour des marchés publics et des normes réglementaires comme mécanismes d'application plus pratiques et plus directs que les engagements volontaires ou les audits a posteriori. Yu Ping Chan a soutenu qu'il est plus facile d'exiger certaines conditions avant la signature d'un contrat que de contrôler la conformité après coup, et a proposé d'intégrer des exigences de données ventilées par genre dans les contrats de marchés publics gouvernementaux . Caitlin Kraft-Buchman a proposé la représentativité comme norme scientifique pouvant être intégrée dans des exigences spécifiques à chaque cas d'usage , en s'appuyant sur le principe d'égalité substantielle de la CEDAW . Oriana Kraft a cité la collecte obligatoire de données ventilées par sexe dans les registres nationaux des pays nordiques comme un modèle éprouvé . La convergence vers les marchés publics et les normes - plutôt que vers le plaidoyer ou la sensibilisation seuls - comme voie d'action la plus concrète était quelque peu inattendue compte tenu de la composition du panel.
La discussion a révélé un niveau de consensus remarquablement élevé entre des intervenants aux profils très divers - organisations de développement international, entrepreneurs en technologies de la santé, universitaires et membres du public venus de Chine, de Tanzanie et d'ailleurs. Tous les intervenants ont convenu que : (1) la recherche médicale a systématiquement exclu les femmes, produisant des données biaisées aux conséquences graves sur leur santé ; (2) les systèmes d'IA entraînés sur ces données biaisées perpétuent et amplifient les inégalités existantes ; (3) la collecte de données actuelle ne parvient pas à saisir les signaux de santé spécifiques aux femmes ni les différentes étapes de leur vie ; (4) les engagements internationaux ne se sont pas traduits en actions concrètes ; et (5) des solutions systémiques et multipartites sont nécessaires . Les intervenants ont également convergé vers plusieurs solutions proposées, notamment la collecte obligatoire de données ventilées par sexe , les exigences en matière de marchés publics , la représentativité comme norme scientifique , des modèles d'IA sectoriels construits de zéro , et l'autonomisation des femmes en tant que collectrices et propriétaires de données . Un consensus inattendu a émergé autour du potentiel de l'innovation du Sud global à éclairer le Nord global , du paradoxe que représente la volonté des femmes de donner leurs données alors que les entreprises d'IA se plaignent d'une pénurie de données , et de la supériorité pratique des marchés publics et des normes réglementaires sur les engagements volontaires .
Caitlin Kraft-Buchman a explicitement affirmé que le désaisonnement des jeux de données existants ne constitue pas une véritable solution, arguant qu'il ne peut qu'atténuer les préjudices sans résoudre le problème sous-jacent , et que la véritable voie à suivre réside dans la construction de nouveaux jeux de données représentatifs et de modèles sectoriels conçus de zéro . Oriana Kraft, tout en convenant que des données précises sont essentielles , s'est davantage concentrée sur la cascade de distorsions dans les données existantes et sur la nécessité de collecter de nouveaux types de données , sans rejeter explicitement le désaisonnement comme approche. Son cadrage impliquait que l'amélioration et l'élargissement de la collecte de données - plutôt que l'abandon des jeux de données existants - constituaient la solution principale, créant une légère tension avec le rejet plus catégorique du désaisonnement par Caitlin.
Le désaisonnement des données existantes est insuffisant ; de nouvelles données sont nécessaires
Les données d'entraînement biaisées réduisent la précision diagnostique de l'IA
Oriana Kraft a directement abordé et rejeté l'idée que l'IA explicable pourrait résoudre le problème des données d'entraînement biaisées, citant des preuves selon lesquelles même lorsque les modèles expliquent leur raisonnement, la précision diagnostique reste réduite de 11,3 % . Yu Ping Chan, tout en reconnaissant le problème des biais, n'a pas répondu à cette affirmation spécifique et s'est plutôt concentrée sur les mécanismes de marchés publics et de responsabilisation comme solutions, suggérant implicitement que les outils de gouvernance et de transparence - qui sont proches de l'explicabilité - pourraient faire partie de la solution. Cela représente une divergence dans le poids accordé par chaque intervenant aux solutions techniques par rapport aux solutions de gouvernance.
Les données d'entraînement biaisées réduisent la précision diagnostique de l'IA
Les normes sociales biaisées déjà intégrées dans les données d'entraînement de l'IA
Yu Ping Chan a reconnu que le secteur technologique a évité les quotas et les réglementations strictes, et a exprimé une véritable incertitude quant à la solution à apporter, tout en suggérant prudemment que des lignes directrices, des attentes et des exigences en matière de marchés publics pourraient constituer un point de départ . Oriana Kraft, s'appuyant sur ce point, a noté que le secteur technologique n'est pas très favorable aux quotas et aux mandats , mais a cité la concertation multipartite et les incitations gouvernementales - en particulier le modèle nordique de collecte obligatoire de données ventilées par sexe - comme un levier plus efficace . Bien que toutes deux aient été prudentes à l'égard des mandats, Oriana s'est davantage orientée vers les modèles réglementaires comme solutions éprouvées, tandis que Yu Ping Chan est restée plus incertaine et ouverte quant à la voie à suivre .
Écart entre les engagements internationaux et les actions concrètes
La fragmentation du système de santé empêche une responsabilisation collective
Speaker 1 a d'abord décrit l'idée d'inonder Internet de représentations positives des femmes comme quelque chose qui « est peut-être ou non la stratégie la plus efficace », mais qui offre au moins un sentiment d'agentivité . Elle s'est ensuite contredite en affirmant que cette approche est « malheureusement pas une solution », car le problème ne réside pas uniquement dans les données, mais aussi dans l'algorithme, et que la majorité des personnes qui façonnent les algorithmes font des suppositions sur les femmes . Cette tension interne au sein des propres contributions de Speaker 1 reflète un désaccord réel et non résolu quant à l'efficacité des stratégies de contenu participatif par rapport à une réforme structurelle des algorithmes.
La célébrité et la narration sur les réseaux sociaux comme outils de plaidoyer
La censure algorithmique de la terminologie relative à la santé des femmes en ligne
Une tension inattendue est apparue entre les conseils pragmatiques de Yipeng aux femmes à titre individuel - en particulier aux femmes d'Asie de l'Est - consistant à intégrer des instructions explicites dans leurs requêtes adressées à l'IA pour contrecarrer les biais de genre , et la critique structurelle plus large avancée par Speaker 1 et Caitlin Kraft-Buchman. Speaker 1 avait soutenu que l'inondation d'Internet de représentations positives est « malheureusement pas une solution », car le problème réside dans l'algorithme et dans les personnes qui le façonnent , tandis que Caitlin avait affirmé que la correction des biais n'est pas véritablement possible . La recommandation de Yipeng, bien qu'animée de bonnes intentions et culturellement sensible , fait implicitement peser la responsabilité de la correction sur les femmes individuellement plutôt que sur les systèmes et les institutions qui ont créé ces biais - une position en tension avec la critique structurelle qui a dominé le reste de la discussion. Ce désaccord était inattendu, car tous les intervenants semblaient partager une perspective féministe et systémique, tout en divergeant nettement sur la question de savoir si l'adaptation individuelle constitue une réponse intermédiaire acceptable.
Une divergence inattendue est apparue dans la manière dont le Sud global a été présenté en lien avec les données sur la santé des femmes. Yu Ping Chan, représentant le PNUD, a systématiquement décrit le Sud global comme un contexte de plus grande vulnérabilité et de sous-représentation, notant que le fossé numérique entre les genres atteint 30 à 40 % dans les pays en développement et s'interrogeant sur la manière dont les données tiennent compte des femmes de couleur issues de différents pays . Speaker 1, en revanche, a avancé l'argument inattendu selon lequel le Sud global pourrait en réalité dépasser par bonds le Nord global en matière d'innovation dans la santé des femmes, citant les observations de la Fondation Gates sur la technologie d'échographie mobile développée pour des contextes à ressources limitées, qui pourrait ensuite être appliquée aux États-Unis . Caitlin Kraft-Buchman a poussé cette idée plus loin, suggérant que les pays africains, dotés de populations diversifiées, pourraient revendre des données de santé au Nord global . Ce recadrage du Sud global en tant qu'innovateur potentiel et exportateur de données, plutôt que bénéficiaire de solutions, n'était pas anticipé compte tenu de l'orientation générale de la discussion autour de la sous-représentation et du désavantage.
Une divergence inattendue à trois voies est apparue concernant le principal levier de changement. Speaker 1 a soutenu que la santé des femmes doit devenir un enjeu politique exigeant que les responsables politiques l'inscrivent à leur programme, et que, les gouvernements étant les principaux acheteurs de l'industrie pharmaceutique, les incitations politiques et la réglementation constituent le levier le plus puissant . Caitlin Kraft-Buchman, en revanche, s'est concentrée sur l'établissement de la représentativité comme norme scientifique , formulant la solution en termes de normes scientifiques plutôt que de campagnes politiques. Yu Ping Chan a adopté une troisième position, mettant l'accent sur les mécanismes de marchés publics comme outil le plus direct et le plus pratique . Bien que ces positions ne soient pas mutuellement exclusives, les intervenants ne les ont pas explicitement conciliées, et la divergence était inattendue compte tenu du consensus apparent sur l'urgence du problème. Le désaccord implicite sur l'arène institutionnelle - politique, scientifique ou marchés publics - qui devrait mener le changement a des implications significatives pour la stratégie.
La discussion a fait apparaître un fort consensus sur le diagnostic - à savoir que les biais de genre sont profondément ancrés dans la recherche médicale, les données cliniques, les ensembles de données d'entraînement de l'IA et l'infrastructure numérique, avec de graves conséquences sur les résultats de santé des femmes à l'échelle mondiale . Les principaux points de désaccord portaient sur les solutions : la viabilité de la correction des biais dans les données existantes par rapport à la constitution de nouveaux ensembles de données ; la question de savoir si l'adaptation comportementale individuelle ou la réforme structurelle constitue la réponse appropriée aux biais de genre dans l'IA ; si le plaidoyer politique , les normes scientifiques ou les mécanismes de marchés publics doivent être le principal moteur du changement ; et si le Sud global est principalement un bénéficiaire désavantagé ou un innovateur potentiel et un leader en matière de données . Une tension supplémentaire existait autour du rôle des quotas et des mandats, Yu Ping Chan et Oriana Kraft exprimant toutes deux une certaine prudence à l'égard des approches réglementaires, tout en désignant simultanément les modèles réglementaires nordiques comme les exemples les plus efficaces .
Les trois intervenantes principales ont convenu que des données représentatives du genre sont essentielles et qu'une forme de norme ou d'exigence contraignante est nécessaire. Caitlin Kraft-Buchman a proposé la représentativité comme norme scientifique , Yu Ping Chan a suggéré les exigences en matière de marchés publics comme mécanisme d'application pratique , et Oriana Kraft a cité la collecte de données désagrégées par sexe imposée par les pays nordiques comme modèle éprouvé . Cependant, elles ont divergé sur le mécanisme : Caitlin s'est concentrée sur les normes scientifiques et l'égalité substantielle fondée sur la CEDAW , Yu Ping Chan sur les contrats de marchés publics , et Oriana sur les incitations gouvernementales et la mobilisation multipartite . Elles partagent le même objectif, mais ont proposé différents leviers institutionnels pour l'atteindre.
La représentativité comme norme scientifique Les marchés publics comme outil pour imposer des exigences en matière de données ventilées par genre La collecte obligatoire de données ventilées par sexe comme modèle réglementaire
Caitlin Kraft-Buchman et Yu Ping Chan ont toutes deux convenu que le fossé entre les engagements internationaux et les actions concrètes constitue le défi central , et que la traduction de documents tels que la Déclaration de Hambourg en résultats tangibles est extrêmement difficile. Caitlin a désigné les modèles de langage sectoriels plus petits comme une voie technique à suivre , tandis que Yu Ping Chan s'est concentrée sur les mécanismes de marchés publics et de responsabilisation . Toutes deux ont convenu de l'urgence du problème et de l'insuffisance des approches existantes, mais ont divergé sur la question de savoir si la solution principale est d'ordre technique (nouvelles architectures de modèles) ou de gouvernance (marchés publics et normes).
Les modèles d'IA sectoriels fondés sur des données représentatives comme solution L'écart entre les engagements internationaux et les actions concrètes
Oriana Kraft et Speaker 1 ont toutes deux convenu que le problème des données ne se limite pas au sexe, mais nécessite une stratification continue par ethnicité, étape de vie et zone géographique . Oriana Kraft a décrit la nécessité de stratifier au-delà du sexe pour tenir compte de la ménopause, de l'ethnicité et des étapes de vie , tandis que Speaker 1 a souligné que les femmes de couleur et les femmes du Sud global sont particulièrement mal desservies . Toutes deux ont convenu qu'un modèle universel extrapolé à partir d'un jeune homme blanc en bonne santé est inadéquat , mais Speaker 1 a davantage mis l'accent sur la dimension du Sud global , tandis qu'Oriana s'est davantage concentrée sur les mécanismes de collecte de données biologiques et cliniques .
La cascade de diagnostics erronés due à l'absence de recommandations cliniques axées sur les femmes Données insuffisantes sur les femmes de couleur et les femmes du Sud global
Les deux intervenantes ont convenu que les femmes doivent passer du statut de sujets passifs de la collecte de données à celui de participantes actives dans les systèmes numériques. Yu Ping Chan a mis en évidence le fossé numérique entre les sexes comme une barrière structurelle , tandis que Caitlin Kraft-Buchman a proposé l'idée concrète de former des groupes de défense des droits des femmes pour qu'ils deviennent collecteurs, propriétaires et vendeurs de données . Toutes deux s'accordent sur l'objectif — les femmes en tant que productrices d'information numérique — mais diffèrent dans leur approche : Yu Ping Chan s'est concentrée sur le problème structurel de la sous-représentation , tandis que Caitlin a mis l'accent sur un programme d'action concret visant à autonomiser les femmes en tant que productrices de données .
Les femmes en tant que collectrices et propriétaires de données La fracture numérique de genre aggrave les biais de l'IA dans les infrastructures
Speaker 1 et Yipeng ont tous deux convenu que les femmes ne devraient pas accepter passivement les résultats d'une IA biaisée selon le genre. Speaker 1 a plaidé pour le droit des citoyens à savoir quelles hypothèses un modèle formule à leur sujet, en particulier dans des contextes à risque élevé , tandis que Yipeng a adopté une position plus immédiate et pragmatique, encourageant les femmes — en particulier les femmes est-asiatiques — à donner activement des instructions à leurs modèles d'IA pour qu'ils répondent différemment . Toutes deux ont convenu que l'acceptation des biais n'est pas la solution , mais Speaker 1 a formulé la réponse en termes de droits et de transparence systémique , tandis que Yipeng s'est concentrée sur le changement de comportement individuel au sein des systèmes existants .
Le grand public n'est pas conscient des suppositions que l'IA fait à son sujet Les femmes doivent activement résister à la discrimination de genre dans l'IA et la corriger dans leurs interactions
- Les différences biologiques entre les sexes existent dans chaque cellule du corps humain, pourtant la recherche médicale a historiquement été menée presque exclusivement sur des cellules, des animaux et des corps masculins, engendrant des défaillances systémiques dans les soins de santé des femmes en matière de diagnostic, de traitement et de résultats.
- Les femmes reçoivent un diagnostic en moyenne quatre ans plus tard que les hommes pour 770 maladies, ont 50 % plus de risques de mourir à la suite d'une crise cardiaque, et sont 50 à 75 % plus susceptibles de présenter des effets indésirables aux médicaments, en grande partie parce qu'elles ont été effectivement exclues des essais cliniques jusqu'en 1993.
- Les outils diagnostiques tels que les seuils de troponine et les technologies d'imagerie cardiovasculaire sont calibrés sur la physiologie masculine, ce qui entraîne la non-détection de 42 % des crises cardiaques chez les femmes et contribue à ce que des pathologies comme l'endométriose mettent en moyenne sept ans à être diagnostiquées.
- Les modèles d'IA entraînés sur des données médicales historiquement biaisées réduisent la précision diagnostique de 11,3 %, et l'IA explicable ne résout pas ce problème — des données précises et représentatives sont le prérequis indispensable à des algorithmes fiables.
- L'apprentissage automatique fonctionne sur des moyennes et un auto-apprentissage récursif, effaçant progressivement des résultats des modèles les populations les plus éloignées du centre privilégié, notamment les femmes, les communautés rurales et les personnes handicapées.
- L'Indice des normes sociales de genre du PNUD a révélé que près de 90 % des hommes comme des femmes entretiennent au moins un préjugé à l'égard des femmes, ce qui signifie que le substrat sur lequel sont construits les modèles d'IA encode déjà des biais inconscients, avec une décennie de stagnation dans les progrès accomplis.
- Un fossé numérique de genre mondial de 10 à 15 % en matière de connectivité et d'utilisation d'Internet, atteignant 30 à 40 % dans les pays en développement, signifie que la construction d'infrastructures numériques publiques sur des fondations biaisées ancre et aggrave les inégalités existantes.
- Les facteurs liés aux étapes de vie des femmes — notamment le cycle menstruel, la grossesse, le post-partum et la ménopause — ne sont pas pris en compte dans les dossiers médicaux électroniques ni dans les systèmes RH, bien qu'ils affectent profondément chaque organe du corps féminin.
- Les données synthétiques utilisées pour entraîner les modèles d'IA perdent progressivement les signaux aux extrémités des distributions, ce qui signifie que les femmes — déjà sous-représentées — voient leurs signaux de santé davantage effacés à chaque nouvelle itération de modèle.
- Les médecins femmes rédigent des notes deux fois plus détaillées que leurs homologues masculins, et les patientes apportent des données riches via des objets connectés et des journaux de cycle, mais ces informations sont largement ignorées plutôt que systématiquement collectées.
- Le système de santé est cloisonné par spécialité organique, les cliniciens, les entreprises pharmaceutiques et les gouvernements se renvoyant mutuellement la responsabilité plutôt que d'assumer une responsabilité collective face aux lacunes en matière de santé des femmes.
- Malgré de nombreux documents internationaux — notamment le SMSI, le Pacte numérique mondial et la Déclaration de Hambourg — la traduction des engagements sur le papier en actions concrètes et responsables demeure le défi central non résolu.
- Il n'est pas véritablement possible de supprimer les biais des données existantes ; les mesures d'atténuation peuvent réduire les préjudices, mais ne peuvent pas résoudre le problème, ce qui souligne la nécessité de constituer de nouveaux ensembles de données représentatifs et des modèles d'IA sectoriels à partir de zéro.
- Les chatbots d'IA répondent de manière plus logique aux utilisateurs se présentant comme des hommes et de manière plus émotionnelle à ceux se présentant comme des femmes, reflétant les stéréotypes collectés sur Internet, et les femmes sont déjà encouragées à dissimuler leur genre lors de l'utilisation de l'IA.
- Le mot « vagin » et des pathologies telles que l'endométriose et le post-partum font l'objet d'un shadow-ban sur les plateformes de réseaux sociaux, alors que les termes masculins équivalents ne le sont pas, démontrant un biais algorithmique à l'encontre du contenu relatif à la santé des femmes.
- La recherche sur les femmes de couleur et les femmes du Sud global est encore moins nuancée, les facteurs de risque spécifiques à certaines ethnies n'étant pas intégrés dans les protocoles de dépistage, et les femmes afro-américaines étant confrontées à des taux de mortalité maternelle disproportionnellement élevés.
- Les technologies développées sous contraintes de ressources dans le Sud global — comme l'échographie à distance par téléphone mobile — peuvent dépasser les infrastructures traditionnelles et être réexportées vers le Nord global, inversant ainsi la direction habituelle de l'innovation.
“Il existe des différences biologiques entre les sexes dans chaque cellule du corps humain, ce qui signifie que le fonctionnement de chaque organe diffère fondamentalement entre les hommes et les femmes. Pourtant, nous n'avons véritablement étudié que les hommes... Nous étudions des cellules mâles. Nous étudions des animaux mâles, comme des souris. Nous n'utilisons même pas de rongeurs femelles. Et nous n'avons véritablement étudié que les hommes — généralement des hommes blancs en bonne santé pesant environ 70 kilogrammes.”
“Une IA entraînée sur des données non représentatives réduit la précision diagnostique de 11,3 %... les médecins continueront à réduire la précision de 11,3 %. Il faut donc des données précises pour obtenir des algorithmes précis. Et puis... à chaque fois qu'on entraîne un nouveau modèle, il perd en quelque sorte les signaux aux extrémités du cycle. Ainsi, les femmes ne sont pas rares dans la réalité, mais elles sont sous-représentées dans les données. Si bien qu'à chaque entraînement, ce signal se perd.”
“Le PNUD a réalisé un indice des normes sociales de genre en 2023, dans lequel nous avons interrogé 80 pays représentant 85 % de la population mondiale, et nous avons constaté que près de 9 personnes sur 10 — 90 % des hommes et 87 % des femmes — entretiennent au moins un préjugé à l'égard des femmes, et que la progression sur ce point stagne depuis une décennie. Les données elles-mêmes reposent donc sur un substrat d'hypothèses déjà ancrées concernant les hommes et les femmes.”
“Franchement, je ne suis pas vraiment sûre de la façon de résoudre ce problème autrement qu'en continuant à attirer l'attention sur ce fait... Je sais qu'il y a eu des résistances à l'égard des quotas ou de réglementations très strictes... et dans le milieu technologique, je sais que nous avons eu tendance à fuir ce type de mesures, mais pour être tout à fait honnête et franche, je ne sais pas vraiment quelle est la solution.”
“Nous nous sommes tous engagés en faveur de ces objectifs, mais quelle est la prochaine étape pour parvenir à des résultats concrets et à des aspects précis sur lesquels on peut tenir les acteurs responsables... Les marchés publics me semblent être, sinon une solution facile, du moins un moyen direct d'exiger des entreprises, des développeurs et des fournisseurs de technologies de s'assurer que cela fait au moins partie de ce que nous faisons.”
“Les femmes arrivent chez les médecins avec leurs Oura rings, leurs journaux de cycle, leurs notes manuscrites — et où vont toutes ces informations ?... Les femmes sont prêtes à partager leurs données simplement pour bénéficier de meilleurs soins... Ce n'est donc pas que les gens refusent de participer. Ils le font. C'est simplement que nous ignorons cette source de données incroyablement riche, ce qui est quelque peu ironique quand on sait que toutes les grandes entreprises d'IA et les laboratoires de modèles affirment manquer de données humaines fraîches.”
“Les technologies permettent de franchir des étapes... si l'on prend cet échographe à distance utilisable avec un téléphone mobile, on n'a pas besoin d'un médecin... il a en réalité été développé pour le Sud global, mais pourrait ensuite être applicable aux États-Unis ou dans d'autres zones rurales éloignées. D'une certaine manière, les contraintes qui vous poussent à innover dans un contexte à ressources limitées génèrent des innovations qui pourraient ensuite être applicables également dans le Nord. On pourrait en réalité innover pour le Sud, puis extrapoler ces innovations vers le Nord.”
“J'ai vu sur internet en Chine un post qui apprenait aux filles à cacher leur genre lorsqu'elles parlent à une IA, car si vous vous comportez comme un homme, l'IA sera plus logique, mais si vous êtes une femme, l'IA sera plus émotionnelle.”
“Je souhaite également répondre spécifiquement à cela, car vous êtes manifestement originaire de Chine, une femme de couleur d'origine asiatique, et dans notre appartenance ethnique, nous sommes particulièrement perçues comme moins affirmées, soumises, avec une tendance à ne pas contester et à éviter les confrontations. Alors quand vous avez demandé si nous devons vivre avec ça, je veux vraiment vous dire que non... Écrivez dans vos instructions que cette réponse que vous avez rédigée est trop émotionnelle. Je veux une réponse plus logique. Faites-en une instruction permanente dans votre modèle d'IA.”
“Ma grand-mère, ma mère et les anciennes n'ont jamais souffert de symptômes de la ménopause... si les chercheurs s'étaient appuyés sur des femmes d'origine afro-américaine, ils auraient peut-être découvert pourquoi certaines personnes ne souffrent pas de symptômes ménopausiques plus sévères, et cela aurait peut-être pu aider même notre génération.”
Comment peut-on efficacement débiaisé les données médicales existantes, ou la construction de nouveaux ensembles de données de zéro est-elle la seule solution viable ?
Le consensus actuel est que la correction des biais dans les données existantes n'est pas entièrement possible, seulement atténuable. Déterminer si de nouveaux ensembles de données conçus à cet effet constituent le seul véritable remède est essentiel pour orienter les ressources et les efforts politiques dans le domaine des soins de santé pilotés par l'IA.
La « représentativité » pourrait-elle être établie comme une norme scientifique formelle pour les données d'entraînement de l'IA, et comment une telle norme serait-elle définie et appliquée dans différents cas d'usage ?
Établir la représentativité comme norme scientifique pourrait fournir un critère concret et applicable pour garantir que les modèles d'IA reflètent les populations qu'ils servent, en particulier pour les applications à haut risque dans les domaines de la santé et du droit.
Comment les engagements internationaux tels que la Déclaration de Hambourg sur l'IA responsable pour les ODD peuvent-ils être traduits en actions concrètes et responsables, plutôt que de rester de simples documents ?
Il existe un écart reconnu entre les déclarations de haut niveau et l'impact concret. Identifier des mécanismes permettant d'assurer ou d'inciter le suivi est essentiel pour que tout cadre international puisse traiter de manière significative le biais de genre dans l'IA.
Les exigences en matière de marchés publics gouvernementaux pourraient-elles être utilisées pour imposer des données ventilées par genre et stratifiées par sexe de la part des fournisseurs d'IA et de technologies avant la signature des contrats ?
Les marchés publics sont identifiés comme un levier potentiellement direct pour exiger des entreprises technologiques une responsabilité en matière de genre. Explorer leur faisabilité et leur portée pourrait offrir une voie pratique pour intégrer des normes de genre dans le développement de l'IA.
Dans quelle mesure les données de santé existantes tiennent-elles compte des femmes de couleur, et en particulier des femmes de couleur du Sud global, y compris les différences linguistiques et culturelles ?
Les ensembles de données actuels sont largement construits à partir de données issues de populations occidentales blanches. Comprendre l'ampleur de ce déficit pour les femmes de couleur à l'échelle mondiale est essentiel pour concevoir des systèmes d'IA de santé inclusifs et éviter d'aggraver les inégalités existantes.
Pourquoi certaines populations, comme les femmes d'origine africaine, semblent-elles vivre certaines pathologies telles que les symptômes de la ménopause différemment, et qu'est-ce que cela peut nous apprendre sur une recherche en santé plus nuancée et spécifique aux populations ?
Les différences observées dans la présentation des symptômes selon les groupes ethniques suggèrent l'existence de connaissances scientifiques significatives encore inexploitées. L'étude de ces variations pourrait conduire à des traitements mieux ciblés et remettre en question le modèle universel qui domine actuellement la médecine.
Comment les données relatives aux étapes de vie des femmes — notamment le cycle menstruel, la grossesse, le post-partum et la ménopause — peuvent-elles être systématiquement intégrées dans les dossiers de santé électroniques et les systèmes cliniques ?
Ces étapes de la vie affectent profondément chaque système organique du corps féminin et interagissent avec les réponses aux médicaments, les risques de maladie et la fonction immunitaire, mais elles sont presque entièrement absentes des infrastructures actuelles de collecte de données, ce qui représente une lacune majeure dans les données d'entraînement de l'IA médicale.
Comment les données générées par les patients, telles que les journaux de cycle, les données des appareils portables et les notes de santé personnelles, peuvent-elles être formellement intégrées dans les ensembles de données cliniques et d'entraînement de l'IA ?
Les femmes génèrent déjà des données de santé riches et détaillées grâce à des outils de suivi personnels, mais ces informations sont largement ignorées par le système médical. Les collecter et les exploiter pourrait améliorer considérablement la précision des modèles d'IA et remédier à la pénurie de données dans le domaine de la santé des femmes.
Quelles incitations financières ou réglementaires pourraient encourager une collecte de données plus nuancée et détaillée de la part des cliniciens, en particulier des médecins femmes dont les notes se sont révélées nettement plus détaillées ?
Des données indiquent que les médecins femmes produisent des notes cliniques plus riches, mais il n'existe aucune incitation systémique à une saisie détaillée des données. Concevoir de telles incitations pourrait améliorer la qualité des données d'entraînement pour les modèles d'IA en santé.
Les innovations en technologie de santé développées pour les contextes à ressources limitées dans les pays du Sud — comme l'échographie mobile — pourraient-elles être adaptées et appliquées dans les pays du Nord, inversant ainsi la direction habituelle du transfert de technologie ?
Les contraintes de ressources dans le Sud global stimulent le développement de technologies de santé innovantes et moins coûteuses. Explorer la possibilité de les adopter plus largement pourrait à la fois améliorer l'équité en santé mondiale et offrir des modèles commercialement viables pour les populations mal desservies partout dans le monde.
Les petites nations ou celles disposant de données abondantes pourraient-elles jouer un rôle de pionnières dans la collecte de données de santé complètes, nuancées et diversifiées, qui pourraient ensuite être exportées ou cédées sous licence à d'autres pays ?
Il existe une opportunité économique et scientifique potentielle pour les nations dotées d'une infrastructure numérique solide de prendre la tête de la collecte de données de santé diversifiées. Cela pourrait déclencher une « course aux données de santé » qui inciterait à de meilleures pratiques en matière de données à l'échelle mondiale et générerait des revenus pour les pays participants.
Comment les organisations de défense des droits des femmes et les groupes communautaires peuvent-ils être formés et habilités à devenir collecteurs, propriétaires et gestionnaires de données, notamment dans les domaines de la santé et de l'intégrité de l'information ?
Faire passer les femmes du statut de sujets passifs de la collecte de données à celui de productrices et propriétaires actives de données pourrait combler les lacunes en matière de représentativité, renforcer les capacités locales et créer de nouvelles opportunités économiques, notamment dans les communautés mal desservies.
Quels mécanismes peuvent être mis en place pour donner aux individus — en particulier dans les contextes d'IA à haut risque tels que la santé et le droit — le droit de savoir quelles hypothèses un modèle d'IA formule à leur sujet ?
Les modèles d'IA formulent actuellement des hypothèses opaques fondées sur des données biaisées, notamment des hypothèses liées au genre, au revenu et à l'ethnicité. L'établissement de droits à la transparence permettrait d'autonomiser les individus et de responsabiliser les développeurs de modèles.
Pourquoi les termes liés à la santé associés à la biologie féminine — tels qu'« endométriose », « post-partum » et « vagin » — font-ils l'objet d'un shadow-ban ou d'une censure disproportionnée sur les réseaux sociaux et les plateformes internet, et que peut-on faire pour y remédier ?
La censure de la terminologie relative à la santé féminine en ligne réduit la sensibilisation du public, limite les communautés de patients et contribue à la sous-représentation des sujets de santé des femmes dans les données utilisées pour entraîner les grands modèles de langage.
Comment les modèles d'IA peuvent-ils être orientés ou instruits par les utilisateurs afin d'éviter des réponses biaisées selon le genre, et quels changements structurels à long terme sont nécessaires pour que les utilisateurs — en particulier les femmes asiatiques — n'aient pas à contourner des biais intégrés ?
L'observation selon laquelle l'IA répond de manière plus « logique » lorsqu'un utilisateur se présente comme étant de sexe masculin révèle des stéréotypes de genre profondément ancrés dans l'entraînement des modèles. Si des contournements au niveau des instructions offrent un soulagement à court terme, des solutions structurelles sont nécessaires pour s'attaquer à la cause profonde.
Quelles stratégies de plaidoyer spécifiques sont les plus efficaces en 2025-2026 pour accélérer les progrès en matière de représentation de la santé des femmes dans la recherche en IA et en pharmacologie, compte tenu de la stagnation des avancées malgré des années de discussions ?
Malgré des années de plaidoyer intensif, le rythme du changement reste lent. Il est essentiel d'identifier quelles approches de plaidoyer — politiques, réglementaires, financières ou culturelles — sont les plus susceptibles de produire des résultats mesurables, afin d'orienter les efforts futurs.
Comment les femmes dans les pays où les manifestations publiques sont restreintes, comme la Chine, peuvent-elles plaider efficacement pour une meilleure représentation des problèmes de santé féminins dans la recherche médicale et les systèmes d'IA ?
Les formes traditionnelles de plaidoyer public, telles que les marches, ne sont pas viables dans tous les contextes politiques. Il est indispensable d'identifier des alternatives culturellement appropriées et politiquement réalisables pour garantir que le plaidoyer en faveur de la santé des femmes soit véritablement inclusif à l'échelle mondiale.
Les indicateurs e-santé du SMSI pourraient-ils être mis à jour pour inclure des exigences relatives à des données d'entraînement représentatives du genre, et comment pourrait-on encourager l'OMS et l'UIT à adopter de telles normes ?
Les indicateurs WSIS ont un poids international considérable et influencent les stratégies nationales de santé numérique. Intégrer des exigences en matière de données ventilées par genre dans ces indicateurs pourrait produire un effet en cascade sur la manière dont les pays et les organisations abordent le développement de l'IA en santé.
Quel est le coût économique total pour les systèmes de santé et les économies nationales du fait de ne pas inclure suffisamment les femmes dans la recherche médicale et les modèles de santé basés sur l'IA, notamment compte tenu du fait que la mauvaise santé des femmes affecte de manière disproportionnée leurs années de vie ?
Quantifier le coût économique des recherches en santé biaisées selon le genre pourrait constituer un argument financier convaincant pour inciter les gouvernements et le secteur privé à investir dans des mesures correctives, en complément des arguments moraux et scientifiques existants.
Comment l'utilisation de données synthétiques dans l'entraînement des modèles d'IA érode-t-elle davantage la représentation déjà insuffisante des femmes, et quelles mesures de protection peuvent être introduites pour éviter la perte de signaux provenant de groupes sous-représentés lors du réentraînement des modèles ?
Chaque itération d'entraînement sur des données synthétiques risque de marginaliser davantage des groupes déjà sous-représentés, tels que les femmes. Comprendre et atténuer cet effet cumulatif est crucial, alors que les laboratoires d'IA s'appuient de plus en plus sur des données synthétiques en raison du manque de données humaines réelles.
