Thematic discussion 4: Respecting, protecting and promoting human rights - Global Dialogue on Artificial Intelligence Governance - Day 2
Résumé
Cette discussion, convoquée par le HCDH et la Banque mondiale dans le cadre d'un Dialogue mondial de l'ONU sur la gouvernance de l'IA, s'est concentrée sur l'intersection entre l'intelligence artificielle, les droits humains, la transparence, la responsabilité et la supervision humaine. Le Haut-Commissaire Volker Türk a ouvert les débats en établissant un parallèle entre le déploiement de l'IA et la réglementation pharmaceutique, s'interrogeant sur la rigueur avec laquelle l'IA est traitée , et avertissant que l'IA alimente déjà la surveillance de masse, la désinformation et les biais fondés sur le genre . Il a soutenu que le droit international des droits humains fournit un cadre contraignant pour gouverner l'IA et que la réglementation ne doit pas être perçue comme un obstacle à l'innovation, mais plutôt comme le fondement de la confiance publique .
Les panélistes du premier panel ont mis en lumière les dimensions genrées des préjudices causés par l'IA : Sima Bahous a noté que 44 % des systèmes d'IA évalués présentent des biais de genre et que jusqu'à 99 % des hypertrucages (deepfakes) en ligne ciblent des femmes . Samuel Arias Arzeno a souligné que les systèmes judiciaires doivent être renforcés pour traduire les principes des droits humains en recours effectifs , tandis qu'Amal El Fallah Seghrouchni a soulevé le défi particulier de la responsabilité dans les systèmes d'IA agentiques comportant des milliards de paramètres, où la responsabilité causale est extrêmement difficile à établir . Sonia Livingstone a présenté les données du panel scientifique faisant état d'une multiplication des violations des droits humains, notamment une augmentation exponentielle des contenus pédopornographiques générés par l'IA et des défaillances systématiques des modèles d'IA en matière de sécurité dans les environnements destinés aux enfants .
Le deuxième panel a examiné des solutions concrètes et l'inclusion des voix marginalisées. Nighat Dad a soutenu que la diligence raisonnable en matière de droits humains est appliquée de manière inégale selon les marchés, des évaluations significatives n'étant menées que là où le droit de l'UE l'exige, créant ainsi un régime de droits à deux vitesses déterminé par la géographie . Alvitta Ottley a identifié un « décalage d'évaluation », notant que les indicateurs d'ingénierie tels que la vitesse et la précision ne correspondent pas aux questions sociétales relatives à la protection des droits humains . Felipe Paullier a souligné que les jeunes sont les utilisateurs les plus actifs de l'IA, mais qu'ils ne participent presque jamais aux prises de décision, et a appelé à leur inclusion significative dans les cadres nationaux de gouvernance de l'IA .
Les interventions du public, émanant de gouvernements et de la société civile, ont renforcé ces thèmes. Le Brésil a présenté son Statut numérique pour les enfants et les adolescents, qui impose des mesures de protection de l'enfance dès la phase de conception , tandis que la Pologne et la République de Corée ont souligné la nécessité de stratégies nationales d'IA centrées sur l'humain et de cadres juridiques contraignants . Des représentants de la société civile, notamment d'AccessNow, de l'ICNL et de la Digital Rights Foundation, ont appelé à l'établissement de lignes rouges pour l'IA, à des évaluations obligatoires de l'impact sur les droits humains, et au financement des organisations de la société civile du Sud global en tant que systèmes d'alerte précoce face aux préjudices liés à l'IA .
La discussion s'est conclue par un large consensus selon lequel la gouvernance de l'IA doit intégrer les droits humains dès la phase de conception, garantir la responsabilité tout au long du cycle de vie de l'IA, et inclure de manière significative les enfants, les femmes et les communautés du Sud global - non pas simplement en tant que sujets de protection, mais en tant que participants actifs à l'élaboration de la technologie qui gouverne de plus en plus leurs vies .
Points clés
Objectif général
La discussion est un dialogue mondial convoqué par l'ONU sur la gouvernance de l'IA, co-dirigé par le HCDH et la Banque mondiale, réunissant des gouvernements, des organisations internationales, la société civile et des experts techniques afin d'examiner comment l'intelligence artificielle peut être développée, déployée et réglementée de manière conforme au droit international des droits humains. La session vise à identifier des cadres de gouvernance concrets, des mécanismes de responsabilité et des garanties - en particulier pour les groupes vulnérables tels que les femmes, les enfants et les communautés du Sud global - et à créer une dynamique en faveur d'une réglementation de l'IA contraignante et centrée sur les droits humains.
---
Principaux points de discussion
- La nécessité urgente d'une réglementation de l'IA fondée sur les droits humains, par analogie avec d'autres secteurs réglementés. Plusieurs intervenants ont soutenu que l'IA doit être soumise à la même surveillance rigoureuse que celle appliquée aux médicaments, aux véhicules et aux aéronefs. Le Haut-Commissaire aux droits de l'homme, Volker Türk, a ouvert les débats en demandant si la société accorde à l'IA le même soin qu'aux nouveaux médicaments, lesquels font l'objet de 10 à 15 ans d'essais cliniques avant leur autorisation de mise sur le marché . Il a averti que l'IA est déployée « à une vitesse vertigineuse » et alimente déjà la surveillance de masse, la désinformation et les biais de genre . Il a soutenu qu'une réglementation guidée par les droits humains est « la solution la plus évidente » et que la présenter comme un compromis avec l'innovation est un faux choix . Ce thème a été repris par Sima Bahous d'ONU Femmes , par le représentant de l'IDLO Mark Cassayre , et par la ministre irlandaise Niamh Smyth .
- Les préjudices genrés et intersectionnels causés par l'IA, et les lacunes en matière de responsabilité qui permettent leur persistance. Les intervenants ont présenté de nombreuses preuves que l'IA nuit de manière disproportionnée aux femmes, aux filles et aux communautés marginalisées. Les recherches d'ONU Femmes ont révélé que 44 % des systèmes d'IA évalués présentent des biais de genre, et que près d'une femme défenseure des droits humains sur quatre interrogées avait subi des violences en ligne assistées par l'IA . Jusqu'à 99 % des hypertrucages et des images sexuelles manipulées en ligne ciblent des femmes . Nighat Dad de la Digital Rights Foundation a souligné que la diligence raisonnable en matière de droits humains est appliquée de manière inégale selon les marchés - des évaluations significatives n'ont lieu que là où la loi l'exige (principalement dans l'UE), tandis que les mêmes systèmes sont déployés dans le Sud global sans contrôle équivalent . Elle a appelé à des évaluations obligatoires de l'impact sur les droits des femmes et des enfants, menées avant le déploiement, avec la participation des communautés concernées . Esther Eghobamien-Mshelia du Comité CEDAW a réaffirmé que la CEDAW constitue un cadre essentiel obligeant les États à parvenir à l'égalité substantielle et à s'attaquer aux obstacles structurels renforcés par l'IA .
- La vulnérabilité particulière des enfants dans les environnements médiatisés par l'IA et l'insuffisance des protections actuelles. Les droits de l'enfant ont constitué une préoccupation transversale tout au long de la session. Sonia Livingstone du Panel scientifique indépendant a rapporté que, dans 11 pays du Sud global, jusqu'à un enfant par classe a déclaré que l'IA avait été utilisée pour créer des hypertrucages sexuellement explicites le représentant, et que les signalements de contenus pédopornographiques générés par l'IA augmentent de façon exponentielle . Les évaluations des risques menées par Stanford sur les compagnons IA ont révélé que ces produits ne satisfont pas aux normes de sécurité de base . Jhalak M. Kakkar a insisté sur le fait que les systèmes d'IA doivent être conçus avec la sécurité des enfants intégrée dès le départ, et non ajoutée après coup , et a soulevé la question de l'impact d'une surveillance constante sur le développement des enfants en tant que citoyens démocratiques . Isabella Henriques, s'exprimant au nom de plus de 120 signataires d'une déclaration commune de la société civile, a appelé à ce que les droits de l'enfant constituent une considération transversale dans tous les cadres de gouvernance de l'IA .
- Les lacunes en matière de responsabilité dans les systèmes d'IA agentiques et le défi d'attribuer la responsabilité dans des chaînes multi-agents complexes. Plusieurs panélistes ont identifié l'IA agentique - des systèmes dans lesquels des réseaux d'agents autonomes agissent sans instruction humaine directe - comme le défi juridique et de gouvernance émergent le plus significatif. Amal El Fallah Seghrouchni du Maroc a décrit le problème central : lorsqu'un réseau d'agents IA produit un résultat préjudiciable, il est difficile de déterminer quel agent est responsable et comment la responsabilité doit être répartie . Elle a proposé trois obligations : une documentation structurée des chaînes d'agents, la désignation d'un responsable humain identifiable pour les questions relatives aux droits, et un droit à réparation dans un délai raisonnable . Sasha Luccioni a averti que l'IA agentique amplifie les degrés de séparation entre les utilisateurs et la technologie sous-jacente, rendant plus difficile l'identification de l'origine des défaillances . Les résultats du sondage auprès du public, rapportés par Peggy Hicks, ont montré que les répondants considèrent en grande majorité les entreprises développant l'IA comme les principales responsables, suivies des États, puis des organisations qui la déploient .
- Les asymétries de pouvoir mondiales dans la gouvernance de l'IA, notamment l'exclusion du Sud global, de la société civile et des communautés marginalisées des processus décisionnels. Plusieurs intervenants ont remis en question la concentration du pouvoir en matière d'IA dans un petit nombre d'entreprises et de pays. Kakkar a soutenu que sans diffusion de cette concentration de pouvoir, les droits humains - en particulier pour les populations du Sud global - ne peuvent être protégés . Pria Chetty de Research ICT Africa a proposé un cadre « IA juste », soutenant que les modèles éthiques d'IA dominants sont autorégulatoires, calibrés pour les pays à revenus élevés, et approfondissent les inégalités existantes . Linda Bonyo, dans ses remarques de clôture, a souligné que 51 % des discussions sur la gouvernance de l'IA se déroulent à Genève, alors que de nombreuses voix du reste du monde en sont exclues parce qu'elles ne peuvent pas obtenir de visas - un processus lui-même façonné par des algorithmes opaques . L'Association pour les communications progressistes a souligné que les communautés constituent « le premier kilomètre, et non le dernier kilomètre » de l'IA et doivent être placées au centre de la gouvernance .
---
Ton général
Le ton général de la discussion est celui d'une préoccupation urgente tempérée par une détermination prudente. D'emblée, les intervenants ont exprimé un sentiment d'alarme - les remarques d'ouverture de Volker Türk étaient sombres et moralement chargées, invoquant Le Château de Kafka comme métaphore des systèmes d'IA opaques et non responsables , et avertissant que la société risque de répéter les échecs de la gouvernance climatique en permettant à des intérêts puissants de retarder l'action . Cette gravité a persisté tout au long du premier panel, où les panélistes ont présenté des preuves empiriques croissantes des préjudices subis par les femmes, les enfants et les communautés marginalisées.
Cependant, le ton a progressivement évolué vers une résolution constructive des problèmes lors du deuxième panel et des interventions du public. Des ministres des Pays-Bas, d'Espagne, d'Irlande, de Corée et de Pologne ont présenté des mesures nationales concrètes - registres d'algorithmes, lois sur l'IA, lois sur la protection de l'enfance - signalant que la gouvernance n'est pas simplement aspirationnelle . Les représentants de la société civile, bien que critiques, ont formulé des recommandations précises plutôt que de simplement dresser un inventaire des préjudices.
Dans les remarques de clôture, le ton est devenu celui d'une résolution collective, le co-président Oscar López Águeda reconnaissant que « nous sommes en retard », tout en affirmant que la direction prise - vers une IA humaniste et respectueuse des droits - est claire et non négociable . Tout au long de la session, un courant sous-jacent de frustration était perceptible, notamment de la part des représentants du Sud global qui ont noté les exclusions structurelles du dialogue même censé y remédier .
Intervenants
- Ulises Gutiérrez - Représentant spécial pour les technologies émergentes, Mexique
- Jhalak M. Kakkar - Directrice exécutive, Centre for Communication Governance, Université nationale de droit de Delhi
- Clara Chappaz - Ambassadrice pour l'IA et les affaires numériques, France
- Sopio Kiladze - Membre, Comité des droits de l'enfant de l'ONU
- Isabella Hendricks - (s'est exprimée au nom de l'Instituto Alana lors de la session ; voir également Isabella Henriques ci-dessous)
- Felipe Paullier - Secrétaire général adjoint, Bureau de l'ONU pour la jeunesse
- Linda Bonyo - Fondatrice et PDG, Lawyers Hub Africa ; Co-présidente thématique de la session ; expertise en droit, technologie et droits numériques en Afrique
- Sima Bahous - Directrice exécutive, ONU Femmes ; expertise en égalité des genres, droits des femmes et impacts genrés de l'IA
- Zachary Lampel - Conseiller juridique principal et coordinateur, Programme des droits numériques, Centre international pour le droit des organisations à but non lucratif (ICNL)
- João Brant - Secrétaire aux politiques numériques, Secrétariat à la communication sociale, Présidence de la République du Brésil
- Volker Turk - Haut-Commissaire des Nations Unies aux droits de l'homme ; expertise en droit international des droits humains, gouvernance de l'IA et responsabilité
- Shumaila Hussaini Shahani - Responsable des politiques et du plaidoyer, Tech Global Institute ; expertise sur les lacunes en matière d'équité et de responsabilité entre les plateformes technologiques, les gouvernements et les communautés de la majorité mondiale
- Jérôme Bellion-Jourdan - Chercheur associé, Institut pour la négociation mondiale ; Vice-président, Comité directeur de l'initiative AI for Good Impact ; expertise en négociation multilatérale et processus de gouvernance de l'IA
- Esther Eghobamien-Mshelia - Membre, Comité pour l'élimination de la discrimination à l'égard des femmes (CEDAW) ; expertise en discrimination de genre, droits des femmes et gouvernance de l'IA
- Mark Cassayre - Observateur permanent de l'IDLO (Organisation internationale de droit du développement) auprès de l'ONU à Genève ; expertise en état de droit, innovation numérique et accès à la justice
- Franco Giandana Gigena - Analyste des politiques, AccessNow ; expertise en droits numériques, surveillance et gouvernance de l'IA pour la majorité mondiale
- Samuel Arias Arzeno - Juge, Première chambre de la Cour suprême de justice, République dominicaine ; expertise en responsabilité judiciaire, IA dans les systèmes judiciaires et droit des droits humains
- Jeremy Ng - Représentant, Banque mondiale ; impliqué dans la co-direction de la session de dialogue sur la gouvernance de l'IA du système onusien
- Amal El Fallah Seghrouchni - Ministre déléguée chargée de la Transition numérique, Maroc ; expertise en systèmes d'IA, responsabilité algorithmique et droits cognitifs
- Willemijn Aerdts - Ministre de l'Économie numérique et de la Souveraineté, Pays-Bas ; expertise en gouvernance de l'IA, transparence algorithmique et droits numériques des enfants
- David Lametti - Représentant permanent du Canada auprès de l'ONU, Genève ; ancien ministre de la Justice du Canada ; expertise en droit, responsabilité civile, gouvernance de l'IA et droits de l'enfant
- Wanjin Park - Vice-président, KT (entreprise de télécommunications coréenne) ; expertise en évaluation des risques liés à l'IA, diligence raisonnable en matière de droits humains et normes de sécurité de l'IA
- Co-modérateur - A facilité le segment des interventions du public ; rôle et nom non précisés dans la transcription
- Jihoon Cha - Représentant permanent de la République de Corée auprès de l'ONU, Genève ; expertise en législation sur l'IA, droits humains et renforcement mondial des capacités en matière d'IA
- Sonia Livingstone - Membre, Panel scientifique international indépendant sur l'IA ; expertise en droits de l'enfant, sécurité en ligne et évaluation de l'impact de l'IA fondée sur des données probantes
- Oscar Lopez Agueda - Ministre de la Transformation numérique et de la Fonction publique, Espagne ; Co-président thématique de la session ; expertise en réglementation de l'IA, droits numériques et gouvernance de l'IA dans l'UE
- Elizabeth Tan - Directrice de la protection internationale, HCR ; expertise en protection des réfugiés, apatridie et impact de l'IA sur les personnes déplacées et apatrides
- Niamh Smyth - Ministre chargée de l'Intelligence artificielle, Irlande ; expertise en gouvernance de l'IA, violences basées sur le genre et droits numériques des enfants
- Nighat Dad - Fondatrice, Digital Rights Foundation ; expertise en violences basées sur le genre facilitées par la technologie, droits numériques dans le Sud global et responsabilité en matière d'IA
- Peggy Hicks - Directrice, Division des procédures thématiques et spéciales, Haut-Commissariat des Nations Unies aux droits de l'homme (HCDH) ; hôte et modératrice de la session
- Alejandra De Bellis Bonilla - Représentante permanente de l'Uruguay auprès de l'ONU, Genève ; expertise en gouvernance de l'IA, égalité des genres et transformation numérique
- Anna Osterling - Représentante auprès de l'ONU, Forum mondial pour le développement des médias (GFMD) ; expertise en journalisme, intégrité de l'information et impact de l'IA sur les écosystèmes médiatiques
- Porte-parole de Raman Jit Singh Chima - Rebecca Rektimbo, s'exprimant au nom de Raman Jit Singh Chima, Directeur mondial des programmes, Association pour les communications progressistes (APC) ; expertise en connectivité, droits numériques et infrastructures centrées sur les communautés
- Rafał Kownacki - Directeur, Département de la coopération internationale, Ministère des affaires numériques, Pologne ; expertise en gouvernance de l'IA, droits humains et stratégie nationale de numérisation
- Robert Baruch - Affaires publiques, Relations européennes et multilatérales, Universal Music Group ; expertise en droits des créateurs, IA et propriété intellectuelle, et gouvernance de l'industrie musicale
- Pria Chetty - Directrice exécutive, Research ICT Africa ; expertise en politique numérique, cadre d'IA juste et gouvernance de l'IA pour le continent africain et la majorité mondiale
- Sasha Luccioni - Co-fondatrice et directrice scientifique, Sustainable AI Group ; expertise en empreinte environnementale de l'IA, efficacité énergétique et transparence des systèmes d'IA
- Isabella Henriques - Directrice exécutive, Instituto Alana (Brésil) ; expertise en droits de l'enfant dans l'environnement numérique, gouvernance de l'IA et perspectives du Sud global
- Alvitta Ottley - Membre, Panel scientifique international indépendant sur l'IA ; expertise en lacunes probatoires, méthodologie d'évaluation et relation entre science et société dans la gouvernance de l'IA
- Anita Pipan - Conseillère scientifique, Représentation permanente de la Slovénie auprès de l'ONU, Genève ; a présenté la déclaration de la République de Slovénie sur la gouvernance de l'IA et les approches centrées sur l'humain
---
Intervenants supplémentaires :
- Egriselda López - Ambassadrice du Salvador ; Co-présidente du dialogue élargi (mentionnée mais n'a pas pris la parole directement dans la transcription)
- Rein Tammsaar - Ambassadeur d'Estonie ; Co-président du dialogue élargi (mentionné mais n'a pas pris la parole directement dans la transcription)
Résumé élargi : Dialogue mondial de l'ONU sur la gouvernance de l'IA - Groupe thématique sur les droits de l'homme, la transparence, la responsabilité et la supervision humaine
#
Ouverture et contexte
La session a été convoquée dans le cadre du Dialogue mondial de l'ONU sur la gouvernance de l'IA, co-dirigée par le Haut-Commissariat des Nations Unies aux droits de l'homme (HCDH) et la Banque mondiale, sous la direction thématique des co-présidents Linda Bonyo, fondatrice et directrice générale du Lawyers Hub Africa, et Son Excellence Óscar López Águeda, ministre espagnol de la Transformation numérique et de la Fonction publique . Peggy Hicks, directrice de la Division des procédures thématiques et spéciales du HCDH, a ouvert les travaux en accueillant les participants à une session axée sur le respect, la protection et la promotion des droits de l'homme, de la transparence, de la responsabilité et de la supervision humaine dans le contexte de l'intelligence artificielle . Le dialogue s'est déroulé sous la direction de l'Ambassadrice Egriselda López du Salvador et de l'Ambassadeur Rein Tammsaar d'Estonie, et a été décrit comme une réalisation remarquable de la façon dont le système onusien répond aux enjeux actuels .
#
Allocution d'ouverture du Haut-Commissaire
Le Haut-Commissaire des Nations Unies aux droits de l'homme Volker Türk a ouvert son intervention par une analogie frappante : avant qu'un nouveau médicament arrive sur le marché, il fait l'objet de dix à quinze années d'essais cliniques, d'examen réglementaire et d'autorisation de mise sur le marché, et même avec toutes ces garanties, des erreurs peuvent encore survenir . Il a demandé directement si la société prend les mêmes précautions avec l'intelligence artificielle . Sa réponse était préoccupante : l'IA est déjà développée et déployée à une vitesse fulgurante, alimentant la surveillance de masse, la désinformation sur les réseaux sociaux et permettant des discriminations, notamment sous l'angle du genre, tandis que les préjudices causés aux enfants par les algorithmes alimentés par l'IA s'aggravent et que les centres de données hébergeant les serveurs d'IA asphyxient l'environnement . Dans le même temps, il a reconnu le potentiel remarquable de l'IA pour soutenir le diagnostic médical, accélérer la recherche scientifique et renforcer les services publics .
Türk a soutenu que la solution la plus évidente - une réglementation guidée par les droits de l'homme - est là, sous nos yeux, et que pourtant la société continue de l'esquiver . Il a établi un parallèle avec le changement climatique, avertissant que de précieuses années ont été perdues parce que des acteurs puissants ont semé le doute sur la science, retardé l'action et privilégié des intérêts économiques et politiques à court terme, et que la même dynamique risque de se reproduire avec l'IA . Invoquant le roman de Franz Kafka Le Château, il a demandé si la société ressemble au protagoniste K - un géomètre piégé dans un système de pouvoir opaque dans lequel l'agentivité humaine se perd - et a soutenu que l'IA est fondamentalement une question de pouvoir sur les données, les marchés, les ressources et l'information . Sa réponse à ce défi était claire : les droits de l'homme aident à reconquérir l'agentivité et constituent un contrepoids à l'exercice du pouvoir, et des garde-fous sur le développement de l'IA sont nécessaires pour garantir la transparence, l'inclusion et la responsabilité . Il a également invoqué la maxime de Lord Acton selon laquelle « le pouvoir tend à corrompre et le pouvoir absolu corrompt absolument » pour justifier la nécessité de maintenir le pouvoir de l'IA sous contrôle .
Sur la question de la réglementation, Türk a explicitement rejeté l'idée qu'elle constitue un compromis avec l'innovation, faisant valoir que les normes de sécurité applicables aux médicaments, aux voitures et aux avions ne sont pas considérées comme des obstacles au progrès, mais sont précisément la raison pour laquelle les gens font confiance à ces technologies . Il a appelé à intégrer les droits de l'homme dans la conception, le développement, le déploiement et l'utilisation de l'IA, notant que le droit international des droits de l'homme constitue un cadre juridique contraignant pour protéger les données, éviter les discriminations, accéder à la justice et garantir l'égalité . Il a souligné que la diligence raisonnable en matière de droits de l'homme et les évaluations d'impact des systèmes d'IA sont essentielles, tout comme des garanties robustes en matière de protection des données et de respect de la vie privée . Il a également averti que lorsque l'IA collecte des données ou prend une décision sans intervention humaine, la responsabilité peut se dissoudre dans le système, et que la supervision humaine ne peut pas se réduire à un simple tampon, mais exige qu'une personne identifiée soit investie de l'autorité, de la compétence, du temps, de l'indépendance et du pouvoir de modifier, voire d'arrêter un système .
Il a annoncé que le lendemain, son bureau lancerait le Human Rights Data Exchange (HRDX), décrit comme le premier service ouvert et faisant autorité au monde, fournissant des preuves sur les endroits où les droits sont menacés, ce qui s'est passé, pourquoi et ce qu'il convient de faire . Il a également mentionné le service consultatif du HCDH en matière de droits de l'homme, créé dans le cadre du Pacte numérique mondial, visant à aider les États et d'autres acteurs à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme . Il a conclu en opposant le slogan officieux de l'industrie technologique - « plus grand, plus rapide, meilleur » - à sa propre alternative préférée : « plus intelligent, plus humain, plus sage » .
#
Allocutions d'ouverture des co-présidents thématiques
Linda Bonyo a contextualisé la discussion dans une perspective africaine, prenant la parole au nom des travailleurs de plateforme gérés par des algorithmes au Kenya et reconnaissant l'asymétrie du pouvoir ainsi que les voix des jeunes générations absentes de la salle . Elle a mis en avant le lancement de l'Africa AI Governance Index, qui, pour la première fois, suit les stratégies, les lois et les institutions en matière d'IA dans tous les États africains, et a invité les participants à s'engager avec ces travaux sur AIpolicy.africa .
Le ministre López Águeda, s'exprimant en espagnol, a présenté la gouvernance de l'IA comme un choix entre droits numériques et oligarchie, avertissant que sans une gouvernance inclusive, le Sud global ne servira que de batterie ou de fournisseur de données pour les grandes puissances . Il a présenté les réalisations législatives concrètes de l'Espagne, notamment la loi européenne sur l'IA signée sous la présidence espagnole de l'UE, l'interdiction des deepfakes sexuels et de la pornographie infantile dans la législation européenne, la création de la première agence européenne de supervision de l'IA, et une loi sur la protection de l'enfance restreignant l'accès des moins de 16 ans aux réseaux numériques . Il a également mentionné la charte ibéro-américaine des droits numériques comme une initiative portée par l'Espagne .
#
Premier panel : droits de l'homme, responsabilité et justice
Le premier panel était modéré par l'Ambassadeur David Lametti, Représentant permanent du Canada auprès de l'ONU et ancien ministre de la Justice, qui a cadré la discussion autour du rôle des systèmes judiciaires dans la mise en œuvre de la responsabilité et la défense des droits de l'homme pour les personnes affectées par l'IA, y compris les enfants . Il a noté que la responsabilité civile est un principe qui existe dans la plupart des systèmes judiciaires et qui est axé sur la responsabilité humaine, mais que le défi posé par l'IA est d'être soumise au jugement et à l'intelligence humains alors que c'est une machine qui prend la décision . Il a décrit la loi proposée par le Canada qui interdirait aux plateformes sociales d'accueillir des enfants de moins de 16 ans jusqu'à ce que leur sécurité soit prouvée, et exigerait que les chatbots d'IA soient déclarés sûrs avant d'être exposés aux enfants, avec un commissaire au numérique chargé d'assurer la conformité .
Sima Bahous, directrice exécutive d'ONU Femmes, a soutenu que, sans réglementation, l'IA devient non seulement un miroir des inégalités existantes, mais un puissant mécanisme d'amplification de la discrimination, de l'exclusion et de la violence à l'égard des femmes et des filles . Elle a présenté des données probantes étendues : 44 % des systèmes d'IA évalués présentent des biais de genre parce qu'ils sont entraînés sur des données qui reflètent déjà des biais existants ; près d'une femme sur quatre parmi les défenseures des droits de l'homme, les militantes et les journalistes interrogées avait subi des violences en ligne assistées par l'IA ; et jusqu'à 99 % des deepfakes et des images sexuelles manipulées en ligne ciblent des femmes . Elle a noté que 41 % des femmes interrogées s'autocensurent sur les réseaux sociaux pour éviter les abus, ce qui pousse les femmes et les filles hors des espaces en ligne et menace la participation démocratique . S'appuyant sur le rapport du panel scientifique indépendant de la veille, elle a noté que 88 % des principaux chercheurs en IA sont des hommes et que les femmes ne représentent que 30 % de la main-d'œuvre mondiale dans le domaine de l'IA . Elle a également noté que sur les 138 pays évalués, seuls 24 font référence au genre dans leurs stratégies nationales d'IA, et seulement 18 incluent des dispositions substantielles tenant compte du genre . Elle a soutenu que les États demeurent les principaux garants des obligations au titre du droit international des droits de l'homme, notamment la Déclaration universelle, le PIDCP et la CEDAW, et que les entreprises technologiques ne peuvent pas se cacher derrière la complexité de leurs systèmes . Elle a appelé à des évaluations d'impact obligatoires sur les droits de l'homme avant et après le déploiement, avec l'égalité des genres traitée comme non négociable, et à ce que les femmes et les filles, les technologues féministes, les communautés autochtones, les organisations syndicales, les défenseurs des droits des personnes handicapées et la société civile soient véritablement impliqués et habilités . Elle a présenté ses questions de responsabilité - qui construit l'IA, qui en bénéficie, qui en supporte les risques et qui a voix au chapitre - comme des éléments constitutifs de la responsabilité .
Amal El Fallah Seghrouchni, ministre déléguée du Maroc, a introduit une distinction conceptuellement originale entre les préjudices exogènes - qui sont externes aux êtres humains et peuvent être observés et mesurés - et les préjudices endogènes, qui se produisent dans l'esprit humain et sont imperceptibles même pour ceux qui les vivent . Elle a soutenu que lorsque des algorithmes manipulent la psychologie d'un enfant, cela ne peut être ni mesuré ni même perçu, et a demandé comment la société peut auditer ses propres neurones ou comprendre que le cerveau humain a été transformé . Elle a mentionné la tentative législative précoce du Chili d'introduire des droits cognitifs comme une réponse visionnaire à ce défi . Elle a également noté que même les chercheurs en IA ne disposent pas toujours des outils nécessaires pour comprendre la complexité des algorithmes, et que les grands modèles de langage comportant entre 175 et 180 milliards de paramètres rendent la traçabilité de la responsabilité extrêmement difficile .
Dans sa deuxième intervention, El Fallah Seghrouchni a identifié la responsabilité dans les systèmes d'IA agentique comme probablement le défi juridique le plus important de la décennie, notant que dans un réseau d'agents individuellement autonomes, il n'y a pas d'être humain à l'origine de la décision finale, ce qui rend difficile de déterminer quel agent est responsable et comment la responsabilité doit être répartie . Elle a illustré l'ampleur du défi par un exemple concret tiré de la plateforme marocaine Iderati X.0, qui traite 52 millions de transactions administratives par jour, notant qu'à une telle échelle, il devient extrêmement difficile d'identifier la cause exacte lorsqu'un problème survient . Elle a proposé trois obligations concrètes : une documentation structurée des chaînes d'agents précisant quel agent fait quoi et quand ; la désignation d'un être humain identifiable responsable de toutes les questions liées aux droits lorsque des agents sont déployés dans les services publics ; et un droit à un recours en temps utile afin que les êtres humains puissent obtenir réparation à la mesure de la rapidité des systèmes d'IA .
Samuel Arias Arzeno, juge de la Première Chambre de la Cour suprême de justice de la République dominicaine, a soutenu que le véritable défi de la gouvernance ne se pose pas lorsque des lois ou des principes éthiques sont adoptés, mais lorsqu'une personne estime qu'un système d'IA a violé ses droits de l'homme - c'est à ce moment que la gouvernance devient une réalité . Il a soutenu que les systèmes judiciaires doivent être considérés non pas simplement comme des utilisateurs de l'IA, mais comme des institutions essentielles pour convertir les principes des droits de l'homme en véritables droits de l'homme, et qu'aucune institution publique ne peut justifier une décision en disant que c'est ce que le système lui a indiqué de faire . Il a noté que, par le biais de la Justice Action Coalition, des gouvernements, des organisations civiles, des organisations internationales et des systèmes judiciaires travaillent ensemble pour s'assurer que la gouvernance de l'IA ne se limite pas à la conception de politiques publiques, mais peut être rendue effective par des systèmes judiciaires fondés sur les personnes, et que la République dominicaine co-préside avec la Banque mondiale les travaux sur les technologies émergentes et l'IA dans le domaine de la justice . Il a proposé quatre priorités : renforcer les capacités institutionnelles des avocats et des jurés ; assurer la transparence et la traçabilité dans l'utilisation de l'IA ; maintenir une supervision humaine effective ; et garantir que toutes les personnes disposent de mécanismes effectifs pour accéder à la justice et obtenir réparation .
Sonia Livingstone, membre du Panel scientifique international indépendant sur l'IA, a rapporté que le panel a constaté que les preuves de violations des droits de l'homme sont actuellement bien plus convaincantes que les preuves de bénéfices pour les droits de l'homme dans de nombreux contextes où l'IA est utilisée . Le panel a documenté des menaces pour l'écosystème de l'information à travers la persuasion et la tromperie générées par l'IA, la désinformation et la méfiance, avec des impacts négatifs sur la santé collective, la participation démocratique et l'intégrité électorale . Il a également documenté des menaces pour la vie privée et la sécurité, les données personnelles étant collectées, manipulées, utilisées abusivement et exploitées, ainsi que des preuves de préjudices en termes d'inégalité et d'injustice, le pouvoir de l'IA étant concentré dans très peu d'entreprises, de pays et de langues . Le panel a identifié quatre catégories de risques : les risques directs ; les risques découlant d'une capacité mondiale très inégale ; les coûts d'opportunité liés à l'incapacité à réaliser les bénéfices de l'IA ; et les risques liés au déploiement sans garanties fondées sur les droits .
Sur la question des enfants spécifiquement, Livingstone a présenté des données alarmantes : dans 11 pays du Sud global, jusqu'à un enfant par classe a signalé que l'IA avait été utilisée pour créer des deepfakes sexuellement explicites les représentant ; les signalements de matériel d'abus sexuel sur enfants généré par l'IA auprès de la cyber tip line américaine NCMEC augmentent de façon exponentielle ; du matériel d'abus sexuel sur enfants est documenté dans certains ensembles de données d'entraînement ; et les auteurs d'infractions peuvent désormais affiner des modèles ouverts à partir d'images d'exploitation sexuelle d'enfants . Une enquête nationale américaine a révélé qu'un enfant sur trois avait discuté de questions émotionnelles importantes avec un compagnon IA, alors que l'évaluation des risques de Stanford concernant les compagnons IA a conclu que ces produits ne satisfont pas aux normes de sécurité de base . Elle a renvoyé les participants aux appels de M. Kateris invitant les nations à adopter un engagement pour la sécurité des enfants dans le domaine de l'IA . Elle a mis en garde contre le fait que le problème ne sera pas résolu en restreignant les enfants, et a souligné les droits des enfants à l'expression, à la participation, à l'éducation et à l'information à l'ère numérique .
Sasha Luccioni, co-fondatrice et directrice scientifique du Sustainable AI Group, a soutenu que la transparence sur l'empreinte environnementale de l'IA est un droit humain fondamental, permettant aux utilisateurs de faire des choix éclairés entre les outils . Elle a noté que si les bénéfices de l'IA peuvent techniquement être mondiaux, les impacts négatifs en termes d'eau, d'énergie, d'émissions et de santé sont très locaux et affectent de manière disproportionnée les populations les plus marginalisées . Elle a décrit la difficulté d'obtenir de la transparence même pour des organisations internationales telles que l'AIE, qui peinent à obtenir des informations parce que les pays membres eux-mêmes ne les possèdent pas . Elle a présenté son AI Energy Score Project - des étiquettes d'efficacité énergétique pour les modèles d'IA - comme une étape vers une prise de décision éclairée et une réglementation éventuelle . Dans sa deuxième intervention, elle a averti que l'IA agentique amplifie les degrés de séparation entre un utilisateur et la technologie sous-jacente, rendant de plus en plus difficile l'identification de l'origine des défaillances .
Jhalak M. Kakkar, directrice exécutive du Centre for Communication Governance de la National Law University de Delhi, a soutenu que les cadres existants des droits de l'homme - notamment le droit à l'égalité, à la vie privée et à la liberté d'expression - doivent être réinterprétés dans le contexte de l'IA . Elle a soulevé la question de ce que signifie la liberté de pensée lorsque l'IA menace l'autonomie cognitive par le micro-ciblage et la manipulation , et a noté que la concentration des centres de données et l'extraction de minéraux principalement dans des zones déjà marquées par des inégalités dans le Sud global soulèvent des questions fondamentales de justice environnementale et économique . Elle a soutenu que les systèmes judiciaires devront faire face à la complexité de l'établissement de la vérité à une époque d'érosion épistémique, combler les lacunes en matière de responsabilité, naviguer dans les questions de transparence et remédier au fossé de gouvernance transnational et transfrontalier où les lois sont nationales mais les entreprises sont mondiales . Elle a conclu que sans diffusion de la concentration du pouvoir dans une poignée d'entreprises relevant de quelques juridictions, les droits de l'homme - en particulier pour les populations du Sud global - ne peuvent être protégés .
#
Résultats du sondage auprès des participants
Peggy Hicks a présenté les résultats d'un sondage réalisé auprès des participants à la session. Une pluralité de répondants s'est déclarée préoccupée par l'insuffisance des mesures de gouvernance en place pour faire face aux défis et aux opportunités de l'IA . Les deux principales préoccupations en matière de droits de l'homme identifiées étaient la responsabilité et l'état de droit, ainsi que l'impact de l'IA sur les enfants, suivis par la surveillance et l'utilisation de l'IA par les forces de l'ordre, puis la durabilité environnementale . Sur la question de la responsabilité pour les actions de l'IA agentique, les répondants ont massivement désigné les entreprises qui développent le modèle d'IA comme la principale partie responsable, suivies des États, puis des organisations qui déploient le système - un résultat cohérent avec les Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme . Hicks a également noté que le HCDH et l'UIT présenteraient jeudi une enquête intitulée « Moi et l'IA », menée auprès de 1 000 enfants dans 49 pays, dans laquelle les enfants ont exprimé leur souhait que l'IA soit façonnée avec eux et pas seulement pour eux, qu'elle respecte leurs droits, et qu'ils ne souhaitent pas simplement en être protégés .
#
Deuxième panel : solutions, données probantes et inclusion
Le deuxième panel était modéré par Son Excellence Clara Chappaz, Ambassadrice pour l'IA et les affaires numériques de France, qui a cadré la discussion autour de trois questions : quelles bonnes pratiques existent en matière de diligence raisonnable relative aux droits de l'homme ; quels outils techniques et données probantes sont nécessaires pour comprendre les impacts avant le déploiement ; et comment garantir que les enfants et les autres populations concernées sont véritablement associés à la gouvernance de l'IA .
Willemijn Aerdts, ministre de l'Économie numérique et de la Souveraineté des Pays-Bas, a présenté des outils nationaux concrets, notamment un cadre algorithmique traduisant les exigences légales en lignes directrices pratiques, une évaluation d'impact sur les droits fondamentaux et les algorithmes, et un registre des algorithmes couvrant tous les algorithmes utilisés par le gouvernement néerlandais . Sur la question des enfants, elle a souligné que lors de l'élaboration de politiques pour les enfants et les jeunes, ceux-ci doivent être véritablement inclus dans le processus décisionnel aux côtés des parents et des éducateurs, et a noté que les jeunes sont souvent confrontés à des problèmes trop importants pour les parents mais trop mineurs pour la police .
Felipe Paullier, Secrétaire général adjoint du Bureau de l'ONU pour la jeunesse, a soutenu que la question ne devrait pas seulement porter sur ce que l'IA peut faire, mais sur ce que l'IA peut aider l'humanité à construire comme avenir, et que l'IA doit être évaluée non seulement sur la vitesse et l'efficacité, mais sur sa contribution au bien-être humain, à la dignité et aux droits de l'homme . Il a souligné que les jeunes sont les utilisateurs les plus actifs de l'IA et parmi les innovateurs les plus fréquents au sein des entreprises d'IA, et pourtant ils ne sont presque jamais les décideurs, bien qu'ils vivent le plus longtemps avec les conséquences des décisions prises aujourd'hui . Il a appelé à la création d'espaces significatifs permettant aux jeunes de participer à la gouvernance de l'IA au niveau national, avertissant que si de tels espaces ne sont pas créés, les jeunes en créeront eux-mêmes, comme cela s'est produit dans le domaine climatique .
Ulises Gutiérrez, Représentant spécial pour les technologies émergentes du Mexique, a soulevé la préoccupation selon laquelle les politiques publiques sont toujours en retard sur le développement technologique, et qu'il existe une compréhension politique insuffisante de l'impact du développement technologique, en particulier de l'IA . Il a soutenu que la question n'est pas ce qu'un être humain peut faire avec la technologie, mais ce que la technologie fait aux êtres humains . Il a appelé à un nouveau contrat social aux niveaux national et international, et pas seulement à une réglementation, pour gouverner l'IA dans un paysage en constante évolution .
Wanjin Park, vice-président de KT, a décrit l'approche de son entreprise consistant à définir les risques liés à l'IA en incluant les considérations relatives aux droits de l'homme, à évaluer les modèles et agents d'IA par rapport à ce cadre, et à faire fonctionner un comité de sécurité de déploiement au niveau de la direction avant de lancer des produits d'IA . Il a particulièrement mis en avant la taxonomie des risques liés à l'IA du projet BTEC du HCDH comme un travail important qui doit être développé de manière plus concrète et pratique . Il a noté que le problème se pose lorsque des systèmes multi-agents provenant de différentes entreprises sont interconnectés, chaque entreprise ayant sa propre définition du risque lié à l'IA, et a appelé à des normes communes et bien conçues pour créer une base partagée .
Nighat Dad, fondatrice de la Digital Rights Foundation, a livré l'une des interventions analytiquement les plus percutantes de la session, soutenant que la diligence raisonnable en matière de droits de l'homme telle que la pratiquent la plupart des entreprises d'IA aujourd'hui ne satisfait pas aux normes des Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme - elle intervient après que les décisions de co-conception ont été prises, là où la réglementation l'impose, et sans la participation des personnes réellement concernées . Elle a qualifié l'inégalité géographique de la diligence raisonnable - des évaluations significatives menées principalement dans l'UE, avec les mêmes systèmes déployés dans le Sud global sans examen équivalent - de choix structurel, et non d'écart de capacité, créant un régime de droits à deux vitesses déterminé par la géographie . Elle a documenté plus de 23 000 cas de violence facilitée par la technologie affectant de manière disproportionnée les femmes, les filles et les jeunes par le biais de la ligne d'assistance téléphonique contre le harcèlement en ligne de son organisation , et a soutenu que tout cadre de diligence raisonnable qui ne traite pas explicitement de la violence de genre facilitée par la technologie a exclu la moitié de la population de sa protection . Elle a proposé trois recommandations concrètes : des évaluations obligatoires d'impact sur les droits de genre et de l'enfant menées avant le déploiement avec la participation des communautés concernées ; des obligations de diligence raisonnable uniformes sur tous les marchés où un système est déployé ; et des évaluations répétées chaque fois que les capacités changent de manière significative, y compris les augmentations de la fonction agentique .
Alvitta Ottley, membre du Panel scientifique indépendant sur l'IA, a identifié deux défis scientifiques connexes : le décalage d'évaluation et le manque de données probantes . Sur le décalage d'évaluation, elle a soutenu que les questions d'ingénierie - peut-on rendre quelque chose plus rapide, plus précis, plus performant ? - ne sont pas les mêmes questions que celles que posent les sociétés, qui concernent la protection des droits de l'homme, la responsabilité des institutions et l'amélioration de la société . Elle a soutenu que si la société décide que le succès consiste à protéger les droits de l'homme, à favoriser une confiance appropriée et à préserver la responsabilité, alors les résultats mesurés doivent correspondre à ce qui est optimisé . Sur le manque de données probantes, elle a noté que si les preuves sur les performances des modèles d'IA sont abondantes, il existe très peu de preuves sur la façon dont l'IA affecte la prise de décision des personnes, l'apprentissage des enfants, les décisions cliniques ou le travail des agents publics, et que répondre à ces questions nécessite des études longitudinales, des collaborations interdisciplinaires et un travail minutieux avec des communautés protégées et mal desservies . Elle a conclu par une formulation qui a résonné tout au long du panel : la société doit décider à quoi ressemble le succès, et la science doit déterminer comment le mesurer .
Dans ses remarques de clôture, Chappaz a synthétisé les conclusions du panel, notant que la rapidité du développement technologique dans un monde géopolitiquement fragmenté exige de définir ce que le succès signifie pour les êtres humains, sur la base des valeurs qu'ils choisissent de privilégier, et que c'est uniquement la décision de l'humanité, pas celle de la technologie . Elle a repris le cadrage de Dad selon lequel l'inégalité géographique de la diligence raisonnable représente des choix structurels et non des lacunes de capacité, et a averti que si cela n'est pas résolu, les communautés se retireront des espaces numériques ou en créeront de nouveaux sans gouvernance ni valeurs .
#
Interventions du public
Le segment des interventions du public a accueilli des contributions de gouvernements et d'organisations de la société civile de plusieurs régions, modéré par les co-présidents thématiques.
La ministre irlandaise Niamh Smyth a soutenu que la gouvernance mondiale de l'IA doit s'aligner sur les cadres internationaux des droits de l'homme, en promouvant la liberté d'expression, la vie privée, l'accès à l'information et l'égalité des genres, tout en luttant activement contre toutes les formes de violence, y compris la violence sexuelle et de genre . Elle a exprimé une préoccupation particulière quant au fait que, sans les garanties nécessaires en matière de droits de l'homme et de supervision, les systèmes d'IA permettent la violence de genre facilitée par la technologie, et que la modération des contenus en ligne par l'IA sans supervision humaine peut amplifier la désinformation, affectant de manière disproportionnée les femmes et les filles .
Robert Baruch d'Universal Music Group a ancré la position de l'industrie musicale dans le droit international des droits de l'homme, citant l'article 27 de la Déclaration universelle des droits de l'homme et l'article 15 du PIDESC comme protégeant les intérêts moraux et matériels des créateurs à l'ère de l'IA . Il a soutenu que l'avenir de l'IA doit être construit non pas en choisissant entre l'innovation et les droits des créateurs, mais en faisant progresser les deux ensemble, et a proposé trois piliers : le contrôle des créateurs sur la façon dont leurs œuvres sont utilisées pour développer des systèmes d'IA ; la transparence sur le moment et la manière dont les œuvres sont utilisées ; et la supervision humaine garantissant que l'IA amplifie plutôt que remplace la créativité humaine .
La représentante de la Slovénie, Anita Pipan, a soutenu que la confiance dans l'IA n'est pas seulement un objectif éthique mais une condition préalable à une adoption plus large de l'IA, et a décrit la stratégie nationale d'IA 2030 de la Slovénie comme promouvant une approche centrée sur l'être humain, ancrée dans les droits de l'homme, les valeurs démocratiques, l'éthique, la sécurité, la transparence et la responsabilité . Elle a accordé une importance particulière à la protection de la diversité linguistique et culturelle, soutenant qu'une IA inclusive devrait refléter et préserver toutes les langues et cultures .
Zachary Lampel de l'International Center for Not-for-Profit Law a proposé trois actions concrètes : des lignes rouges pour l'IA - des interdictions claires ou des moratoires sur les systèmes et utilisations de l'IA qui présentent des risques inacceptables pour les droits de l'homme, explicitement prévus dans la résolution de l'Assemblée générale des Nations Unies de 2024 intitulée « Saisir les opportunités offertes par des systèmes d'intelligence artificielle sûrs, sécurisés et dignes de confiance pour le développement durable » ; des certifications standardisées liées aux règles nationales de passation de marchés publics, analogues aux certifications de construction écologique, créant des incitations de marché pour concevoir et déployer une IA sûre ; et un droit à réparation, garantissant que les décisions prises via des systèmes d'IA ont un acteur responsable et une voie de recours . Il a également noté que les recommandations de l'UNESCO sur l'éthique de l'intelligence artificielle excluent déjà explicitement l'utilisation de l'IA pour la notation sociale et la surveillance de masse .
La représentante de l'Uruguay, Alejandra De Bellis Bonilla, a mis en avant le Partenariat mondial pour les droits de l'homme comme une plateforme multi-parties prenantes large reliant les efforts sur les impacts transversaux de l'IA, et a appelé à des améliorations en matière de responsabilité, de cadres normatifs, de durabilité et de financement, avec une approche tenant compte du genre dans la conception et le déploiement de l'IA .
Franco Giandana Gigena d'AccessNow a appelé à des normes juridiques contraignantes centrées sur les droits de l'homme et à des mécanismes de gouvernance mondiale pour réguler les technologies de surveillance numérique et l'IA, en s'attaquant aux effets dissuasifs sur les manifestants, les journalistes et les défenseurs des droits de l'homme . Il a appelé à un arrêt du développement et de l'utilisation des outils d'IA facilitant les violations du droit international humanitaire et du droit des droits de l'homme, en particulier dans les contextes de conflit . Il a soutenu que les populations du monde entier n'ont pas seulement besoin d'accéder à l'IA, mais surtout d'agentivité .
Rafał Kownacki du ministère polonais des Affaires numériques a soutenu que lorsque la société décide de ce qu'un algorithme peut faire à un être humain, elle décide de ce qu'elle croit qu'une personne vaut . Il a invoqué l'expérience historique de la Pologne pour soutenir que certains choix ne doivent jamais être faits par une machine seule, et que quelle que soit la capacité des systèmes d'IA, une personne doit garder le dernier mot - pour comprendre la décision, la contester et, là où cela importe le plus, éteindre les systèmes . Il a salué la Convention-cadre du Conseil de l'Europe sur l'IA comme le premier traité contraignant plaçant l'IA dans l'ordre des droits de l'homme, de la démocratie et de l'état de droit .
Isabella Henriques de l'Instituto Alana, s'exprimant au nom de plus de 120 signataires d'une déclaration commune de la société civile sur les droits des enfants lors du dialogue sur l'IA, a soutenu que les enfants sont parmi les premiers et les plus fréquents utilisateurs des nouvelles technologies, mais restent largement absents des stratégies nationales d'IA et des cadres de gouvernance . Elle a souligné que les droits, la sécurité et le bien-être des enfants doivent être intégrés dans les systèmes d'IA dès le départ, et non ajoutés après que le préjudice s'est déjà produit, et que la responsabilité doit incomber à ceux qui construisent et profitent de la technologie .
João Brant du Brésil a décrit le Statut numérique pour les enfants et les adolescents du pays, qui exige des plateformes qu'elles adoptent des mesures de protection de l'enfance dès la phase de conception, limite les fonctionnalités pouvant conduire à une utilisation excessive telles que le défilement infini, et interdit la publicité ciblée basée sur les données personnelles des enfants . Il a également décrit un décret interdisant la création d'images intimes synthétiques basées sur de vraies tierces parties, établissant des responsabilités proactives pour les plateformes et les entreprises d'IA . Il a appelé à ce que l'intégrité de l'information soit comprise dans sa dimension collective ou sociale comme faisant partie du droit d'accès à une information exacte et fiable, et a soulevé la préoccupation concernant l'impact de l'IA sur la viabilité économique du journalisme .
Anna Osterling du Global Forum for Media Development a soutenu, citant Courtney Raj du Centre for Media and Digital Governance d'OpenMarkets, que le journalisme est une espèce clé de voûte de l'écosystème de l'information - stabilisant la confiance, ancrant la vérification, structurant la responsabilité et permettant à d'autres institutions de fonctionner - et que sa disparition entraîne l'effondrement de l'écosystème de l'information plutôt que son adaptation . Elle a noté que les systèmes d'IA sont entraînés sur des contenus journalistiques récupérés sans consentement, compensation ni crédit, et a appelé à une infrastructure numérique publique, à des politiques industrielles soutenant l'IA d'intérêt public, et à une gouvernance de l'IA exigeant que les droits de l'homme soient intégrés tout au long du cycle de vie complet de tous les systèmes d'IA .
Jihoon Cha de la République de Corée a décrit la loi fondamentale sur l'IA du pays, qui exige des opérateurs de systèmes d'IA à fort impact qu'ils évaluent les impacts potentiels sur les droits fondamentaux, et a déclaré la vision de la Corée d'établir le Global AI Hub, avec neuf organisations participantes dans le domaine de l'IA et des domaines connexes, pour renforcer les capacités mondiales en matière d'IA . Il a soutenu que l'accès à l'IA devrait être traité non pas comme un privilège à mériter, mais comme un droit fondamental à exercer .
Pria Chetty de Research ICT Africa a proposé un cadre « Just AI » (IA juste), soutenant que les modèles de gouvernance dominants ancrés dans une IA éthique ou responsable restent structurellement inadéquats parce qu'ils sont largement autorégulés, pilotés par des acteurs dominants, calibrés pour les pays à revenus élevés et ignorent la souveraineté ou l'agentivité . Elle a appelé à une reconnaissance mondiale que la gouvernance de l'IA est inséparable de la gouvernance des données, et à la démocratisation des ressources et des capacités d'IA afin que les nations de la majorité mondiale puissent passer de consommateurs passifs à co-créateurs d'IA .
Jérôme Bellion-Jourdan de l'Institute for Global Negotiation, également vice-président du comité directeur de l'AI for Good Impact Initiative, a soutenu que si un large accord existe sur la nécessité d'une meilleure gouvernance, la question est de savoir comment y parvenir. Il a proposé que les outils et techniques de la négociation multilatérale - notamment la conception de processus, les formats de négociation innovants et le passage du marchandage positionnel et des dynamiques gagnant-perdant à la négociation intégrative et aux résultats gagnant-gagnant - pourraient aider à naviguer dans les jeux de pouvoir et les asymétries de pouvoir qui entravent les progrès vers une gouvernance mondiale de l'IA .
Mark Cassayre de l'IDLO, la seule organisation intergouvernementale mondiale exclusivement consacrée à la promotion de l'état de droit, a recommandé que les droits de l'homme et l'état de droit doivent sous-tendre le développement et le déploiement des technologies numériques dans le secteur de la justice, que des cadres juridiques et réglementaires adaptés doivent accompagner l'innovation, et que l'investissement dans les capacités institutionnelles - notamment la culture de l'IA parmi les professionnels du droit et de la justice - est essentiel .
Rebecca Rektimbo, coordinatrice de projets techniques de connectivité pour LOCNET, s'exprimant au nom de Raman Jit Singh Chima, directeur mondial du programme de l'Association for Progressive Communications, a soutenu qu'avant que les communautés puissent contribuer des données, construire des solutions d'IA locales, influencer les politiques ou bénéficier de l'innovation, elles ont besoin d'une connectivité significative, abordable, fiable et localement pertinente . Elle a soutenu que la connectivité centrée sur les communautés rapproche le pouvoir des communautés et permet aux femmes, aux peuples autochtones, aux communautés rurales et aux locuteurs de langues sous-représentées de devenir des créateurs, des innovateurs, des chercheurs et des décideurs plutôt que de simples consommateurs de technologie . Elle a conclu par une formulation qui a résonné tout au long de la session : les communautés ne sont pas le dernier kilomètre de l'IA - elles en sont le premier kilomètre .
Esther Eghobamien-Mshelia du Comité CEDAW a soutenu qu'il ne peut y avoir de gouvernance de l'IA véritablement fondée sur les droits de l'homme sans la pleine mise en œuvre de la CEDAW, qui exige des États non seulement d'interdire la discrimination, mais d'atteindre l'égalité substantielle en s'attaquant aux obstacles structurels et réglementaires, aux stéréotypes et aux rapports de pouvoir inégaux . Elle a cité la Recommandation générale n° 40 de la CEDAW sur la participation pleine et égale des femmes à la vie politique et publique comme un outil nous rappelant que les femmes doivent participer pleinement et à égalité à la conception, à la gouvernance et à la supervision des systèmes d'IA . Elle a appelé à des indicateurs tenant compte du genre, à un suivi et à une surveillance pour démontrer si les femmes participent et bénéficient à égalité de la transformation numérique et sont protégées contre des préjudices tels que la discrimination algorithmique et la violence de genre facilitée par la technologie .
Elizabeth Tan du HCR a souligné que pour les personnes déplacées de force et les apatrides, les obstacles à la contestation des décisions assistées par l'IA sont particulièrement élevés en raison des lacunes documentaires, des barrières linguistiques, des limitations d'accès numérique et de la crainte d'approcher les autorités . Elle a cité des exemples concrets de Libye, où des contenus générés par l'IA ont incité à l'hostilité et aux abus envers les réfugiés, et de la communauté rohingya, qui continue de faire face à des discours déshumanisants en ligne même en exil . Elle a appelé à une diligence raisonnable en matière de droits de l'homme tout au long du cycle de vie de l'IA, à des tests de biais, à des explications claires sur la façon dont les décisions sont prises, et à des moyens accessibles de se plaindre ou de demander une correction .
Sopio Kiladze du Comité des droits de l'enfant a décrit la déclaration commune des Nations Unies sur l'IA et les droits de l'enfant, co-dirigée par l'UIT, le CRC et l'UNICEF, co-signée par 13 agences des Nations Unies et plus de 60 organisations, et élaborée avec la contribution d'enfants des cinq régions de l'ONU . Elle a soutenu que l'histoire ne jugera pas la société à l'aune de l'intelligence de son IA, mais à celle de sa capacité à avoir utilisé ce moment extraordinaire pour protéger ceux qui ont la plus petite voix et le plus grand enjeu dans l'avenir .
Shumaila Hussaini Shahani du Tech Global Institute a proposé cinq engagements concrets : les affirmations de sécurité doivent être accompagnées des conditions dans lesquelles les systèmes ont été testés et des taux d'échec ventilés par langue, genre, handicap et région ; une décennie d'engagements volontaires n'a pas produit de résultats et des cadres de responsabilité publique assortis de responsabilité des entreprises sont nécessaires ; une capacité financée publiquement et hébergée régionalement pour évaluer les systèmes d'IA avant le déploiement est requise ; la transparence et la supervision doivent s'étendre à la gestion algorithmique et aux travailleurs des données ; et les connaissances autochtones et traditionnelles doivent être protégées par une gestion des données dirigée par les communautés .
#
Remarques de clôture et thèmes transversaux
Dans ses remarques de clôture, Linda Bonyo a soulevé deux points critiques : premièrement, qui finance les droits de l'homme à l'ère de l'IA, notant que les ressources nécessaires pour garantir que les droits de l'homme fonctionnent idéalement dans ce contexte doivent être trouvées ; et deuxièmement, la nécessité d'une ouverture algorithmique autour des processus de visa, notant que 51 % des conversations sur la gouvernance de l'IA se déroulent à Genève et que le reste du monde en est effectivement exclu parce que les gens ne peuvent pas obtenir de visas - un processus lui-même façonné par des algorithmes opaques . Elle a nommé un participant absent spécifique, Freedom Wangi, un travailleur de l'IA incapable d'obtenir un visa, comme illustration concrète de cette exclusion .
Le ministre López Águeda a conclu en reconnaissant que le dialogue ne porte pas seulement sur la technologie, mais sur la démocratie, les droits de l'homme, la vie privée, l'énergie et la paix dans le monde . Il a déclaré clairement que la société est en retard pour relever ces défis, mais a affirmé la direction à suivre : construire une IA humaniste, défendre l'agentivité humaine et utiliser l'IA pour être meilleurs plutôt que pires .
#
Évaluation globale
La session a révélé un degré élevé de consensus normatif parmi un éventail remarquablement diversifié de participants - des ministres gouvernementaux et des responsables de l'ONU aux représentants de la société civile, aux universitaires, aux acteurs du secteur privé et aux représentants d'organisations internationales - sur les principes fondateurs de la gouvernance de l'IA fondée sur les droits de l'homme. Tout au long des discussions de la session, les domaines de convergence les plus forts étaient que la gouvernance de l'IA doit être ancrée dans le droit international contraignant des droits de l'homme plutôt que dans une éthique volontaire ; que la réglementation et l'innovation sont complémentaires plutôt qu'en tension ; que la supervision humaine significative doit être substantielle et non nominale ; que la transparence est une exigence fondamentale dans toutes les dimensions de l'IA ; que les enfants nécessitent une protection spéciale, la responsabilité incombant aux développeurs et aux déployeurs ; que l'IA amplifie les inégalités existantes et nécessite des réponses de gouvernance proactives ; que l'IA agentique crée des défis de responsabilité sans précédent ; et que les communautés concernées doivent être véritablement incluses dans les processus de gouvernance .
Cependant, le consensus sur les principes n'était pas assorti d'un accord équivalent sur les mécanismes d'application, le financement ou l'architecture institutionnelle spécifique nécessaire pour traduire les principes en pratique. Les intervenants du Sud global ont constamment souligné que le fossé entre principe et pratique est lui-même une inégalité structurelle, la diligence raisonnable significative étant appliquée principalement dans les juridictions à revenus élevés . Les résultats du sondage de la session, montrant qu'une pluralité de participants s'inquiétait de l'insuffisance des mesures de gouvernance en place , et que la responsabilité, l'état de droit et l'impact de l'IA sur les enfants étaient les principales préoccupations , ont confirmé que les participants eux-mêmes reconnaissent la distance entre le consensus normatif atteint et la réalité de la mise en œuvre. Le défi de combler cette distance - de manière équitable, urgente et avec la pleine participation de ceux qui sont les plus touchés - est apparu comme la tâche déterminante à venir.
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - le cadre des droits de l'homme des Nations Unies comme boussole
Arg. 1Cet argument a déjà été repris ci-dessus dans les entrées de Volker Turk.
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour relever les défis de nature mondiale que pose la gouvernance de l'IA
La gouvernance de l'IA doit être traitée comme une question fondamentale de droits humains, et non comme une simple question technique, le droit international des droits de l'homme fournissant un cadre juridique contraignant - Les droits humains comme cadre contraignant
Arg. 1Bahous soutient que, sans réglementation, l'IA devient non seulement un miroir des inégalités sociétales existantes, mais aussi un puissant mécanisme d'amplification de la discrimination, de l'exclusion et de la violence à l'égard des femmes et des filles. Elle insiste sur le fait que la gouvernance de l'IA ne peut pas être traitée uniquement comme une question technique et qu'elle est fondamentalement une question de droits humains.
Bahous a déclaré que, sans réglementation, l'IA devient non seulement un miroir des inégalités qui existent déjà dans nos sociétés, mais aussi un puissant mécanisme d'amplification de la discrimination, de l'exclusion et de la violence à l'égard des femmes et des filles . Elle a fait référence aux cadres du droit international des droits de l'homme, notamment la Déclaration universelle des droits de l'homme, le Pacte international relatif aux droits civils et politiques, et la CEDAW, comme fournissant un cadre global de protection des droits .
on: L'IA amplifie et aggrave les inégalités existantes, en particulier pour les femmes, les filles, le Sud global et d'autres groupes marginalisés, ce qui nécessite des réponses proactives en matière de gouvernance
44 % des systèmes d'IA évalués présentent des biais de genre, et l'IA reproduit et amplifie des stéréotypes néfastes parce que les données d'entraînement reflètent les biais existants - L'IA amplifie les biais de genre
Arg. 2Bahous présente des preuves que les systèmes d'IA reproduisent et amplifient des stéréotypes de genre néfastes parce qu'ils sont entraînés sur des données qui reflètent déjà les biais existants. Il ne s'agit pas d'un problème marginal, mais d'un problème systémique affectant près de la moitié de tous les systèmes d'IA évalués.
Bahous a cité des données montrant que 44 % des systèmes d'IA évalués présentent des biais de genre , et que les systèmes d'IA reproduisent et amplifient des stéréotypes néfastes parce qu'ils sont entraînés sur des données qui reflètent déjà les biais existants .
on: L'IA amplifie et aggrave les inégalités existantes, en particulier pour les femmes, les filles, le Sud global et d'autres groupes marginalisés, ce qui nécessite des réponses proactives en matière de gouvernance
Jusqu'à 99 % des deepfakes et des images sexuelles manipulées en ligne ciblent des femmes, et 41 % des femmes s'autocensurent sur les réseaux sociaux pour éviter les abus - Deepfakes et autocensure
Arg. 3Bahous présente des statistiques alarmantes sur la dimension genrée des préjudices facilités par l'IA, notamment les deepfakes et les images sexuelles manipulées. Elle relie ce phénomène à un effet dissuasif plus large sur la participation des femmes à la vie publique et aux processus démocratiques.
Des recherches d'ONU Femmes ont révélé que près d'une femme sur quatre parmi les défenseures des droits humains, les militantes et les journalistes interrogées avait subi des violences en ligne assistées par l'IA, et que 6 % avaient été victimes de deepfakes ou d'images numériquement manipulées . Des recherches montrent que jusqu'à 99 % des deepfakes et des images sexuelles manipulées en ligne ciblent des femmes , et que 41 % de l'ensemble des femmes interrogées ont déclaré s'autocensurer sur les réseaux sociaux pour éviter les abus .
Les femmes sont sous-représentées dans le développement de l'IA, ne constituant que 30 % de la main-d'œuvre mondiale dans ce secteur, et l'égalité de genre reste largement invisible dans les cadres de gouvernance de l'IA - L'exclusion des femmes de la gouvernance de l'IA
Arg. 4Bahous soutient que la responsabilité en matière de gouvernance de l'IA commence par quatre questions : qui développe l'IA, qui en bénéficie, qui en supporte les risques, et qui a voix au chapitre. Les données révèlent que les femmes sont systématiquement exclues de ces quatre dimensions.
Bahous a indiqué que les femmes ne représentent que 30 % de la main-d'œuvre mondiale dans le secteur de l'IA , et que 88 % des principaux chercheurs en IA sont des hommes, selon le rapport du groupe scientifique indépendant . Elle a également noté que, sur 138 pays évalués, seuls 24 font référence au genre dans leurs stratégies nationales d'IA, et que seulement 18 incluent des dispositions substantielles tenant compte du genre .
Les évaluations d'impact sur le genre et les droits de l'enfant doivent être obligatoires, réalisées avant le déploiement avec la participation des communautés concernées - Évaluations d'impact de genre obligatoires
Arg. 5Bahous appelle à des évaluations d'impact sur les droits humains obligatoires avant et après le déploiement de l'IA, l'égalité de genre devant être traitée comme non négociable plutôt qu'optionnelle. Elle souligne également que la responsabilité exige une participation significative des femmes, des filles et des autres communautés concernées.
Bahous a appelé à des évaluations obligatoires de l'impact sur les droits humains avant et après le déploiement, avec l'égalité des genres traitée comme non négociable et non comme optionnelle , et a déclaré que les femmes et les filles, les technologues féministes, les communautés autochtones, les organisations de travailleurs, les défenseurs des droits des personnes handicapées et la société civile doivent être impliqués et habilités de manière significative .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et des droits à un recours en temps opportun
Les femmes et les filles, les technologues féministes, les communautés autochtones et la société civile doivent être véritablement impliquées et habilitées dans la gouvernance de l'IA - Exigence de participation inclusive
Arg. 6Bahous soutient que la responsabilité dans la gouvernance de l'IA exige une participation authentique de ceux qui sont les plus touchés, notamment les femmes et les filles, les technologues féministes, les communautés autochtones, les organisations de travailleurs, les défenseurs des droits des personnes handicapées et la société civile. Sans cela, les cadres de gouvernance ne parviendront pas à répondre aux besoins des personnes les plus exposées.
Bahous a déclaré que la responsabilité exige la participation, et que les femmes et les filles, les technologues féministes, les communautés autochtones, les organisations de travailleurs, les défenseurs des droits des personnes handicapées et la société civile doivent être impliqués et habilités de manière significative .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud global, doivent être incluses de manière significative dans les processus de gouvernance de l'IA, et non simplement consultées après que les décisions ont été prises
L'IA est un outil politique, non un bien de consommation, et la gouvernance doit choisir entre les droits numériques ou l'oligarchie - L'IA comme outil politique
Arg. 1López Agueda soutient que le contexte géopolitique révèle que l'IA n'est pas simplement un produit de consommation, mais un outil politique aux implications profondes pour le pouvoir. Il pose le choix de manière tranchée : soit la gouvernance de l'IA défend les droits numériques, soit elle mène à l'oligarchie.
López Agueda a déclaré que le contexte géopolitique actuel nous montre que l'IA n'est pas un bien de consommation mais un outil politique, et qu'aujourd'hui l'IA est puissante et ne dispose que de deux voies : celle des droits numériques ou celle menant vers une oligarchie .
Sans une gouvernance inclusive, le Sud global ne servira qu'à alimenter les grandes puissances en tant que réservoir de données - Le Sud global comme colonie de données
Arg. 2López Agueda avertit que sans une gouvernance mondiale inclusive de l'IA, le Sud global risque d'être réduit à n'être qu'un simple fournisseur de données et de ressources au profit des nations les plus puissantes. Il appelle à un dialogue mondial démocratique et inclusif sur l'IA.
López Agueda a déclaré que soit nous agissons, soit le Sud global ne servira qu'à alimenter les grandes puissances, car il ne sera qu'un simple fournisseur de données, et que nous devons donc adopter une approche inclusive et mondiale lorsque nous abordons la question de l'IA .
on: L'IA amplifie et accentue les inégalités existantes, en particulier pour les femmes, les filles, le Sud global et d'autres groupes marginalisés, ce qui nécessite des réponses proactives en matière de gouvernance
La diligence raisonnable en matière de droits humains et les évaluations d'impact doivent être obligatoires avant et après le déploiement de l'IA, et non simplement aspirationnelles - Diligence raisonnable obligatoire
Arg. 1Nighat Dad soutient que la diligence raisonnable en matière de droits humains, telle qu'elle est actuellement pratiquée par la plupart des entreprises d'IA, ne répond pas aux exigences des Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme. Elle intervient après que les décisions de co-conception ont été prises, uniquement là où les réglementations l'imposent, et sans la participation des personnes concernées.
Dad a déclaré que la diligence raisonnable en matière de droits humains intervient après que les décisions de co-conception ont été prises, là où les réglementations l'imposent, et sans la participation des personnes réellement concernées, ce qui signifie que ce qui existe dans la plupart des cas n'est pas de la diligence raisonnable, mais de la documentation . Elle a recommandé que les évaluations d'impact sur le genre et les droits de l'enfant soient obligatoires, menées avant le déploiement avec la participation des communautés concernées, et non simplement documentées .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud, doivent être véritablement incluses dans les processus de gouvernance de l'IA, et non simplement consultées après que les décisions ont été prises
on: La question de savoir si le principal lieu d'exercice de la diligence raisonnable en matière de droits humains doit être la phase préalable au déploiement ou s'étendre en continu tout au long du cycle de vie de l'IA
La diligence raisonnable en matière de droits humains est appliquée de manière inégale selon les marchés, créant un régime de droits à deux vitesses déterminé par la géographie - Inégalité géographique dans la diligence raisonnable
Arg. 2Dad soutient que les entreprises mènent des évaluations significatives des droits humains principalement là où la loi l'exige, comme dans l'UE, puis déploient les mêmes systèmes dans les pays du Sud sans processus équivalents. Il s'agit d'un choix structurel, et non d'un manque de capacité, qui crée un régime de droits à deux vitesses.
Dad a déclaré que les entreprises mènent des évaluations significatives là où la loi l'exige, principalement dans l'UE, puis déploient le même système dans les pays du Sud sans processus équivalent, et a qualifié cela de choix structurel, et non de manque de capacité . Elle a noté que la profondeur d'une évaluation des risques dépend non pas du risque encouru, mais de la juridiction dans laquelle on se trouve .
on: La question de savoir si l'inégalité géographique dans la diligence raisonnable en matière de droits humains résulte d'un choix structurel des entreprises ou d'un manque de capacité
Les violences basées sur le genre facilitées par la technologie ne peuvent être traitées comme un problème de sécurité de niche ; tout cadre de diligence raisonnable qui n'y répond pas exclut de facto la moitié de la population de sa protection - Les VBGFT comme problème systémique
Arg. 3Dad soutient que lorsque les femmes se retirent des espaces numériques en raison de violences basées sur le genre facilitées par la technologie, il ne s'agit pas seulement d'un préjudice individuel, mais d'un préjudice collectif pour le discours public et la participation démocratique. Tout cadre de diligence raisonnable qui ne traite pas explicitement cette question exclut la moitié de la population de sa protection.
L'organisation de Dad, la Digital Rights Foundation, a documenté plus de 23 000 cas de violences facilitées par la technologie sur 10 ans, touchant de manière disproportionnée les femmes, les filles et les jeunes, notamment des images synthétiques non consensuelles, une modération automatisée défaillante en ourdou, en hindi et en bengali, ainsi que des systèmes de recommandation qui amplifient le harcèlement sexiste . Elle a déclaré que lorsque les femmes se retirent des espaces numériques, cela constitue un préjudice collectif pour le discours public et la participation démocratique .
on: L'IA amplifie et aggrave les inégalités existantes, en particulier pour les femmes, les filles, les pays du Sud et d'autres groupes marginalisés, ce qui nécessite des réponses proactives en matière de gouvernance
Les évaluations d'impact sur le genre et les droits de l'enfant doivent être obligatoires, menées avant le déploiement avec la participation des communautés concernées - Évaluations d'impact sur le genre obligatoires
Arg. 4Dad formule trois recommandations concrètes : des évaluations d'impact obligatoires sur le genre et les droits de l'enfant avant le déploiement, avec la participation des communautés concernées ; des obligations uniformes de diligence raisonnable en matière de droits humains sur tous les marchés ; et des évaluations répétées chaque fois que les capacités de l'IA évoluent de manière significative, notamment en cas d'augmentation des fonctions agentiques.
Dad a recommandé que les évaluations d'impact sur le genre et les droits de l'enfant soient obligatoires, menées avant le déploiement avec la participation des communautés concernées, et non simplement documentées , et que les obligations de diligence raisonnable en matière de droits humains s'appliquent de manière uniforme sur tous les marchés où un système est déployé, soulignant qu'une évaluation des risques couvrant Bruxelles mais pas le Pakistan, le Kenya ou le Brésil ne constitue pas une diligence raisonnable .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et le droit à des recours en temps opportun.
Les organisations de la société civile dans les pays du Sud sont des capteurs précoces des préjudices liés à l'IA, mais restent sous-financées et précaires, ce qui nécessite des ressources et une connexion aux processus décisionnels - Financement des données probantes de la société civile
Arg. 5Dad soutient que le problème des preuves dans la gouvernance de l'IA est fondamentalement un problème de ressources. Les organisations de la société civile dans les pays du Sud sont les premières à détecter les préjudices liés à l'IA, mais leur documentation est non financée, précaire et traitée comme une anecdote plutôt que comme une preuve.
Dad a souligné que son organisation avait documenté la production d'images intimes synthétiques ciblant les femmes des années avant que ce phénomène ne s'invite dans les discussions politiques mondiales, mais que cette documentation est non financée, précaire et traitée comme une anecdote plutôt que comme une preuve . Elle a appelé à ce que ce système d'alerte précoce existant soit doté de ressources et connecté aux processus décisionnels, y compris au panel scientifique .
on: Le rôle approprié des preuves dans l'orientation des mesures de gouvernance de l'IA : faut-il agir dès maintenant sur la base des preuves existantes de préjudices ou attendre des données longitudinales plus rigoureuses ?
Les cadres de gouvernance de l'IA doivent aller au-delà des modèles autorégulateurs fondés sur l'éthique pour adopter des cadres normatifs ancrés dans le droit international des droits de l'homme - Au-delà de l'éthique volontaire
Arg. 1Chetty soutient que les modèles de gouvernance dominants, ancrés dans l'IA éthique ou responsable, demeurent structurellement insuffisants, car ils sont en grande partie autorégulateurs, pilotés par des acteurs dominants et calibrés pour les pays à revenus élevés. Elle propose le cadre Just AI comme alternative normative enracinée dans le droit international des droits de l'homme.
Chetty a déclaré que les modèles de gouvernance dominants, fondés sur les notions d'IA éthique ou responsable, restent structurellement insuffisants, dans la mesure où ces cadres sont en grande partie autorégulateurs, pilotés par des acteurs dominants, calibrés pour les pays à revenus élevés et ne tiennent pas compte de la souveraineté ni de l'autonomie . Elle a soutenu que ces cadres approfondissent les inégalités existantes en extrayant de la valeur des individus, des communautés et des nations sans contrepartie, contribution ni contrôle .
on: L'IA amplifie et accentue les inégalités existantes, en particulier pour les femmes, les filles, le Sud global et d'autres groupes marginalisés, ce qui nécessite des réponses proactives en matière de gouvernance
on: La question de savoir si la gouvernance de l'IA doit se concentrer sur des normes contraignantes universelles ou permettre un véritable pluralisme au-delà d'un socle commun de garanties en matière de droits
La séparation entre la gouvernance des données et la gouvernance de l'IA dans les forums internationaux occulte la justice des données fondamentale qui doit guider tous les systèmes d'IA - La justice des données est indissociable de la gouvernance de l'IA
Arg. 2Chetty soutient que la gouvernance de l'IA est indissociable de la gouvernance des données, et que la séparation de ces deux domaines dans les forums internationaux occulte les enjeux fondamentaux de justice des données qui doivent guider tous les systèmes d'IA. La justice des données est essentiellement éclairée par un droit d'accès aux données sous des formes substantielles et procédurales.
Chetty a appelé à établir une compréhension mondialement reconnue selon laquelle la gouvernance de l'IA est indissociable de la gouvernance des données, et a déclaré que la séparation entre la gouvernance des données et la gouvernance de l'IA dans les forums internationaux occulte la justice des données fondamentale qui doit guider tous les systèmes d'IA .
Gouverner l'IA nécessite un nouveau contrat social aux niveaux national et international, et pas seulement une réglementation - Nouveau contrat social
Arg. 1Gutiérrez soutient que l'évolution rapide du paysage du développement de l'IA signifie que la gouvernance ne peut se limiter à la seule réglementation. Ce qu'il faut, c'est l'adoption d'un nouveau contrat social, tant au niveau international qu'au niveau national, qui réponde à la question fondamentale de ce que la technologie fait aux êtres humains.
Gutiérrez a déclaré que nous devrions parler de gouvernance et de l'adoption d'un nouveau contrat social, non seulement dans le contexte international mais aussi dans le contexte national . Il a également souligné la séparation entre légalité et légitimité dans le contexte international, ainsi que l'importance de comprendre l'impact du développement technologique sur les êtres humains, plutôt que de se concentrer uniquement sur ce que les êtres humains peuvent faire avec la technologie .
on: Réglementation contraignante versus cadres de gouvernance plus larges et contrats sociaux pour l'IA
L'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, indépendamment de la richesse, du pouvoir ou de l'influence - Cadres juridiques contraignants
Arg. 1Lampel soutient que l'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, sans égard pour la richesse, le pouvoir ou l'influence, et que la communauté internationale doit commencer à appliquer le droit international des droits de l'homme dès aujourd'hui. Il propose trois actions concrètes : des lignes rouges en matière d'IA, des certifications standardisées liées aux règles de passation des marchés, et un droit à réparation.
Lampel a fait référence à la résolution de l'Assemblée générale des Nations Unies de 2024 sur les systèmes d'IA sûrs, fiables et dignes de confiance pour le développement durable, comme soutenant explicitement le concept de lignes rouges en matière d'IA , et a cité les recommandations de l'UNESCO sur l'éthique de l'IA comme excluant déjà explicitement l'utilisation de l'IA à des fins de notation sociale et de surveillance de masse .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour relever les défis mondiaux liés à la gouvernance de l'IA
on: La question de savoir si la gouvernance de l'IA devrait se concentrer sur des normes universelles contraignantes ou permettre un véritable pluralisme au-delà d'un socle commun de garanties en matière de droits
La gouvernance de l'IA doit intégrer les droits de l'homme tout au long du cycle de vie complet de l'IA, de la conception au déploiement et au suivi - Gouvernance sur l'ensemble du cycle de vie
Arg. 1Cassayre soutient que les droits de l'homme et l'état de droit doivent sous-tendre le développement et le déploiement des technologies numériques, notamment dans le secteur de la justice. Les systèmes d'IA doivent être conçus pour élargir l'accès, répondre aux besoins des personnes et prévenir de nouvelles formes d'exclusion et d'inégalité tout au long de leur cycle de vie.
Cassayre a formulé trois recommandations : les droits de l'homme et l'état de droit doivent sous-tendre le développement et le déploiement des technologies numériques ; des cadres juridiques et réglementaires adaptés doivent accompagner l'innovation ; et des investissements dans les capacités institutionnelles sont nécessaires, notamment pour renforcer l'infrastructure numérique publique au service de la justice et améliorer la culture de l'IA parmi les professionnels du droit et de la justice .
on: La réglementation de l'IA ne freine pas l'innovation ; les normes de sécurité constituent le fondement de la confiance dans la technologie
Les systèmes judiciaires doivent convertir les principes des droits de l'homme en réalité en garantissant la responsabilité lorsque l'IA cause un préjudice, en mettant l'accent sur la transparence, la traçabilité et les recours effectifs - Les systèmes judiciaires en tant que mécanismes de responsabilisation
Arg. 1Arias Arzeno soutient que le véritable défi de la gouvernance de l'IA ne réside pas dans l'adoption de lois ou de principes éthiques, mais dans ce qui se passe lorsqu'une personne estime qu'un système d'IA a violé ses droits fondamentaux. Les systèmes judiciaires sont des institutions essentielles pour traduire les principes en réalité et garantir la responsabilité lorsque l'IA cause un préjudice.
Arias Arzeno a déclaré que la gouvernance n'est plus seulement un concept, mais devient une réalité au moment où une personne considère qu'un système d'IA a violé ses droits fondamentaux et sa vie privée en matière de données . Il a défini quatre priorités pour renforcer les systèmes judiciaires : renforcer les capacités institutionnelles des avocats et des jurés, garantir la transparence et la traçabilité dans l'utilisation de l'IA, assurer une supervision humaine effective, et veiller à ce que toutes les personnes disposent de mécanismes efficaces pour accéder à la justice et obtenir réparation .
on: La gouvernance de l'IA doit être fondée sur le droit international des droits de l'homme en tant que cadre contraignant, et non sur de simples aspirations éthiques
on: La question de savoir si le principal lieu d'exercice du devoir de diligence en matière de droits de l'homme devrait se situer avant le déploiement ou de manière continue tout au long du cycle de vie de l'IA
Aucune institution publique ne peut justifier une décision en affirmant que le système le lui a dicté ; la responsabilité doit incomber aux personnes et aux institutions - Responsabilité institutionnelle humaine
Arg. 2Arias Arzeno soutient que l'utilisation de l'IA dans les tribunaux et les institutions publiques est déjà une réalité, et que le défi consiste à garantir que son utilisation soit transparente, responsable, auditable et compatible avec les droits de l'homme et l'état de droit. Aucune institution ne peut se soustraire à sa responsabilité en attribuant une décision à un système d'IA.
Arias Arzeno a déclaré qu'aucune institution publique ne peut justifier une décision en affirmant que c'est ce que le système lui a indiqué de faire, et que la responsabilité doit incomber aux personnes et aux institutions, la technologie aidant le juge sans jamais le remplacer .
on: La supervision humaine de l'IA doit être réelle et substantielle, et non une simple formalité, avec un être humain identifiable conservant l'autorité de modifier ou d'arrêter les systèmes
L'IA agentique crée le défi de responsabilité juridique le plus important de la décennie, car aucun être humain n'est à l'origine des décisions finales dans les réseaux d'agents autonomes - Lacune de responsabilité de l'IA agentique
Arg. 1El Fallah Seghrouchni soutient que la responsabilité dans les systèmes agentiques constitue le défi juridique le plus important de la décennie, car les réseaux d'agents IA individuellement autonomes produisent des décisions finales sans qu'aucun être humain n'en soit à l'origine. Il est extrêmement difficile de répartir la responsabilité entre les agents ou de remonter la chaîne pour identifier l'origine d'une erreur.
El Fallah Seghrouchni a cité l'exemple de la plateforme Iderati X.0 au Maroc, qui traite 52 millions de transactions administratives par jour, soulignant que lorsqu'un problème survient, il est très difficile d'en identifier la cause exacte . Elle a décrit le défi que représentent les LLMs dotés de 175 à 180 milliards de paramètres et la difficulté d'assurer la responsabilité pour ce qui apparaît dans ces systèmes .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et des droits à un recours en temps utile
on: Le rôle approprié des données probantes dans l'orientation des mesures de gouvernance de l'IA : faut-il agir dès maintenant sur la base des preuves existantes de préjudices ou attendre des données longitudinales plus rigoureuses
Les systèmes d'IA doivent faire l'objet d'une documentation structurée des chaînes d'agents, de la désignation d'un responsable humain identifiable, et d'un droit à un recours en temps utile - Trois obligations de responsabilité
Arg. 2El Fallah Seghrouchni propose trois obligations concrètes en matière de responsabilité dans les systèmes d'IA agentiques : une documentation structurée des chaînes d'agents précisant qui fait quoi et quand ; la désignation d'un être humain identifiable responsable de toutes les questions liées aux droits ; et un droit à un recours en temps utile, en adéquation avec la rapidité des systèmes d'IA.
El Fallah Seghrouchni a proposé que lorsque des agents sont déployés dans des services publics, il doit exister une documentation structurée des chaînes d'agents, un être humain identifiable responsable de toutes les questions liées aux droits, et un droit à un recours en temps utile en adéquation avec la rapidité des systèmes d'IA . Elle a conclu que le fonctionnement de l'algorithme ne doit jamais être autonome en ce qui concerne les droits et la loi .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et des droits à un recours en temps utile
on: Si le principal moment d'exercice du devoir de diligence en matière de droits de l'homme doit se situer avant le déploiement ou de manière continue tout au long du cycle de vie de l'IA
La transparence sur l'empreinte environnementale de l'IA est un droit humain fondamental, permettant aux utilisateurs de faire des choix éclairés entre les outils - La transparence environnementale comme droit humain
Arg. 1Luccioni soutient que la transparence sur la consommation énergétique et les coûts environnementaux de l'IA est un droit humain fondamental, car elle permet aux utilisateurs de faire des choix éclairés entre les outils. Sans cette information, tout choix réel et toute responsabilisation sont impossibles.
Luccioni a déclaré que la transparence est un droit humain fondamental que les utilisateurs devraient obtenir lorsqu'ils utilisent l'IA, en demandant quel en est le coût, d'où proviennent les données et d'où vient l'énergie, afin que les utilisateurs puissent choisir entre l'outil A ou l'outil B . Elle a noté que même des organisations comme l'IEA peinent à obtenir cette information, car les pays membres eux-mêmes ne la détiennent pas .
on: La transparence est une exigence fondamentale dans toutes les dimensions de la gouvernance de l'IA, notamment en ce qui concerne l'utilisation des données, l'impact environnemental et les processus de prise de décision
L'IA agentique amplifie les degrés de séparation entre les utilisateurs et la technologie sous-jacente, rendant plus difficile l'identification de l'origine des défaillances - Opacité de l'IA agentique
Arg. 2Luccioni soutient que l'IA agentique aggrave une situation déjà difficile en matière de transparence et de responsabilité, en ajoutant davantage de couches entre les utilisateurs et la technologie sous-jacente. À mesure que les systèmes d'IA deviennent plus agentiques, il devient de plus en plus difficile d'identifier l'origine des défaillances.
Luccioni a décrit la progression depuis les modèles d'IA pouvant être interrogés directement, vers des systèmes d'IA dotés de filtres et de composants supplémentaires, jusqu'aux agents d'IA présentant des degrés de séparation encore plus importants, soulignant que lorsqu'une défaillance survient, on ne sait pas d'où elle provient . Elle a appelé à imposer des garde-fous et des normes de sécurité et de durabilité à chaque composant du système, quel que soit leur nombre .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et des droits à un recours en temps opportun
on: La question de savoir si le principal lieu d'exercice du devoir de diligence en matière de droits de l'homme devrait se situer avant le déploiement ou de manière continue tout au long du cycle de vie de l'IA
Les centres de données rendent les impacts négatifs de l'IA très locaux en termes d'eau, d'énergie, d'émissions et de santé, affectant de manière disproportionnée les populations les plus marginalisées - Impacts environnementaux locaux
Arg. 3Luccioni soutient que si les bénéfices de l'IA peuvent techniquement être mondiaux, les impacts environnementaux négatifs sont très locaux, concentrés autour des centres de données en termes d'eau, d'énergie, d'émissions et de santé. Ces impacts locaux affectent de manière disproportionnée les populations les plus marginalisées.
Luccioni a déclaré que si les bénéfices de l'IA peuvent techniquement être mondiaux, les impacts négatifs en termes d'eau, d'énergie, d'émissions et de santé sont très locaux et touchent les populations les plus marginalisées . Elle a noté que les centres de données constituent un moyen concret d'ancrer le débat sur les implications de l'IA en matière de droits de l'homme .
La transparence sur la consommation énergétique de l'IA est un droit humain fondamental, pourtant même les organisations internationales peinent à obtenir cette information de leurs pays membres - Déficit de transparence énergétique
Arg. 4Luccioni met en évidence un déficit de transparence significatif concernant la consommation énergétique de l'IA, notant que même de grandes organisations internationales comme l'IEA ne parviennent pas à obtenir des données fiables de leurs pays membres. Ce manque de transparence empêche toute responsabilisation réelle et toute prise de décision éclairée.
Luccioni a déclaré que des organisations comme l'IEA, avec laquelle elle a collaboré, peinent à obtenir des informations sur la consommation énergétique de l'IA, car même les pays membres ne disposent pas de ces données . Elle a décrit la transparence comme un combat qu'elle mène depuis plusieurs années en tant que droit humain fondamental .
Les étiquettes d'efficacité énergétique pour les modèles d'IA, comme l'AI Energy Score Project, constituent une première étape vers une prise de décision éclairée et une réglementation future - L'étiquetage énergétique comme première étape
Arg. 5Luccioni propose des étiquettes d'efficacité énergétique pour les modèles d'IA comme première étape concrète vers la transparence et la responsabilité concernant l'impact environnemental de l'IA. Plutôt que de restreindre immédiatement le déploiement, elle préconise de d'abord quantifier et mesurer les impacts afin que les personnes puissent prendre des décisions éclairées.
Luccioni a décrit le projet AI Energy Score, qui crée des étiquettes d'efficacité énergétique pour les modèles d'IA analogues aux étiquettes énergétiques des appareils électroménagers, comme une étape vers une prise de décision éclairée . Elle a soutenu que la quantification et la mesure des impacts constituent le préalable à de nombreuses autres actions qui peuvent et doivent être entreprises en matière d'IA .
Le registre des algorithmes et les évaluations d'impact sur les droits fondamentaux utilisés aux Pays-Bas illustrent des outils concrets permettant de traduire les exigences légales en responsabilité - Outils pratiques de responsabilisation
Arg. 1Aerdts présente les outils pratiques des Pays-Bas en matière de responsabilité de l'IA comme des exemples concrets de la manière dont les exigences légales peuvent être traduites en lignes directrices opérationnelles. Ceux-ci comprennent un cadre algorithmique, une évaluation d'impact sur les droits fondamentaux et les algorithmes, ainsi qu'un registre des algorithmes.
Aerdts a décrit le cadre algorithmique des Pays-Bas qui traduit les exigences légales en lignes directrices pratiques pour les organisations publiques, notamment un manuel sur l'équité, des instruments de test des biais et des évaluations du profilage à risque . Elle a également mentionné l'évaluation d'impact sur les droits fondamentaux et les algorithmes, qui aide à identifier les risques liés aux droits humains dans les systèmes d'IA , ainsi que le registre des algorithmes qui répertorie l'ensemble des algorithmes utilisés par le gouvernement néerlandais dans un souci de transparence .
on: La transparence est une exigence fondamentale dans toutes les dimensions de la gouvernance de l'IA, notamment en ce qui concerne l'utilisation des données, l'impact environnemental et les processus décisionnels
Lors de l'élaboration de politiques destinées aux enfants et aux jeunes, ceux-ci doivent être véritablement associés au processus décisionnel aux côtés des parents et des éducateurs, et ne pas se retrouver seuls face à des problèmes trop importants pour les parents mais trop mineurs pour la police - Inclusion authentique des jeunes dans les politiques
Arg. 2Aerdts soutient que lors de l'élaboration de politiques destinées aux enfants et aux jeunes, ceux-ci doivent être véritablement associés au processus décisionnel. Elle souligne un manque criant : les jeunes sont confrontés à des problèmes trop importants pour leurs éducateurs ou leurs parents, mais jugés trop mineurs pour la police, les laissant sans soutien concret.
Aerdts a indiqué que les Pays-Bas s'adressent aux panels de jeunes de l'UNICEF et souhaitent également associer les parents, tout en veillant à ce que les plateformes assument leurs responsabilités . Elle a rapporté que lors d'échanges avec des jeunes, ceux-ci ont mentionné que certains problèmes auxquels ils sont confrontés sont trop importants pour leurs éducateurs ou leurs parents, mais semblent trop mineurs pour la police, les laissant à la recherche d'un moyen concret d'y remédier .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud global, doivent être véritablement associées aux processus de gouvernance de l'IA, et non simplement consultées une fois les décisions prises
La liberté de pensée, longtemps englobée dans la liberté d'expression, doit être réinterprétée dans le contexte où l'IA menace l'autonomie cognitive par le micro-ciblage et la manipulation - L'autonomie cognitive en danger
Arg. 1Cet argument a déjà été repris ci-dessus dans les entrées de Jhalak M. Kakkar.
Il existe un défi méthodologique dans l'étude des enfants en tant que catégorie protégée, ce qui explique en partie le manque de données probantes sur l'impact de l'IA sur les enfants et nécessite une approche prudente - Obstacles méthodologiques à la recherche sur les enfants
Arg. 1Cet argument a été avancé par Alvitta Ottley, et non par Sonia Livingstone. Veuillez consulter la fiche d'Alvitta Ottley pour cet argument.
on: La question de savoir si la gouvernance de l'IA devrait privilégier la protection des enfants en restreignant leur accès ou en intégrant des garanties respectueuses des droits dans les systèmes
La loi proposée par le Canada exigerait que les chatbots d'IA soient déclarés sûrs avant d'être accessibles aux enfants, avec un commissaire au numérique chargé d'assurer la conformité - Législation sur la preuve de sécurité
Arg. 1Lametti décrit l'approche législative proposée par le Canada en matière de sécurité de l'IA pour les enfants, qui exigerait que les chatbots d'IA soient déclarés sûrs avant de pouvoir être accessibles aux enfants. Un commissaire au numérique serait créé pour veiller au respect de cette exigence.
Lametti a présenté la nouvelle politique du Canada, L'IA pour tous, qui vise à garantir le droit à la vie privée et la sécurité dans l'utilisation de l'IA, ainsi qu'un nouveau projet de loi sur les enfants qui interdirait l'accès de toute plateforme sociale aux moins de 16 ans jusqu'à ce qu'elle soit déclarée sûre . Il a précisé que les chatbots d'IA devraient également être déclarés sûrs avant d'être accessibles aux enfants, avec un commissaire au numérique chargé d'assurer la conformité .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dans les systèmes dès la phase de conception, et la responsabilité incombant aux développeurs et aux déployeurs plutôt qu'aux enfants ou aux familles
on: La question de savoir si la gouvernance de l'IA devrait privilégier la protection des enfants en restreignant leur accès ou en intégrant dans les systèmes des garanties respectueuses de leurs droits
Les droits des enfants doivent être au cœur de la gouvernance de l'IA en tant que considération transversale, avec une sécurité intégrée dans les systèmes dès le départ plutôt qu'ajoutée après qu'un préjudice se soit produit - Les droits des enfants comme question transversale
Arg. 1Henriques plaide au nom de plus de 120 signataires d'une déclaration commune que les droits des enfants doivent être au cœur de la gouvernance de l'IA en tant que considération transversale. Les enfants comptent parmi les premiers et les plus fréquents utilisateurs des nouvelles technologies, et pourtant ils restent largement absents des stratégies nationales en matière d'IA et des cadres de gouvernance.
Henriques s'est exprimée au nom de plus de 120 signataires de la Déclaration commune sur les droits des enfants dans le cadre du Dialogue sur l'IA, une campagne mondiale coordonnée par la Five Rights Foundation . Elle a souligné que les enfants comptent parmi les premiers et les plus fréquents utilisateurs des nouvelles technologies, tout en restant largement absents des stratégies nationales en matière d'IA et des cadres de gouvernance .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dans les systèmes dès la phase de conception, et la responsabilité reposant sur les développeurs et les déployeurs plutôt que sur les enfants ou les familles
Les enfants ne constituent pas un groupe homogène ; les enfants autochtones, les filles, les enfants handicapés et les enfants d'ascendance africaine subissent des impacts disproportionnés dus aux lacunes de la gouvernance de l'IA - Intersectionnalité des droits de l'enfant
Arg. 2Henriques soutient que les enfants ne doivent pas être traités comme un groupe homogène dans les discussions sur la gouvernance de l'IA. Les enfants autochtones, les filles, les enfants handicapés et les enfants d'ascendance africaine subissent des impacts disproportionnés dus aux lacunes de la gouvernance de l'IA, et leurs intersectionnalités doivent être reconnues.
Henriques a déclaré que les enfants ne constituent pas un groupe homogène et que nous devons reconnaître leurs intersectionnalités, notant que les droits des enfants autochtones, des filles, des enfants handicapés et des enfants d'ascendance africaine sont affectés de manière disproportionnée en raison des lacunes de la gouvernance de l'IA . Elle a mis en avant l'ECA Digital du Brésil comme un cadre de référence pour la protection des droits des enfants dans l'environnement numérique .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dans les systèmes dès la phase de conception, et la responsabilité reposant sur les développeurs et les déployeurs plutôt que sur les enfants ou les familles
on: La question de savoir si la gouvernance de l'IA doit privilégier la protection des enfants en restreignant leur accès ou en intégrant des garanties respectueuses des droits dans les systèmes
Les enfants ne devraient interagir avec les systèmes d'IA que s'ils sont avérés sûrs et conçus pour respecter les droits des enfants, la responsabilité incombant à ceux qui construisent et tirent profit de la technologie - Preuve de sécurité avant l'exposition des enfants
Arg. 3Henriques soutient que les enfants ne devraient interagir qu'avec des systèmes d'IA dont la sécurité a été prouvée et qui sont conçus pour respecter les droits des enfants, en tenant compte de leurs perspectives dans les décisions qui les concernent. La responsabilité doit incomber à ceux qui construisent et tirent profit de la technologie, et non aux enfants ou aux parents.
Henriques a déclaré que les enfants ne devraient interagir avec les systèmes d'IA que si ceux-ci sont avérés sûrs et conçus pour respecter les droits des enfants, en tenant compte de leurs perspectives dans les décisions qui les concernent . Elle a souligné que la responsabilité doit incomber à ceux qui construisent et tirent profit de cette technologie .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dans les systèmes dès la phase de conception, et la responsabilité reposant sur les développeurs et les déployeurs plutôt que sur les enfants ou les familles
La CEDAW fournit un cadre essentiel obligeant les États à parvenir à une égalité réelle et à s'attaquer aux obstacles structurels dans la gouvernance de l'IA - La CEDAW en tant que cadre de gouvernance de l'IA
Arg. 1Eghobamien-Mshelia soutient que la CEDAW fournit un cadre essentiel pour aborder les réalités genrées de la gouvernance de l'IA. Elle oblige les États non seulement à interdire la discrimination, mais à parvenir à une égalité réelle en s'attaquant aux obstacles structurels et réglementaires, aux stéréotypes et aux rapports de force inégaux.
Eghobamien-Mshelia a déclaré que la CEDAW oblige les États non seulement à interdire la discrimination, mais à parvenir à une égalité réelle en s'attaquant aux obstacles structurels et réglementaires, aux stéréotypes et aux rapports de force inégaux . Elle a souligné que la CEDAW reconnaît également que la discrimination est souvent aggravée par des facteurs tels que la race, le handicap, l'âge, le statut migratoire et la pauvreté, ce qui nécessite des mesures ciblées et proactives pour lutter contre les discriminations intersectionnelles .
on: L'IA amplifie et accentue les inégalités existantes, en particulier pour les femmes, les filles, le Sud mondial et d'autres groupes marginalisés, ce qui nécessite des réponses proactives en matière de gouvernance
Les campagnes de désinformation amplifiées par l'IA et les discours haineux contraignent les femmes et les filles à s'autocensurer, compromettant ainsi leur participation démocratique - Désinformation et exclusion démocratique
Arg. 1Smyth soutient que les campagnes de désinformation amplifiées par l'IA et les discours haineux portent atteinte au droit des femmes et des filles à exercer leur liberté d'expression en les contraignant à s'autocensurer, à fermer leurs comptes numériques ou à se retirer des espaces en ligne. Cela contribue à un effet dissuasif plus large sur leur participation pleine et égale à la société.
Smyth a déclaré que les campagnes de désinformation amplifiées par l'IA et les discours haineux portent atteinte au droit des femmes et des filles à exercer leur liberté d'expression en les contraignant à s'autocensurer, à fermer leurs comptes numériques ou à se retirer de leur participation aux espaces en ligne . Elle a souligné que cela contribue à un effet dissuasif plus large sur leur participation pleine, égale et significative à la société .
on: L'IA amplifie et approfondit les inégalités existantes, en particulier pour les femmes, les filles, les pays du Sud et d'autres groupes marginalisés, nécessitant des réponses proactives en matière de gouvernance
Les outils d'IA utilisés pour la modération de contenu en ligne sans supervision humaine peuvent amplifier la désinformation, affectant de manière disproportionnée les femmes et les filles - La modération automatisée amplifie la désinformation
Arg. 2Smyth soutient que le déploiement de l'IA pour la modération de contenu en ligne sans supervision humaine peut amplifier la désinformation, compromettant ainsi l'intégrité du paysage informationnel. Cela affecte de manière disproportionnée les femmes et les filles.
Smyth a déclaré que le déploiement de l'IA pour la modération de contenu en ligne sans supervision humaine peut amplifier la désinformation, compromettant ainsi l'intégrité du paysage informationnel, et que cela affecte de manière disproportionnée les femmes et les filles .
Le décret brésilien interdisant les images intimes synthétiques basées sur de vraies personnes tierces illustre une action législative concrète contre les violences de genre facilitées par l'IA - Action législative sur les images synthétiques
Arg. 1Brant met en lumière l'action législative du Brésil contre les violences de genre facilitées par l'IA, notamment un décret établissant des responsabilités proactives pour les plateformes et les entreprises d'IA, y compris l'interdiction de créer des images intimes synthétiques basées sur de vraies personnes tierces.
Brant a décrit le statut numérique brésilien pour les enfants et les adolescents en ligne, qui exige des plateformes qu'elles adoptent des mesures de protection de l'enfance dès la phase de conception et interdit la publicité ciblée basée sur les données personnelles des enfants . Il a également décrit un décret publié le mois précédent visant à lutter contre les violences envers les filles et les femmes dans les espaces en ligne, notamment l'interdiction de créer des images intimes synthétiques basées sur de vraies personnes tierces .
L'intégrité de l'information doit être comprise dans sa dimension collective ou sociale, en tant que composante du droit d'accès à une information exacte et fiable, et l'impact de l'IA sur la viabilité économique du journalisme doit être pris en compte - L'intégrité de l'information en tant que droit collectif
Arg. 2Brant plaide pour une conception élargie des droits de l'homme dans le débat sur l'IA, soulignant l'intégrité de l'information comme enjeu central. Il inscrit l'intégrité de l'information dans le cadre de l'Article 19, dans sa dimension collective ou sociale, englobant la nécessité d'un écosystème informationnel fournissant une information cohérente, exacte et fiable.
Brant a appelé à considérer l'intégrité de l'information comme faisant partie de l'Article 19, dans une conception élargie de l'accès à l'information dans sa dimension collective ou sociale, et a affirmé que nous avons besoin d'un écosystème informationnel capable de fournir une information cohérente, exacte et fiable . Il a également souligné que la manière dont l'IA soutient et affecte l'organisation économique et la viabilité du journalisme devrait être une source de préoccupation .
Des normes communes et bien conçues en matière de risques liés à l'IA, intégrant les considérations relatives aux droits de l'homme, sont nécessaires pour garantir le fonctionnement cohérent des instances de diligence raisonnable en matière de droits de l'homme au sein des systèmes multi-agents interconnectés - Nécessité de normes communes sur les risques liés à l'IA
Arg. 1Park soutient que si les entreprises individuelles peuvent définir le risque lié à l'IA et évaluer leurs modèles en conséquence, le problème survient lorsque des systèmes multi-agents provenant de différentes entreprises sont interconnectés, chaque entreprise ayant sa propre définition du risque lié à l'IA. Des normes communes et bien conçues sont nécessaires pour garantir une diligence raisonnable cohérente en matière de droits de l'homme au sein de ces systèmes.
Park a indiqué que le problème se pose lorsque des systèmes multi-agents provenant de différentes entreprises sont interconnectés, celles-ci ayant leur propre définition du risque lié à l'IA, certains agents accordant plus d'importance aux droits de l'homme que d'autres . Il a cité la taxonomie des risques liés à l'IA issue du projet BTEC du HCDH comme un travail important qui doit être développé de manière plus concrète et pratique afin d'établir une base commune avec de nombreuses parties prenantes .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et le droit à un recours en temps opportun
Les enfants d'aujourd'hui sont des natifs de l'IA qui ont besoin d'une éducation et de compétences en pensée critique pour interagir avec l'IA de manière équilibrée, et leurs voix doivent s'intégrer dans les discussions sur la gouvernance - Littératie en IA pour les enfants
Arg. 2Park soutient que les enfants d'aujourd'hui sont des natifs de l'IA qui l'utilisent naturellement dans la recherche, les recommandations et l'apprentissage au quotidien. Il est donc important qu'ils développent des compétences en pensée critique pour interagir avec l'IA de manière équilibrée, et leurs voix devraient s'intégrer dans les discussions sur la gouvernance.
Park a déclaré que les enfants d'aujourd'hui sont des natifs de l'IA qui l'utilisent naturellement dans la recherche, les recommandations et l'apprentissage au quotidien, et qu'il est important qu'ils l'appréhendent avec un esprit critique . Il a suggéré que lorsque les programmes scolaires d'éducation et de discussion sont mis en lien avec des ONG et des comités compétents, les enfants peuvent exprimer la manière dont l'IA les affecte de façon équilibrée, et ces voix peuvent s'intégrer dans les discussions sur la gouvernance .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dans les systèmes dès la phase de conception, et la responsabilité incombant aux développeurs et aux déployeurs plutôt qu'aux enfants ou aux familles
on: La question de savoir si la gouvernance de l'IA doit privilégier la protection des enfants en restreignant leur accès ou en intégrant des garanties respectueuses des droits dans les systèmes
Il existe un décalage d'évaluation entre les métriques d'ingénierie telles que la vitesse et la précision, et les questions sociétales relatives à la protection des droits humains et à la responsabilité des institutions - Décalage d'évaluation
Arg. 1Ottley soutient qu'il existe un décalage fondamental entre les questions que les ingénieurs posent sur l'IA (peut-on la rendre plus rapide, plus précise, plus performante ?) et celles que les sociétés posent (les droits humains sont-ils protégés, les institutions sont-elles responsables, la société s'en porte-t-elle mieux ?). Ce sont tout simplement des questions différentes qui conduisent à des évaluations différentes du succès.
Ottley a illustré ce décalage en faisant remarquer qu'un parent ne demande pas si le modèle a obtenu 94 % sur un benchmark récent, mais s'il est utilisable par son enfant et si celui-ci sait quand ne pas lui faire confiance ; de même, un médecin ne demande pas s'il s'agit du dernier modèle en date, mais s'il peut s'y fier lorsque la vie d'un patient est en jeu . Elle a déclaré que les discussions en cours ne portent pas sur la question de savoir si l'IA est plus performante que l'année dernière, mais sur celle de savoir si les droits humains sont protégés, si les institutions restent responsables et si la société s'en porte mieux .
Il existe un manque de données probantes significatif concernant l'impact de l'IA sur la prise de décision des individus, l'apprentissage des enfants, les décisions cliniques et le travail des agents publics, ce qui nécessite des études longitudinales et interdisciplinaires - Manque de données probantes sur l'impact de l'IA
Arg. 2Ottley souligne un manque de données probantes significatif : si les données sur les performances des modèles d'IA sont abondantes, celles portant sur l'impact de l'IA sur la prise de décision des individus, l'apprentissage des enfants, les décisions cliniques ou le travail des agents publics sont très rares. Répondre à ces questions nécessite des études longitudinales et une collaboration interdisciplinaire.
Ottley a déclaré que nous disposons de nombreuses données sur les performances des modèles d'IA, mais de très peu sur la façon dont l'IA affecte la prise de décision des individus, l'efficacité de l'IA pour aider les enseignants à enseigner, son impact sur les décisions cliniques, son aide à l'apprentissage des enfants ou son effet sur le travail des agents publics . Elle a noté que répondre à ces questions nécessite des études longitudinales, des partenariats avec des organisations, des collaborations interdisciplinaires et un travail rigoureux avec des communautés protégées et mal desservies .
on: Le rôle approprié des données probantes dans l'orientation des actions de gouvernance de l'IA : faut-il agir dès maintenant sur la base des données existantes attestant des préjudices, ou attendre des données longitudinales plus rigoureuses ?
La société doit définir ce que représente le succès, et la science doit déterminer comment le mesurer ; de bonnes décisions en situation d'incertitude exigent de rendre les valeurs explicites et les données probantes rigoureuses - La société définit le succès, la science le mesure
Arg. 3Ottley plaide pour une nouvelle façon de concevoir la relation entre la société et la science dans la gouvernance de l'IA. La société doit définir ce que représente le succès, la science doit déterminer comment le mesurer, et ensemble elles doivent construire les données probantes permettant de déterminer si ce succès est effectivement atteint.
Ottley a déclaré que la société doit décider de ce à quoi ressemble le succès et que la science doit déterminer comment le mesurer, et qu'ensemble elles doivent construire les données probantes qui nous indiquent si nous l'atteignons réellement . Elle a conclu que de bonnes décisions en situation d'incertitude ne découlent pas de l'élimination de l'incertitude, mais de la clarification des valeurs, de la rigueur des données probantes et de la compréhension de l'incertitude .
Il existe un défi méthodologique dans l'étude des enfants en tant que catégorie protégée, ce qui explique en partie le manque de données probantes sur l'impact de l'IA sur les enfants et nécessite une approche prudente - Obstacles méthodologiques à la recherche sur les enfants
Arg. 4Ottley souligne un défi méthodologique rarement évoqué : les enfants constituent une catégorie protégée dans le cadre de la recherche, ce qui implique des limitations quant à ce qui peut être étudié et à la manière de le faire. Cela explique en partie le manque de données probantes sur l'impact de l'IA sur les enfants et signifie que les choses sont souvent développées sans que les enfants y soient associés.
Ottley a noté que les enfants, ainsi que les femmes enceintes et les personnes incarcérées, sont considérés comme une catégorie protégée de la population, ce qui implique des limitations quant à ce qui peut être étudié et à la manière de le faire, et constitue l'une des raisons pour lesquelles il existe un manque de données probantes sur l'impact de l'IA sur les enfants . Elle a déclaré que cela signifie également que, bien souvent, les choses sont développées sans que les enfants y soient associés .
on: La question de savoir si la gouvernance de l'IA devrait privilégier la protection des enfants en restreignant leur accès ou en intégrant des garanties respectueuses des droits dans les systèmes
Les jeunes sont les utilisateurs les plus actifs de l'IA et les innovateurs les plus fréquents au sein des entreprises d'IA, pourtant ils ne sont presque jamais les décideurs, malgré le fait qu'ils vivront le plus longtemps avec les conséquences - Les jeunes exclus de la prise de décision en matière d'IA
Arg. 1Paullier soutient que les jeunes sont les utilisateurs les plus actifs de l'IA et constituent une grande partie des innovateurs au sein des entreprises technologiques spécialisées dans l'IA, pourtant ils ne sont presque jamais les décideurs. Il s'agit d'une lacune importante en matière de gouvernance, étant donné qu'ils vivront le plus longtemps avec les conséquences des décisions prises aujourd'hui.
Paullier a déclaré que les jeunes sont les utilisateurs les plus actifs de l'intelligence artificielle et constituent en réalité la majorité des innovateurs et créateurs au sein de certaines de ces grandes entreprises technologiques d'IA, mais qu'ils ne sont presque jamais les décideurs . Il a noté qu'ils vivront le plus longtemps avec les conséquences des décisions que nous prenons aujourd'hui .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud global, doivent être véritablement incluses dans les processus de gouvernance de l'IA, et non simplement consultées après que les décisions ont été prises
Des espaces significatifs permettant aux jeunes de participer à la gouvernance de l'IA doivent être créés au niveau national, et pas seulement à l'échelle mondiale, car les jeunes comprennent le mieux à la fois les opportunités et les risques - Participation nationale des jeunes
Arg. 2Paullier soutient que des espaces significatifs permettant aux jeunes de participer à la gouvernance de l'IA doivent être créés, notamment au niveau national, et pas seulement dans les forums mondiaux. Les jeunes sont ceux qui ressentent en premier l'impact de la technologie dans leur éducation, leur emploi et leur vie numérique quotidienne, et ils comprennent le mieux à la fois les opportunités et les risques.
Paullier a déclaré que les jeunes sont ceux qui ressentent en premier l'impact de la technologie dans leur éducation, leurs cycles d'emploi et leur vie numérique quotidienne, et qu'ils forgent leur identité dans l'espace numérique . Il a soutenu que les jeunes sont ceux qui comprennent le mieux les opportunités que l'IA peut apporter, mais aussi ceux qui aideront à identifier les biais, les discriminations et les exclusions .
Si des espaces significatifs ne sont pas créés pour les jeunes, ceux-ci créeront leurs propres espaces en dehors des cadres de gouvernance, comme cela s'est produit dans le domaine climatique - Les jeunes s'auto-organiseront
Arg. 3Paullier avertit que si des espaces significatifs ne sont pas créés pour permettre aux jeunes de participer à la gouvernance de l'IA, ceux-ci trouveront leur propre voie et créeront leurs propres espaces, comme cela s'est produit dans le domaine climatique. Cela souligne l'urgence d'une inclusion proactive.
Paullier a déclaré que si des espaces significatifs ne sont pas créés pour permettre aux jeunes de s'engager, ceux-ci trouveront leur voie et créeront leurs propres espaces, comme cela s'est produit dans le domaine climatique .
Les jeunes soulèvent systématiquement la dimension humaine et l'impact de l'IA sur le bien-être, la santé mentale et les relations humaines significatives comme leur préoccupation principale - Les jeunes privilégient le bien-être humain
Arg. 4Paullier rapporte que, dans toutes les régions, les jeunes soulèvent systématiquement la dimension humaine et l'impact de l'IA sur le bien-être, la santé mentale et les relations humaines significatives comme leur préoccupation principale. Bien que les jeunes valorisent la technologie, ce qu'ils valorisent le plus, c'est le sentiment d'appartenance, la confiance et des relations humaines significatives.
Paullier a déclaré que ce que les jeunes et les citoyens en général valorisent le plus, c'est le sentiment d'appartenance, la confiance et des relations humaines significatives . Il a appelé à mettre l'accent sur l'impact des technologies sur le bien-être et la santé mentale des communautés, et à travailler non seulement pour les jeunes, mais avec les jeunes .
Le journalisme est une espèce clé de voûte de l'écosystème informationnel ; les systèmes d'IA sont entraînés sur des contenus journalistiques collectés sans consentement ni compensation, fragilisant ainsi les modèles économiques du journalisme - Le journalisme en tant qu'infrastructure critique
Arg. 1Osterling soutient que le journalisme est une espèce clé de voûte de l'écosystème informationnel qui stabilise la confiance, ancre la vérification, structure la responsabilité et permet aux autres institutions de fonctionner. Les systèmes d'IA sont entraînés sur des contenus journalistiques collectés sans consentement, compensation ni crédit, fragilisant ainsi les modèles économiques du journalisme et la confiance du public.
Osterling a cité la description faite par sa collègue du journalisme comme espèce clé de voûte de l'écosystème informationnel, soulignant que sa disparition n'entraîne pas une adaptation de l'écosystème, mais son effondrement . Elle a déclaré que les systèmes d'IA sont entraînés sur des contenus journalistiques collectés sans consentement, compensation ni crédit , et a plaidé pour une infrastructure numérique publique, des politiques industrielles garantissant une IA d'intérêt public, ainsi qu'une gouvernance de l'IA exigeant que les droits humains soient intégrés tout au long du cycle de vie des systèmes d'IA .
La désinformation générée par l'IA et les discours haineux en ligne ont créé des risques de protection directs pour les réfugiés et les personnes déplacées, comme observé en Libye et au sein de la communauté Rohingya - les discours haineux générés par l'IA comme risque de protection
Arg. 1Tan soutient que la désinformation générée par l'IA et les discours haineux en ligne sont devenus des risques de protection directs pour les réfugiés et les personnes déplacées. Elle présente des exemples concrets tirés de la Libye et de la communauté Rohingya, où des contenus générés par l'IA ont attisé l'hostilité, les abus et la violence.
Tan a cité l'exemple de la Libye, où des discours haineux violents et des informations erronées dangereuses, notamment des contenus générés par l'IA, ont attisé l'hostilité et les abus envers les réfugiés et compromis la sécurité du HCR et des travailleurs humanitaires . Elle a également souligné que les Rohingya continuent de faire face à des discours déshumanisants en ligne, même en exil, et que ce type de haine peut alimenter les abus, l'exclusion, la violence et la peur .
Les intérêts géopolitiques concurrents entravent la gouvernance mondiale de l'IA, et le recours aux outils de négociation pour passer du marchandage positionnel à la négociation intégrative est essentiel pour dégager un terrain commun - La négociation comme outil de gouvernance
Arg. 1Bellion-Jourdan soutient que les intérêts géopolitiques concurrents et les asymétries de pouvoir constituent des obstacles à la gouvernance mondiale de l'IA, et que le recours aux outils et techniques de la négociation multilatérale peut aider à surmonter ces défis. L'objectif est de passer du marchandage positionnel et des dynamiques gagnant-perdant à la négociation intégrative et aux résultats gagnant-gagnant.
Bellion-Jourdan a soutenu que si nous exploitons la puissance de la négociation avec tous ses outils et techniques pour naviguer dans les jeux de pouvoir et les asymétries de pouvoir, cela nous permettrait de dégager un terrain commun . Il a appelé à investir dans la conception des processus, la gestion des processus et les formats innovants de négociation, soulignant qu'il ne suffira pas d'enfermer 193 États dans une salle en espérant parvenir à un accord .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour répondre à la nature mondiale des défis de la gouvernance de l'IA
La Convention-cadre du Conseil de l'Europe sur l'IA est le premier traité contraignant plaçant l'IA dans le cadre des droits de l'homme, de la démocratie et de l'état de droit - Premier traité contraignant sur l'IA
Arg. 1Kownacki salue la Convention-cadre du Conseil de l'Europe sur l'IA en tant que premier traité contraignant plaçant l'IA dans le cadre des droits de l'homme, de la démocratie et de l'état de droit. Il soutient que la Pologne traduit ces principes en pratique sur son territoire à travers sa stratégie nationale de numérisation et sa politique en matière d'IA.
Kownacki a déclaré que la Pologne accueille favorablement la Convention-cadre du Conseil de l'Europe sur l'IA, la décrivant comme le premier traité contraignant plaçant l'IA dans le cadre des droits de l'homme, de la démocratie et de l'état de droit . Il a noté que la politique nationale de la Pologne en matière d'IA s'engage en faveur d'une intelligence artificielle centrée sur l'humain et digne de confiance .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour répondre à la nature mondiale des défis de la gouvernance de l'IA
Le facteur humain, maintenir une personne ayant le dernier mot pour comprendre, contester et désactiver les décisions de l'IA, est le terrain commun sur lequel une gouvernance véritablement mondiale de l'IA peut être construite - Le facteur humain comme terrain commun
Arg. 2Kownacki soutient que le facteur humain — maintenir une personne ayant le dernier mot pour comprendre, contester et désactiver les décisions de l'IA — est non négociable et représente le terrain commun sur lequel une gouvernance véritablement mondiale de l'IA peut être construite. Cela doit être inscrit dans les valeurs, les lois, les normes et les institutions, et non laissé au rang de simple déclaration.
Kownacki a déclaré que, quelle que soit la capacité des systèmes d'IA, une personne doit conserver le dernier mot, pour comprendre la décision, la contester, et là où cela importe le plus, pour désactiver les systèmes, et que cela est non négociable, avant tout dans les systèmes à haut risque . Il a soutenu que le facteur humain n'appartient à aucune nation en particulier et constitue le terrain commun sur lequel une gouvernance véritablement mondiale de l'IA peut être construite .
on: La supervision humaine significative de l'IA doit être réelle et substantielle, et non une simple formalité, avec un être humain identifiable conservant l'autorité de modifier ou d'arrêter les systèmes
on: La question de savoir si la gouvernance de l'IA doit se concentrer sur des normes contraignantes universelles ou permettre un véritable pluralisme au-dessus d'un socle commun de garanties en matière de droits
Un socle commun de garanties en matière de droits, incluant la divulgation, la contestabilité et le recours, doit s'appliquer à toute personne affectée par l'IA - Socle commun de droits
Arg. 1Shahani soutient que la compatibilité entre les approches nationales de la gouvernance de l'IA n'exige pas l'uniformité. En revanche, un socle commun de garanties en matière de droits — incluant la divulgation, la contestabilité et le recours — doit s'appliquer à toute personne affectée par l'IA, avec un véritable pluralisme autorisé au-delà de ce socle.
Shahani a déclaré que la compatibilité entre les approches à l'échelle mondiale n'exige pas l'uniformité, et qu'il est possible d'établir un socle commun de garanties en matière de droits, incluant la divulgation, la contestabilité et le recours pour toute personne concernée, tout en permettant un véritable pluralisme au-delà de ce socle .
on: La question de savoir si la gouvernance de l'IA doit se concentrer sur des normes universelles contraignantes ou permettre un véritable pluralisme au-delà d'un socle commun de garanties en matière de droits
Les déclarations de sécurité doivent être accompagnées des conditions dans lesquelles les systèmes ont été testés et des taux d'échec connus, ventilés par langue, genre, handicap et région - Divulgation de sécurité désagrégée
Arg. 2Shahani soutient que les déclarations de sécurité relatives aux systèmes d'IA doivent être accompagnées des conditions dans lesquelles les systèmes ont été testés, des limitations connues et des taux d'échec ventilés par langue, genre, handicap, région et teinte de peau. Sans cela, il est impossible de tenir un système responsable de ses défaillances.
Shahani a déclaré que les déclarations de sécurité doivent être accompagnées des conditions dans lesquelles les systèmes ont été testés, des limitations connues et des taux d'échec ventilés par langue, genre, handicap, région, teinte de peau et autres critères, et que la divulgation de la provenance des données d'entraînement doit être une pratique standard . Elle a souligné qu'il est impossible de tenir un système responsable si l'on ne peut pas voir où il échoue .
on: La transparence est une exigence fondamentale dans toutes les dimensions de la gouvernance de l'IA, notamment en ce qui concerne l'utilisation des données, l'impact environnemental et les processus de prise de décision
Les pays de la majorité mondiale importent largement des modèles entraînés ailleurs et les déploient dans des contextes à enjeux élevés sans disposer des moyens pour les évaluer, ce qui nécessite une capacité d'évaluation régionale financée par des fonds publics - Capacité d'évaluation régionale
Arg. 3Shahani soutient que les pays de la majorité mondiale importent largement des modèles d'IA entraînés ailleurs et les déploient dans des contextes à enjeux élevés sans disposer des moyens pour les évaluer au préalable. Elle appelle à la mise en place d'une capacité d'évaluation des systèmes d'IA financée par des fonds publics et hébergée au niveau régional, avant leur déploiement, ainsi qu'à la création de benchmarks ouverts, élaborés avec et pour les langues sous-dotées en ressources.
Shahani a déclaré que les pays de la majorité mondiale importent largement des modèles entraînés ailleurs et les déploient dans des contextes à enjeux élevés sans disposer des moyens pour les évaluer au préalable, et a appelé à la mise en place d'une capacité d'évaluation des systèmes d'IA financée par des fonds publics et hébergée au niveau régional, avant leur déploiement, ainsi qu'à la création de benchmarks ouverts élaborés avec et pour les langues sous-dotées en ressources .
on: La question de savoir si les inégalités géographiques dans la diligence raisonnable en matière de droits humains résultent d'un choix structurel des entreprises ou d'un manque de capacités
Les savoirs autochtones et traditionnels sont intégrés dans les données d'entraînement sans consentement, reconnaissance ni contrepartie, ce qui exige une gestion des données pilotée par les communautés dans le cadre de la supervision humaine - Souveraineté des données autochtones
Arg. 4Shahani soutient que les savoirs autochtones et traditionnels sont intégrés dans les données d'entraînement de l'IA sans consentement, reconnaissance ni contrepartie. Elle appelle à ce que la gestion des données pilotée par les communautés soit reconnue comme faisant partie de la supervision humaine.
Shahani a déclaré que les savoirs autochtones et traditionnels sont intégrés dans les données d'entraînement sans consentement, reconnaissance ni contrepartie, et que la gestion des données pilotée par les communautés doit donc être reconnue comme faisant partie de la supervision humaine .
51 % des discussions sur la gouvernance de l'IA se déroulent à Genève, ce qui signifie que le reste du monde en est effectivement exclu en raison des restrictions de visa, qui reposent elles-mêmes sur des algorithmes opaques - Les algorithmes de visa excluent les voix du monde entier
Arg. 1Bonyo soutient que la concentration des discussions sur la gouvernance de l'IA à Genève, conjuguée aux restrictions de visa reposant sur des algorithmes opaques, exclut de fait le reste du monde de ces débats. Elle appelle à davantage de transparence dans les algorithmes qui déterminent si les personnes peuvent voyager pour participer aux forums de gouvernance.
Bonyo a cité un rapport indiquant que 51 % des discussions sur la gouvernance de l'IA cette année se tiennent à Genève, ce qui signifie que le reste du monde en est effectivement exclu faute d'accès aux visas . Elle a plaidé pour une ouverture algorithmique autour des procédures de visa et a demandé aux pays du Nord global de reconsidérer le type d'algorithmes externalisés pour déterminer si les personnes peuvent voyager .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud global, doivent être véritablement intégrées aux processus de gouvernance de l'IA, et non simplement consultées une fois les décisions prises
L'Africa AI Governance Index recense pour la première fois les stratégies, lois et institutions en matière d'IA dans tous les États africains, offrant ainsi un outil d'évaluation au service d'une gouvernance inclusive - Africa AI Governance Index (Linda Bonyo)
Arg. 2Bonyo présente l'Africa AI Governance Index, lancé par Lawyers Hub, comme un outil permettant de recenser pour la première fois les stratégies, lois et institutions en matière d'IA dans tous les États africains. Cet outil d'évaluation favorise une gouvernance inclusive en rendant la gouvernance africaine de l'IA visible et comparable.
Bonyo a indiqué que l'Africa AI Governance Index recense les stratégies, lois et institutions en matière d'IA dans tous les États africains, et que pour la première fois, une évaluation couvre l'ensemble du continent africain . Elle a invité les participants à consulter AIpolicy.africa pour interagir avec les travaux de l'AI Lab .
L'engagement de l'Uruguay en faveur d'une gouvernance de l'IA intégrant la dimension de genre et du Partenariat mondial pour les droits de l'homme représente une plateforme multipartite reliant les efforts sur les impacts transversaux de l'IA - Plateforme multipartite pour les droits de l'homme
Arg. 1De Bellis Bonilla souligne l'engagement de l'Uruguay à faire avancer une transformation numérique qui inclut le développement et l'utilisation de l'IA dans une approche inclusive et fondée sur le genre. Elle désigne le Partenariat mondial pour les droits de l'homme comme une large plateforme multipartite qui relie les efforts portant sur les impacts transversaux de l'IA.
De Bellis Bonilla a mentionné l'adhésion de l'Uruguay à la Déclaration de Madrid lors de la Cinquième Conférence ministérielle sur la politique étrangère féministe , et a mis en avant le Partenariat mondial pour les droits de l'homme du HCDH en tant que large plateforme et réseau multipartite reliant l'ensemble des efforts avec un focus transversal sur l'impact de l'IA .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour répondre à la nature mondiale des défis de la gouvernance de l'IA
Access Now appelle à l'arrêt des outils d'IA facilitant les violations du droit international humanitaire et du droit international des droits de l'homme, en particulier dans les contextes de conflit, ainsi qu'à la mise en place de mécanismes contraignants de gouvernance mondiale - Arrêt des IA violant le DIH
Arg. 1Gigena intervient au nom d'Access Now pour demander l'arrêt du développement et de l'utilisation des outils d'IA qui facilitent les violations du droit international humanitaire et du droit international des droits de l'homme, en particulier dans les contextes de conflit ou de guerre. Il appelle également à l'adoption de normes juridiques contraignantes et de mécanismes de gouvernance mondiale pour réguler les technologies de surveillance numérique et l'IA.
Gigena a appelé à l'arrêt du développement et de l'utilisation des outils d'IA facilitant les violations du droit international humanitaire et du droit international des droits de l'homme, en particulier dans les contextes de conflit ou de guerre . Il a également relayé les appels à l'adoption de normes juridiques contraignantes centrées sur les droits de l'homme et de mécanismes de gouvernance mondiale pour réguler les technologies de surveillance numérique et l'IA, en tenant compte des effets dissuasifs .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour relever les défis de nature mondiale posés par la gouvernance de l'IA
L'accès à l'IA devrait être considéré non pas comme un privilège à mériter, mais comme un droit fondamental à exercer, avec un renforcement des capacités mondiales en matière d'IA pour réduire les disparités de préparation — l'accès à l'IA en tant que droit
Arg. 1Cha soutient que l'accès à l'IA devrait être considéré non pas comme un privilège à mériter, mais comme un droit fondamental à exercer. Il souligne que les efforts mondiaux visant à renforcer la préparation à l'IA demeurent fragmentés, et que la République de Corée a proclamé une vision visant à établir un Hub mondial de l'IA afin de contribuer au renforcement des capacités mondiales en matière d'IA.
Cha a déclaré que la République de Corée considère l'accès à l'IA non pas comme un privilège à mériter, mais comme un droit fondamental à exercer . Il a noté que, à mesure que les pays approfondissent leur préparation à l'IA, leurs approches en matière de gouvernance de celle-ci s'approfondissent également, mais que ces efforts restent fragmentés à l'échelle mondiale , et a décrit la vision de la Corée visant à établir le Hub mondial de l'IA en partenariat avec neuf organisations participantes spécialisées dans l'IA et les domaines connexes .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour relever les défis de nature mondiale que pose la gouvernance de l'IA
La connectivité centrée sur les communautés est une condition préalable à une participation équitable à l'IA ; les communautés ne sont pas le dernier kilomètre mais le premier kilomètre de l'IA - Les communautés comme premier kilomètre
Arg. 1La représentante de l'APC soutient qu'avant que les communautés puissent contribuer des données, développer des solutions d'IA locales, influencer les politiques ou bénéficier de l'innovation, elles ont besoin d'une connectivité significative, abordable, fiable et localement pertinente. Une connectivité centrée sur les communautés rapproche le pouvoir de celles-ci et permet aux femmes, aux peuples autochtones, aux communautés rurales et aux locuteurs de langues sous-représentées de devenir des créateurs et des décideurs.
L'intervenant a déclaré que la connectivité centrée sur les communautés va au-delà de la simple fourniture d'un accès à Internet ; il s'agit pour les communautés de posséder, de gérer et de gouverner l'infrastructure qui les relie, en créant un espace où les savoirs locaux, les langues locales et les priorités communautaires peuvent s'épanouir . L'intervenant a conclu que les communautés ne constituent pas le dernier kilomètre de la connectivité ou de l'IA, mais en sont en réalité le premier kilomètre .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud global, doivent être véritablement incluses dans les processus de gouvernance de l'IA, et non simplement consultées après que les décisions ont été prises
L'histoire nous jugera non pas sur l'intelligence de notre IA, mais sur notre capacité à protéger ceux qui ont la voix la plus faible et l'enjeu le plus grand dans l'avenir - Responsabilité morale envers les enfants
Arg. 1Kiladze soutient que la question de l'IA et des droits des enfants est avant tout une question morale, celle de savoir si les États, les entreprises et les organisations internationales ont la volonté de concevoir, développer et gouverner une IA qui respecte les droits des enfants. L'histoire ne nous jugera pas sur l'intelligence de notre IA, mais sur notre capacité à protéger ceux qui ont la voix la plus faible et l'enjeu le plus grand dans l'avenir.
Kiladze a déclaré que l'histoire ne nous jugera pas sur l'intelligence de notre IA ou de nos machines, mais sur notre capacité à avoir mis à profit ce moment extraordinaire pour protéger ceux qui avaient la voix la plus faible mais l'enjeu le plus grand dans l'avenir . Elle a fait référence à la déclaration conjointe des Nations Unies sur l'IA et les droits de l'enfant, co-pilotée par l'ITU, le CRC et l'UNICEF, qui a réuni 13 agences des Nations Unies et plus de 60 organisations, avec la participation d'enfants des cinq régions de l'ONU dans son élaboration .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dans les systèmes dès la phase de conception, et la responsabilité incombant aux développeurs et aux déployeurs plutôt qu'aux enfants ou aux familles
La compatibilité entre les approches nationales n'exige pas l'uniformité ; un socle commun de garanties des droits, avec un véritable pluralisme au-dessus de celui-ci, est réalisable - Socle commun avec pluralisme
Arg. 1Cet argument a été principalement avancé par Shumaila Hussaini Shahani. Le rôle de Clara Chappaz lors de la session était celui de modératrice, et ses remarques de clôture ont synthétisé les contributions du panel plutôt que de défendre cet argument spécifique de manière indépendante.
L'innovation ne doit pas se faire au détriment des enfants ; en cas de risque potentiel, la protection doit être prioritaire, et les systèmes d'IA ne doivent être accessibles aux enfants que s'ils sont reconnus sûrs et conçus dans le respect de leurs droits - La protection prime sur l'innovation pour les enfants
Arg. 1Hendricks soutient que l'innovation ne doit pas être poursuivie au détriment de la sécurité et des droits des enfants. Les enfants ne devraient interagir qu'avec des systèmes d'IA dont la sécurité a été prouvée et qui ont été conçus en tenant compte de leurs droits, et la responsabilité doit incomber à ceux qui développent et tirent profit de la technologie, et non aux enfants ou aux familles.
Hendricks a déclaré que face à un risque potentiel, nous devons donner la priorité à la protection, et que les enfants ne devraient interagir avec des systèmes d'IA que si ceux-ci sont reconnus sûrs, conçus dans le respect des droits des enfants et tenant compte de leurs perspectives dans les décisions qui les concernent . Elle a souligné que la responsabilité doit incomber à ceux qui développent et tirent profit de cette technologie, et a appelé à bâtir un avenir de l'IA digne de la confiance et de la sécurité de chaque enfant .
on: Les enfants nécessitent une protection particulière dans la gouvernance de l'IA, avec une sécurité intégrée dès la phase de conception des systèmes, et la responsabilité incombant aux développeurs et aux déployeurs plutôt qu'aux enfants ou aux familles
Les créateurs et les artistes doivent conserver le contrôle sur la manière dont leurs œuvres sont utilisées pour développer des systèmes d'IA, des accords librement négociés entre les titulaires de droits et les développeurs de technologies créant ainsi confiance et sécurité juridique - Contrôle des créateurs sur les données d'entraînement de l'IA
Arg. 1Baruch soutient qu'une gouvernance responsable de l'IA exige que les créateurs et les artistes conservent le contrôle sur la manière dont leurs œuvres sont utilisées pour entraîner des systèmes d'IA. Les accords conclus librement et volontairement entre les créateurs, les titulaires de droits et les développeurs de technologies constituent le fondement de la confiance, de la sécurité juridique et de l'innovation durable.
Baruch a déclaré que les créateurs et les artistes doivent conserver le contrôle sur la manière dont leurs œuvres sont utilisées pour développer des systèmes d'IA, et que les accords conclus librement et volontairement entre les créateurs, les titulaires de droits et les développeurs de technologies créent confiance, sécurité juridique et innovation durable . Il a cité les partenariats d'Universal Music Group avec des entreprises telles que NVIDIA, Stability AI et Spotify comme exemples concrets de cette approche .
La transparence sur la manière dont les œuvres des créateurs sont utilisées pour développer des modèles d'IA est essentielle pour protéger l'intégrité artistique et garantir une véritable responsabilisation - Transparence pour les créateurs
Arg. 2Baruch soutient que les créateurs doivent savoir quand et comment leurs œuvres ont été utilisées pour développer des modèles d'IA et comment elles seront utilisées pour les résultats produits. Sans transparence, il ne peut y avoir ni responsabilisation, ni confiance, ni véritable collaboration entre les secteurs créatif et technologique.
Baruch a déclaré que les créateurs devraient savoir quand et comment leurs œuvres ont été utilisées pour développer des modèles d'IA et comment elles seront utilisées pour les résultats produits, et que sans transparence, il ne peut y avoir ni responsabilisation, ni confiance, ni véritable collaboration . Il a soutenu qu'avec la transparence, l'intégrité artistique peut être protégée et, si nécessaire, défendue .
on: La transparence est une exigence fondamentale dans toutes les dimensions de la gouvernance de l'IA, notamment en ce qui concerne l'utilisation des données, l'impact environnemental et les processus de prise de décision
L'IA doit amplifier la créativité humaine plutôt que la remplacer, car la musique porte en elle la mémoire, l'identité, l'émotion et le vécu, qui vont bien au-delà des données ou des schémas - L'IA comme amplificateur de la créativité humaine
Arg. 3Baruch soutient que l'IA est un outil créatif extraordinaire, mais qu'elle doit demeurer subordonnée à la créativité humaine plutôt que de la remplacer. La musique, en tant que forme d'art profondément humaine portant la mémoire, l'identité, l'émotion et le vécu, illustre parfaitement pourquoi la supervision humaine de l'IA dans le secteur créatif est essentielle.
Baruch a déclaré que l'IA est un outil créatif extraordinaire, mais qu'elle devrait amplifier la créativité humaine et non la remplacer, et que la musique est profondément humaine, portant en elle la mémoire, l'identité, l'émotion et le vécu . Il a cité la description de la musique par Bjorn Ulvaeus comme témoignage, et a soutenu que, si elle est appliquée de manière responsable, l'IA peut déclencher une nouvelle renaissance de la créativité humaine, préservant le patrimoine culturel et inspirant les générations futures .
L'article 27 de la Déclaration universelle des droits de l'homme et l'article 15 du Pacte international relatif aux droits économiques, sociaux et culturels protègent les intérêts moraux et matériels des créateurs, et ces principes demeurent pleinement applicables à l'ère de l'IA - Cadre des droits de l'homme pour les créateurs
Arg. 4Baruch ancre l'approche de l'industrie musicale en matière de gouvernance de l'IA dans le droit international des droits de l'homme, en soutenant que les droits des créateurs à la protection de leurs intérêts moraux et matériels sont consacrés par des instruments fondamentaux des droits de l'homme et demeurent tout aussi pertinents à l'ère de l'IA.
Baruch a déclaré que l'article 27 de la Déclaration universelle des droits de l'homme et l'article 15 du Pacte international relatif aux droits économiques, sociaux et culturels reconnaissent que les créateurs ont droit à la protection de leurs intérêts moraux et matériels découlant de leurs œuvres, et que ces principes sont tout aussi pertinents à l'ère de l'IA .
Les résultats d'une enquête menée auprès des participants à la session montrent qu'une pluralité d'entre eux s'inquiètent de l'insuffisance des mesures de gouvernance en place, la responsabilité, l'état de droit et l'impact de l'IA sur les enfants étant identifiés comme les principales préoccupations en matière de droits humains - Préoccupation des participants concernant les lacunes de gouvernance
Arg. 1Hicks présente les résultats d'une enquête menée auprès des participants à la session, révélant que beaucoup d'entre eux sont incertains ou préoccupés par l'adéquation des mesures actuelles de gouvernance de l'IA. L'enquête a identifié la responsabilité et l'état de droit, ainsi que l'impact de l'IA sur les enfants, comme les principales préoccupations en matière de droits humains parmi les participants.
Hicks a indiqué qu'une pluralité de personnes interrogées étaient très préoccupées par le fait que nous ne disposons pas des mesures nécessaires pour faire face aux défis et aux opportunités abordés lors de la session . Elle a noté que les deux principales questions relatives aux droits humains identifiées dans l'enquête étaient la responsabilité et l'état de droit, ainsi que l'impact de l'IA sur les enfants, suivis par la surveillance et l'utilisation de l'IA par les forces de l'ordre, et la durabilité environnementale .
Les personnes interrogées ont massivement désigné les entreprises développant l'IA, les États et les organisations de déploiement comme les principales parties responsables des actions de l'IA agentique, ce qui est cohérent avec les Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme - Responsabilité distribuée pour l'IA agentique
Arg. 2Hicks présente les résultats d'une enquête montrant que les participants ont identifié une hiérarchie de responsabilité pour l'IA agentique : en premier lieu, les entreprises qui développent les modèles d'IA ; en deuxième lieu, les États qui doivent veiller à ce que les environnements réglementaires préviennent les préjudices ; et en troisième lieu, les organisations qui déploient des systèmes agentiques. Cela est cohérent avec les Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme.
Hicks a indiqué que les personnes interrogées ont désigné les entreprises qui développent les modèles d'IA comme la principale partie responsable des actions de l'IA agentique, suivies des États et des autorités publiques ayant autorisé le système, puis des organisations qui le déploient . Elle a noté que cela est cohérent avec les Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme, dont le premier pilier stipule que les États sont responsables de la mise en place d'un environnement réglementaire empêchant les entreprises de causer des préjudices .
on: L'IA agentique crée des défis de responsabilité sans précédent qui nécessitent de nouveaux paradigmes de gouvernance, notamment une documentation structurée, une responsabilité humaine identifiable et des droits à un recours en temps opportun
Une enquête menée auprès de 1 000 enfants dans 49 pays a révélé qu'ils souhaitent que l'IA soit façonnée avec eux, et pas seulement pour eux, et qu'ils veulent qu'elle respecte leurs droits plutôt que d'en être simplement protégés - Les enfants veulent avoir leur mot à dire dans la gouvernance de l'IA
Arg. 3Hicks fait référence à une enquête menée auprès de 1 000 enfants dans 49 pays en collaboration avec l'UIT, qui a révélé que les enfants souhaitent participer de manière significative à la conception de l'IA plutôt que d'en être simplement protégés. Les enfants ont exprimé leur souhait que l'IA respecte leurs droits et ont demandé à être inclus dans les discussions sur la gouvernance.
Hicks a décrit une enquête intitulée « Me and AI » menée auprès de 1 000 enfants dans 49 pays, soulignant que les enfants ont déclaré vouloir que l'IA soit façonnée avec eux, et pas seulement pour eux, qu'ils souhaitent qu'elle respecte leurs droits et ne veulent pas simplement en être protégés .
on: Les communautés concernées, notamment les femmes, les jeunes, les enfants et les populations du Sud global, doivent être incluses de manière significative dans les processus de gouvernance de l'IA, et non simplement consultées après que les décisions ont été prises
La confiance dans l'IA n'est pas seulement un objectif éthique, mais une condition préalable à une adoption plus large de l'IA, nécessitant une approche centrée sur l'humain, fondée sur les droits de l'homme, les valeurs démocratiques, l'éthique, la sécurité, la transparence et la responsabilité - La confiance comme condition préalable à l'adoption de l'IA
Arg. 1Pipan soutient que, selon la Slovénie, la confiance dans l'IA ne doit pas être perçue comme une simple aspiration éthique, mais comme une condition préalable concrète à l'adoption plus large des systèmes d'IA. Cette confiance doit reposer sur une approche centrée sur l'humain, ancrée dans les droits de l'homme, les valeurs démocratiques, l'éthique, la sécurité, la transparence et la responsabilité.
Pipan a déclaré que, de l'avis de la Slovénie, la confiance n'est pas seulement un objectif éthique, mais également une condition préalable à l'adoption plus large de l'IA, et que cette approche se reflète dans la stratégie nationale slovène pour l'IA 2030, adoptée en mars de la même année . Elle a souligné que la stratégie promeut clairement une approche de l'IA centrée sur l'humain, fondée sur les droits de l'homme, les valeurs démocratiques, l'éthique, la sécurité, la transparence et la responsabilité, avec pour objectif de garantir que l'IA est développée et utilisée de manière responsable dans l'intérêt public .
on: La gouvernance de l'IA doit être ancrée dans le droit international des droits de l'homme en tant que cadre contraignant, et non dans de simples aspirations éthiques
Instaurer la confiance dans l'IA requiert une mise en œuvre efficace et concrète, notamment une gouvernance responsable, une sécurité juridique, des mécanismes de soutien et un investissement soutenu dans la culture numérique et les compétences technologiques - La mise en œuvre comme fondement de la confiance
Arg. 2Pipan soutient que proclamer des principes ne suffit pas ; instaurer une véritable confiance dans l'IA exige de traduire ces principes en une mise en œuvre efficace et concrète. Cela implique de garantir une gouvernance responsable, une sécurité juridique, des mécanismes de soutien appropriés et un investissement soutenu dans la culture numérique et les compétences technologiques.
Pipan a indiqué que la stratégie reconnaît que l'instauration de la confiance nécessite une mise en œuvre efficace et concrète, ce qui implique de garantir une gouvernance responsable, une sécurité juridique, des mécanismes de soutien appropriés et un investissement soutenu dans la culture numérique et les compétences technologiques .
on: La transparence est une exigence fondamentale dans toutes les dimensions de la gouvernance de l'IA, notamment en ce qui concerne l'utilisation des données, l'impact environnemental et les processus de prise de décision
En tant que petite communauté linguistique, la Slovénie accorde une importance particulière à la protection de la diversité linguistique et culturelle, faisant valoir qu'une IA inclusive doit refléter et préserver toutes les langues et cultures afin qu'aucune communauté ne soit laissée pour compte - Diversité linguistique et culturelle dans l'IA
Arg. 3Pipan souligne la préoccupation particulière de la Slovénie, en tant que petite communauté linguistique, selon laquelle une IA inclusive doit refléter et préserver toutes les langues et cultures. Elle soutient que la gouvernance de l'IA doit veiller à ce qu'aucune communauté ne soit laissée pour compte en raison d'une sous-représentation linguistique ou culturelle dans les systèmes d'IA.
Pipan a déclaré qu'en tant que petite communauté linguistique, la Slovénie accorde une importance particulière à la protection de la diversité linguistique et culturelle, et qu'une IA inclusive devrait refléter et préserver toutes les langues et cultures, en veillant à ce qu'aucune communauté ne soit laissée pour compte .
La coopération internationale, par l'échange de bonnes pratiques, le développement d'approches interopérables et le renforcement des capacités, est essentielle pour promouvoir une IA digne de confiance à l'échelle mondiale - Coopération internationale pour une IA digne de confiance
Arg. 4Pipan appelle à un renforcement de la coopération internationale comme pilier essentiel de la promotion d'une IA digne de confiance à l'échelle mondiale. Elle soutient que cette coopération devrait prendre la forme d'échanges de bonnes pratiques, du développement d'approches interopérables et du renforcement des capacités entre les pays.
Pipan a présenté quatre priorités prospectives pour la Slovénie, notamment le renforcement de la coopération internationale par l'échange de bonnes pratiques, le développement d'approches interopérables et le renforcement des capacités pour promouvoir une IA digne de confiance à l'échelle mondiale . Elle a également appelé à compléter les cadres réglementaires par un soutien concret à la mise en œuvre, incluant le renforcement des capacités, des orientations pratiques et la promotion de la culture numérique liée à l'IA .
on: La coopération internationale, les cadres multilatéraux contraignants et le renforcement des capacités sont essentiels pour relever les défis de gouvernance de l'IA à l'échelle mondiale
La collaboration entre la Banque mondiale et le HCDH dans la préparation de la session sur la gouvernance de l'IA reflète l'importance de la coopération au sein du système des Nations Unies pour traiter des questions urgentes et importantes de gouvernance de l'IA - collaboration du système onusien sur l'IA
Arg. 1Ng souligne l'importance du dialogue en le qualifiant d'opportun et de crucial, et reconnaît le travail de préparation considérable accompli par le HCDH et son homologue. Cela sous-entend qu'une gouvernance efficace de l'IA nécessite un effort coordonné entre les organisations du système des Nations Unies, plutôt que des approches cloisonnées.
Ng a remercié le HCDH et les coprésidents pour le travail considérable accompli dans la préparation de la session, et a tout particulièrement salué son homologue au HCDH, Li Zhou, pour ses efforts remarquables .
Une participation large et diversifiée des parties prenantes doit être structurellement garantie dans les dialogues sur la gouvernance de l'IA, en alternant entre les représentants des États membres et ceux des parties prenantes non étatiques - Participation multipartite structurée
Arg. 1Le Co-modérateur explique que le segment des interventions du public est organisé de manière à alterner entre un représentant des États membres et un représentant des autres parties prenantes. Cette disposition procédurale reflète un engagement substantiel en faveur d'une participation multipartite inclusive en tant que principe de gouvernance, garantissant que la société civile, le secteur privé et les autres voix non étatiques sont formellement intégrés dans la structure du dialogue aux côtés des gouvernements.
Le Co-modérateur a indiqué que, dans un souci de promotion d'une large participation des parties prenantes, le segment se déroulerait avec un représentant des États membres et un représentant des autres parties prenantes, en alternance entre les deux .
La discipline temporelle et l'égalité du temps de parole pour tous les participants sont essentielles afin de maximiser le nombre de voix entendues dans les forums de gouvernance de l'IA - Participation égale et limitée dans le temps
Arg. 2Le Co-modérateur souligne qu'un minuteur a été activé et que les microphones seront automatiquement coupés une fois le temps de parole alloué écoulé. Cet engagement procédural reflète un principe substantiel selon lequel les forums de gouvernance doivent gérer activement la participation afin de garantir que le plus large éventail possible de voix puisse être entendu, plutôt que de laisser quelques intervenants dominer les échanges.
Le Co-modérateur a indiqué qu'un minuteur avait été activé, visible à l'écran et au pupitre, et que les microphones seraient automatiquement coupés une fois le temps de parole alloué écoulé, encourageant tous les intervenants à respecter le temps imparti afin de permettre au plus grand nombre possible de prendre la parole .
Graphe de connaissances de la session
Intervenants · Sujets · Arguments · Relations
Tout au long de la session, des intervenants issus des gouvernements, de la société civile, des organisations internationales et du monde universitaire ont convergé vers l'idée que la gouvernance de l'IA ne peut rester volontaire ou fondée sur l'éthique, mais doit être ancrée dans le droit international contraignant des droits de l'homme. Turk a soutenu que le droit international des droits de l'homme constitue un cadre juridique contraignant et que les droits de l'homme fournissent la boussole pour la gouvernance de l'IA . Bahous a déclaré que la gouvernance de l'IA ne peut être traitée uniquement comme une question technique et qu'il s'agit fondamentalement d'une question de droits de l'homme, en faisant référence à la CEDAW et au PIDCP comme cadres complets . Arias Arzeno a soutenu que les systèmes judiciaires sont essentiels pour traduire les principes des droits de l'homme en réalité . Lampel a appelé à l'application du droit international des droits de l'homme aujourd'hui par le biais de cadres juridiques contraignants appliqués de manière égale, indépendamment de la richesse ou du pouvoir . Cassayre a recommandé que les droits de l'homme et l'état de droit doivent sous-tendre le développement et le déploiement des technologies numériques . Chetty a soutenu que les modèles de gouvernance dominants ancrés dans une IA éthique ou responsable restent structurellement inadéquats et a appelé à des cadres normatifs enracinés dans le droit international des droits de l'homme . Pipan a déclaré que la confiance dans l'IA nécessite une approche centrée sur l'humain fondée sur les droits de l'homme et les valeurs démocratiques . Eghobamien-Mshelia a soutenu que la CEDAW oblige les États à parvenir à l'égalité réelle en s'attaquant aux obstacles structurels .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
La gouvernance de l'IA doit être traitée comme une question fondamentale de droits de l'homme, et non comme une simple question technique, le droit international des droits de l'homme fournissant un cadre juridique contraignant - Les droits de l'homme comme cadre contraignant
Les systèmes judiciaires doivent traduire les principes des droits de l'homme en réalité en garantissant la responsabilité lorsque l'IA cause des préjudices, en mettant l'accent sur la transparence, la traçabilité et les voies de recours effectives - Les systèmes judiciaires comme mécanismes de responsabilisation
L'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, indépendamment de la richesse, du pouvoir ou de l'influence - Cadres juridiques contraignants
La gouvernance de l'IA doit intégrer les droits de l'homme tout au long du cycle de vie de l'IA, de la conception au déploiement et au suivi - Gouvernance sur l'ensemble du cycle de vie
Les cadres de gouvernance de l'IA doivent aller au-delà des modèles autorégulés fondés sur l'éthique pour adopter des cadres normatifs ancrés dans le droit international des droits de l'homme - Au-delà de l'éthique volontaire
La confiance dans l'IA n'est pas seulement un objectif éthique, mais une condition préalable à une adoption plus large de l'IA, nécessitant une approche centrée sur l'humain fondée sur les droits de l'homme, les valeurs démocratiques, l'éthique, la sécurité, la transparence et la responsabilité - La confiance comme condition préalable à l'adoption de l'IA
Les droits de l'enfant doivent être au cœur de la gouvernance de l'IA en tant que considération transversale, la sécurité devant être intégrée dans les systèmes dès le départ plutôt qu'ajoutée après qu'un préjudice s'est produit - Les droits de l'enfant comme question transversale
La CEDAW fournit un cadre essentiel obligeant les États à parvenir à l'égalité réelle et à s'attaquer aux obstacles structurels dans la gouvernance de l'IA - La CEDAW comme cadre de gouvernance de l'IA
Plusieurs intervenants ont explicitement rejeté l'idée selon laquelle la réglementation et l'innovation seraient en tension. Turk a déclaré que nous ne considérons pas les normes de sécurité pour les médicaments, les voitures ou les avions comme des obstacles au progrès, mais comme la raison pour laquelle les gens font confiance à ces technologies, et qu'il est possible de concevoir des technologies qui font progresser les droits, les opportunités économiques et la sécurité simultanément . Bahous a fait la même analogie, en soutenant que, tout comme nous ne mettrions jamais sur le marché des aliments, des médicaments, des avions ou des véhicules sans une surveillance rigoureuse, l'IA ne devrait pas être déployée sans garanties obligatoires . Cassayre a déclaré qu'une réglementation efficace, la transparence, la responsabilité et la supervision humaine ne sont pas des obstacles à l'innovation, mais les fondements d'une innovation digne de confiance et durable . Kownacki a soutenu que la réponse de la Pologne n'est pas de freiner l'innovation, mais de maintenir un facteur constant en son cœur : l'être humain .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
La gouvernance de l'IA doit être traitée comme une question fondamentale de droits de l'homme, et non comme une simple question technique, le droit international des droits de l'homme fournissant un cadre juridique contraignant - Les droits de l'homme comme cadre contraignant
La gouvernance de l'IA doit intégrer les droits de l'homme tout au long du cycle de vie de l'IA, de la conception au déploiement et au suivi - Gouvernance sur l'ensemble du cycle de vie
L'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, indépendamment de la richesse, du pouvoir ou de l'influence - Cadres juridiques contraignants
Le facteur humain — maintenir une personne ayant le dernier mot pour comprendre, contester et désactiver les décisions de l'IA — est le terrain commun sur lequel une gouvernance véritablement mondiale de l'IA peut être construite - Le facteur humain comme terrain commun
Un large consensus s'est dégagé sur le fait que la supervision humaine ne peut être que nominale. Turk a déclaré que la supervision humaine des systèmes d'IA ne peut pas se résumer à un simple tampon et exige qu'une personne identifiée soit dotée de l'autorité, des compétences, du temps, de l'indépendance et du pouvoir nécessaires pour modifier et même arrêter un système . Arias Arzeno a soutenu qu'aucune institution publique ne peut justifier une décision en affirmant que c'est ce que le système lui a indiqué, et que la technologie doit aider le juge mais ne jamais le remplacer . El Fallah Seghrouchni a proposé que lorsque des agents sont déployés dans des services publics, il doit y avoir un être humain identifiable responsable de toutes les questions liées aux droits, et que le fonctionnement de l'algorithme ne doit jamais être autonome en ce qui concerne les droits et la loi . Kownacki a déclaré que, quelle que soit la capacité des systèmes d'IA, une personne doit conserver le dernier mot pour comprendre, contester et désactiver les décisions, et que cela n'est pas négociable . Tan a soutenu que la supervision humaine doit être réelle, éclairée et capable de modifier les résultats dans des domaines à enjeux élevés tels que l'asile et la gestion des frontières .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
Aucune institution publique ne peut justifier une décision en affirmant que le système le lui a indiqué ; la responsabilité doit incomber aux personnes et aux institutions - Responsabilité institutionnelle humaine
Les systèmes d'IA doivent faire l'objet d'une documentation structurée des chaînes d'agents, de la désignation d'un responsable humain identifiable et d'un droit à un recours en temps utile - Trois obligations de responsabilité
Le facteur humain — maintenir une personne ayant le dernier mot pour comprendre, contester et désactiver les décisions de l'IA — est le terrain commun sur lequel une gouvernance véritablement mondiale de l'IA peut être construite - Le facteur humain comme terrain commun
Des normes communes et bien conçues pour les risques liés à l'IA, incluant des considérations relatives aux droits de l'homme, sont nécessaires pour garantir le fonctionnement cohérent des comités de diligence raisonnable en matière de droits de l'homme dans les systèmes multi-agents interconnectés - Nécessité de normes communes en matière de risques liés à l'IA
La transparence est apparue comme une exigence transversale approuvée par des intervenants d'horizons divers. Turk a soutenu que les décisions relatives à l'IA doivent être transparentes quant à la manière dont les données sont utilisées et aux voies de recours disponibles . Luccioni a décrit la transparence comme un droit humain fondamental pour lequel elle se bat, permettant aux utilisateurs de savoir ce que coûte l'IA, d'où proviennent les données et d'où vient l'énergie . Aerdts a mis en avant le registre des algorithmes des Pays-Bas comme outil de transparence couvrant tous les algorithmes utilisés par le gouvernement néerlandais . Baruch a déclaré que sans transparence, il ne peut y avoir ni responsabilité, ni confiance, ni collaboration significative . Shahani a appelé à ce que les affirmations relatives à la sécurité soient accompagnées des conditions dans lesquelles les systèmes ont été testés et des taux d'échec ventilés par langue, genre, handicap et région . Dad a soutenu que le problème des preuves dans la gouvernance de l'IA est fondamentalement un problème de ressources et que les organisations de la société civile documentant les préjudices doivent être connectées aux processus décisionnels .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
La transparence concernant l'empreinte environnementale de l'IA est un droit humain fondamental, permettant aux utilisateurs de faire des choix éclairés entre les outils - La transparence environnementale comme droit de l'homme
Le registre des algorithmes et les évaluations d'impact sur les droits fondamentaux utilisés aux Pays-Bas illustrent des outils pratiques pour traduire les exigences légales en responsabilité concrète - Outils pratiques de responsabilisation
La transparence sur la manière dont les œuvres des créateurs sont utilisées pour développer des modèles d'IA est essentielle pour protéger l'intégrité artistique et permettre une responsabilisation significative - Transparence pour les créateurs
Les affirmations relatives à la sécurité doivent être accompagnées des conditions dans lesquelles les systèmes ont été testés et des taux d'échec connus ventilés par langue, genre, handicap et région - Divulgation désagrégée des données de sécurité
La diligence raisonnable en matière de droits de l'homme et les évaluations d'impact doivent être obligatoires avant et après le déploiement de l'IA, et non simplement aspirationnelles - Diligence raisonnable obligatoire
Instaurer la confiance dans l'IA nécessite une mise en œuvre efficace et pratique, notamment une gouvernance responsable, une sécurité juridique, des mécanismes de soutien et un investissement soutenu dans la culture numérique et les compétences technologiques - La mise en œuvre comme fondement de la confiance
La protection des enfants contre les préjudices de l'IA a été l'une des préoccupations les plus largement partagées au cours de la session. Turk a appelé à une attention particulière à la protection des enfants en ligne et a encouragé à s'appuyer sur les lignes directrices du HCDH . Livingstone a présenté de nombreuses preuves de violations des droits de l'enfant, notamment que dans 11 pays du Sud global, jusqu'à un enfant par classe a signalé que l'IA avait été utilisée pour créer des deepfakes sexuellement explicites les représentant, et que les signalements de matériel d'abus sexuel sur enfants généré par l'IA augmentent de façon exponentielle . Lametti a décrit la loi proposée par le Canada exigeant que les chatbots d'IA soient prouvés sûrs avant d'être exposés aux enfants . Henriques a soutenu au nom de plus de 120 signataires que les droits de l'enfant doivent être au cœur de la gouvernance de l'IA et que la sécurité doit être intégrée dans les systèmes dès le départ . Kiladze a déclaré que l'histoire ne nous jugera pas à l'intelligence de notre IA, mais à notre capacité à avoir protégé ceux qui ont la voix la plus faible et l'enjeu le plus grand dans l'avenir . Brant a décrit le statut numérique du Brésil exigeant que les plateformes adoptent des mesures de protection de l'enfance dès la phase de conception . Kakkar a soutenu que nous avons besoin d'une certification et d'un suivi post-déploiement des préjudices et des impacts, et que la responsabilité doit être renvoyée aux plateformes, aux entreprises, aux gouvernements et aux régulateurs .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
La loi proposée par le Canada exigerait que les chatbots d'IA soient prouvés sûrs avant d'être exposés aux enfants, avec un commissaire au numérique chargé d'assurer la conformité - Législation sur la preuve de sécurité
Les droits de l'enfant doivent être au cœur de la gouvernance de l'IA en tant que considération transversale, la sécurité devant être intégrée dans les systèmes dès le départ plutôt qu'ajoutée après qu'un préjudice s'est produit - Les droits de l'enfant comme question transversale
Les enfants ne forment pas un groupe homogène ; les enfants autochtones, les filles, les enfants handicapés et les enfants d'ascendance africaine subissent des impacts disproportionnés des lacunes de la gouvernance de l'IA - Intersectionnalité des droits de l'enfant
Les enfants ne devraient interagir avec des systèmes d'IA que s'ils sont prouvés sûrs et conçus pour respecter les droits de l'enfant, la responsabilité incombant à ceux qui construisent et tirent profit de la technologie - Preuve de sécurité avant l'exposition des enfants
L'innovation ne doit pas se faire au détriment des enfants ; en cas de préjudice potentiel, la protection doit être prioritaire, et les systèmes d'IA ne doivent être accessibles aux enfants que s'ils sont prouvés sûrs et conçus pour respecter leurs droits - Protection plutôt qu'innovation pour les enfants
Les enfants d'aujourd'hui sont des natifs de l'IA qui ont besoin d'une éducation et de compétences en pensée critique pour interagir avec l'IA de manière équilibrée, leurs voix devant alimenter les discussions sur la gouvernance - Culture numérique de l'IA pour les enfants
L'histoire nous jugera non pas à l'intelligence de notre IA, mais à notre capacité à avoir protégé ceux qui ont la voix la plus faible et l'enjeu le plus grand dans l'avenir - Responsabilité morale envers les enfants
Un large consensus s'est dégagé sur le fait que l'IA n'opère pas sur un terrain neutre, mais amplifie activement les inégalités existantes. Turk a déclaré que l'IA alimente la surveillance de masse, la désinformation et permet les biais, notamment d'un point de vue de genre, et que l'IA creusera les inégalités plutôt que de contribuer à les réduire sans une gouvernance inclusive . Bahous a cité des données montrant que 44 % des systèmes d'IA évalués présentent des biais de genre et que jusqu'à 99 % des deepfakes en ligne ciblent des femmes . Livingstone a documenté que le pouvoir de l'IA est concentré dans très peu d'entreprises, de pays et de langues, avec des impacts négatifs sur les cultures, les langues, l'inclusion et l'éducation . Dad a soutenu que les entreprises réalisent des évaluations significatives des droits de l'homme principalement là où la loi l'exige, principalement dans l'UE, créant un régime de droits à deux vitesses déterminé par la géographie . López Agueda a averti que sans une gouvernance inclusive, le Sud global ne servira que de batterie ou de fournisseur de données pour les grandes puissances . Chetty a soutenu que les cadres de gouvernance dominants approfondissent les inégalités existantes en extrayant de la valeur des individus, des communautés et des nations sans contrepartie .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
La gouvernance de l'IA doit être traitée comme une question fondamentale de droits de l'homme, et non comme une simple question technique, le droit international des droits de l'homme fournissant un cadre juridique contraignant - Les droits de l'homme comme cadre contraignant
44 % des systèmes d'IA évalués présentent des biais de genre, et l'IA reproduit et amplifie des stéréotypes néfastes parce que les données d'entraînement reflètent les biais existants - L'IA amplifie les biais de genre
Les violences basées sur le genre facilitées par la technologie ne peuvent pas être traitées comme une question de sécurité de niche ; tout cadre de diligence raisonnable qui ne les aborde pas a exclu la moitié de la population de sa protection - Les VBGT comme question systémique
Sans une gouvernance inclusive, le Sud global ne servira que de batterie ou de fournisseur de données pour les grandes puissances - Le Sud global comme colonie de données
Les cadres de gouvernance de l'IA doivent aller au-delà des modèles autorégulés fondés sur l'éthique pour adopter des cadres normatifs ancrés dans le droit international des droits de l'homme - Au-delà de l'éthique volontaire
La CEDAW fournit un cadre essentiel obligeant les États à parvenir à l'égalité réelle et à s'attaquer aux obstacles structurels dans la gouvernance de l'IA - La CEDAW comme cadre de gouvernance de l'IA
Les campagnes de désinformation et les discours de haine amplifiés par l'IA contraignent les femmes et les filles à s'autocensurer, compromettant leur participation démocratique - Désinformation et exclusion démocratique
Les intervenants ont convergé vers l'idée que l'IA agentique représente un défi de responsabilité qualitativement nouveau. El Fallah Seghrouchni a décrit la responsabilité dans les systèmes agentiques comme probablement le défi juridique le plus important de la décennie, notant qu'avec des réseaux d'agents individuellement autonomes, aucun être humain n'est à l'origine de la décision finale . Elle a proposé trois obligations : une documentation structurée des chaînes d'agents, un être humain identifiable responsable des questions liées aux droits, et un droit à un recours en temps utile . Luccioni a soutenu que l'IA agentique amplifie les degrés de séparation entre les utilisateurs et la technologie sous-jacente, rendant plus difficile l'identification de l'origine des défaillances . Park a noté que le problème survient lorsque des systèmes multi-agents de différentes entreprises sont interconnectés, chaque entreprise ayant sa propre définition du risque lié à l'IA . Hicks a rapporté que les personnes interrogées ont identifié de manière écrasante les entreprises développant des modèles d'IA, les États et les organisations déployant l'IA comme les principales parties responsables de l'IA agentique .
L'IA agentique crée le défi de responsabilité juridique le plus important de la décennie, car aucun être humain n'est à l'origine des décisions finales dans les réseaux d'agents autonomes - Lacune de responsabilité de l'IA agentique
Les systèmes d'IA doivent faire l'objet d'une documentation structurée des chaînes d'agents, de la désignation d'un responsable humain identifiable et d'un droit à un recours en temps utile - Trois obligations de responsabilité
L'IA agentique amplifie les degrés de séparation entre les utilisateurs et la technologie sous-jacente, rendant plus difficile l'identification de l'origine des défaillances - Opacité de l'IA agentique
Les évaluations d'impact sur le genre et les droits de l'enfant doivent être obligatoires, réalisées avant le déploiement avec la participation des communautés concernées - Évaluations d'impact de genre obligatoires
Les personnes interrogées ont identifié de manière écrasante les entreprises développant l'IA, les États et les organisations déployant l'IA comme les principales parties responsables des actions de l'IA agentique, conformément aux Principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme - Responsabilité distribuée pour l'IA agentique
Des normes communes et bien conçues pour les risques liés à l'IA, incluant des considérations relatives aux droits de l'homme, sont nécessaires pour garantir le fonctionnement cohérent des comités de diligence raisonnable en matière de droits de l'homme dans les systèmes multi-agents interconnectés - Nécessité de normes communes en matière de risques liés à l'IA
Un large consensus s'est dégagé sur le fait que la participation significative des communautés concernées n'est pas optionnelle, mais essentielle à une gouvernance légitime de l'IA. Bahous a déclaré que les femmes et les filles, les technologistes féministes, les communautés autochtones, les organisations de travailleurs, les défenseurs des droits des personnes handicapées et la société civile doivent être véritablement impliqués et habilités . Paullier a soutenu que les jeunes sont les utilisateurs les plus actifs de l'IA mais presque jamais les décideurs, et que si des espaces significatifs ne sont pas créés, les jeunes créeront leurs propres espaces comme cela s'est produit dans le domaine climatique . Aerdts a noté que lors de l'élaboration de politiques pour les enfants et les jeunes, ceux-ci doivent être véritablement inclus dans le processus décisionnel . Dad a soutenu que les évaluations d'impact sur le genre et les droits de l'enfant doivent être réalisées avant le déploiement avec la participation des communautés concernées, et non simplement documentées . Bonyo a souligné que 51 % des discussions sur la gouvernance de l'IA se déroulent à Genève, excluant effectivement le reste du monde . La représentante de l'APC a déclaré que les communautés ne sont pas le dernier kilomètre de l'IA, mais le premier . Hicks a fait référence à une enquête auprès de 1 000 enfants dans 49 pays qui ont déclaré vouloir que l'IA soit façonnée avec eux, et non simplement pour eux .
Les femmes et les filles, les technologistes féministes, les communautés autochtones et la société civile doivent être véritablement impliqués et habilités dans la gouvernance de l'IA - Exigence de participation inclusive
Les jeunes sont les utilisateurs les plus actifs de l'IA et les innovateurs les plus fréquents au sein des entreprises d'IA, mais ils ne sont presque jamais les décideurs, malgré le fait qu'ils vivront le plus longtemps avec les conséquences - Les jeunes exclus des décisions sur l'IA
Lorsqu'on élabore des politiques pour les enfants et les jeunes, ceux-ci doivent être véritablement inclus dans le processus décisionnel aux côtés des parents et des éducateurs, et non laissés à faire face à des problèmes trop importants pour les parents mais trop mineurs pour la police - Inclusion authentique des jeunes dans les politiques
La diligence raisonnable en matière de droits de l'homme et les évaluations d'impact doivent être obligatoires avant et après le déploiement de l'IA, et non simplement aspirationnelles - Diligence raisonnable obligatoire
51 % des discussions sur la gouvernance de l'IA se déroulent à Genève, ce qui signifie que le reste du monde en est effectivement exclu en raison des restrictions de visa, qui reposent elles-mêmes sur des algorithmes opaques - Les algorithmes de visa excluent les voix mondiales
La connectivité centrée sur les communautés est une condition préalable à une participation équitable à l'IA ; les communautés ne sont pas le dernier kilomètre mais le premier kilomètre de l'IA - Les communautés comme premier kilomètre
Une enquête auprès de 1 000 enfants dans 49 pays a révélé qu'ils souhaitent que l'IA soit façonnée avec eux, et non simplement pour eux, et qu'ils veulent qu'elle respecte leurs droits plutôt que d'en être simplement protégés - Les enfants veulent un rôle actif dans la gouvernance de l'IA
Les intervenants ont globalement convenu que la nature mondiale de l'IA exige une coopération internationale et des cadres multilatéraux contraignants. Turk a appelé à une réglementation guidée par les droits humains comme solution la plus évidente, et a noté que le service consultatif du HCDH vise à aider les États à gouverner l'IA conformément à leurs responsabilités en matière de droits humains . Kownacki a salué la Convention-cadre du Conseil de l'Europe sur l'IA comme le premier traité contraignant inscrivant l'IA dans l'ordre des droits humains, de la démocratie et de l'état de droit . Lampel a appelé à faire appliquer dès aujourd'hui le droit international des droits humains par le biais de cadres juridiques contraignants, appliqués de manière égale indépendamment de la richesse ou du pouvoir . Pipan a appelé au renforcement de la coopération internationale par l'échange de bonnes pratiques, d'approches interopérables et le renforcement des capacités . Cha a déclaré que la République de Corée considère l'accès à l'IA non pas comme un privilège à mériter, mais comme un droit fondamental à exercer, et a présenté la vision de la Corée pour un Hub mondial de l'IA . Bellion-Jourdan a soutenu que l'utilisation d'outils de négociation pour passer d'une négociation positionnelle à une négociation intégrative est essentielle pour forger un terrain commun sur la gouvernance mondiale de l'IA .
Le système des Nations Unies doit utiliser le droit international des droits de l'homme comme boussole contraignante pour la gouvernance de l'IA, le service consultatif du HCDH aidant les États à gouverner l'IA conformément à leurs responsabilités en matière de droits de l'homme - Le cadre des droits de l'homme de l'ONU comme boussole
La Convention-cadre du Conseil de l'Europe sur l'IA est le premier traité contraignant plaçant l'IA dans l'ordre des droits de l'homme, de la démocratie et de l'état de droit - Premier traité contraignant sur l'IA
L'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, indépendamment de la richesse, du pouvoir ou de l'influence - Cadres juridiques contraignants
La coopération internationale par l'échange de bonnes pratiques, des approches interopérables et le renforcement des capacités est essentielle pour faire progresser une IA digne de confiance à l'échelle mondiale - Coopération internationale pour une IA digne de confiance
L'accès à l'IA doit être traité non pas comme un privilège à mériter, mais comme un droit fondamental à exercer, avec un renforcement mondial des capacités en matière d'IA pour réduire les disparités de préparation - L'accès à l'IA comme droit
L'engagement de l'Uruguay en faveur d'une gouvernance de l'IA tenant compte du genre et du Partenariat mondial pour les droits de l'homme représente une plateforme multipartite reliant les efforts sur les impacts transversaux de l'IA - Plateforme multipartite pour les droits de l'homme
Access Now appelle à l'arrêt des outils d'IA facilitant les violations du droit international humanitaire et du droit des droits de l'homme, notamment dans les contextes de conflit, ainsi qu'à des mécanismes de gouvernance mondiale contraignants - Arrêt de l'IA violant le DIH
Les intérêts géopolitiques concurrents entravent la gouvernance mondiale de l'IA, et le recours à des outils de négociation pour passer du marchandage positionnel à la négociation intégrative est essentiel pour forger un terrain commun - La négociation comme outil de gouvernance
Ces intervenants partagent une perspective détaillée et fondée sur des données probantes concernant les préjudices genrés de l'IA, en soutenant que la violence basée sur le genre facilitée par la technologie est une question systémique nécessitant des réponses de gouvernance obligatoires. Bahous a cité que 44 % des systèmes d'IA évalués présentent un biais de genre et que jusqu'à 99 % des deepfakes en ligne ciblent des femmes , tandis que Dad a documenté plus de 23 000 cas de violence facilitée par la technologie via la ligne d'assistance de son organisation . Eghobamien-Mshelia a soutenu que la CEDAW oblige les États à parvenir à l'égalité substantielle et à s'attaquer aux obstacles structurels dans l'IA . Smyth a déclaré que les campagnes de désinformation amplifiées par l'IA contraignent les femmes et les filles à s'autocensurer et à se retirer des espaces en ligne . Brant a décrit le décret brésilien interdisant les images intimes synthétiques basées sur de vraies personnes tierces . Toutes ont convenu que ces préjudices ne sont pas des questions de sécurité marginales, mais des violations fondamentales des droits de l'homme nécessitant des cadres de gouvernance obligatoires. Ces intervenants convergent sur l'idée que la base de données probantes concernant les impacts de l'IA sur les droits de l'homme est nettement insuffisante et que les cadres d'évaluation actuels sont mal alignés avec les besoins sociétaux. Livingstone a noté que les preuves de violations des droits de l'homme sont actuellement bien plus convaincantes que les preuves de bénéfices pour les droits de l'homme dans de nombreux contextes . Ottley a soutenu qu'il existe un décalage entre les métriques d'ingénierie et les questions sociétales, ainsi qu'une lacune significative dans les données probantes concernant la manière dont l'IA affecte la prise de décision des individus, l'apprentissage des enfants et les décisions cliniques . Park a appelé à des normes communes et bien conçues pour établir une base de référence commune pour l'évaluation des risques liés à l'IA . Dad a soutenu que les organisations de la société civile qui documentent les préjudices sont les premiers capteurs des dommages liés à l'IA, mais qu'elles restent sous-financées et précaires, traitées comme des anecdotes plutôt que comme des données probantes . Ces intervenants, principalement issus du Sud global ou le représentant, ainsi que de la société civile, partagent une critique structurelle de la gouvernance actuelle de l'IA comme étant extractive et excluante. Kakkar a soutenu que la concentration des centres de données et l'extraction de minéraux se produisent principalement dans des zones déjà marquées par les inégalités dans le Sud global, et a soulevé des questions fondamentales sur la manière dont la valeur économique est accumulée loin des communautés les plus touchées . Chetty a soutenu que les cadres de gouvernance dominants extraient de la valeur des individus, des communautés et des nations sans bénéfice, contribution ou contrôle réciproques . Shahani a appelé à des capacités financées publiquement et hébergées régionalement pour évaluer les systèmes d'IA avant leur déploiement, et a noté que les savoirs autochtones et traditionnels sont absorbés dans les données d'entraînement sans consentement . Bonyo a souligné que 51 % des discussions sur la gouvernance de l'IA se déroulent à Genève, excluant de fait le reste du monde . La représentante de l'APC a soutenu que les communautés ne sont pas le dernier maillon de l'IA, mais le premier . Ces intervenants partagent l'idée que les jeunes et les enfants doivent être des participants actifs à la gouvernance de l'IA plutôt que des sujets passifs de protection. Paullier a soutenu que les jeunes sont les utilisateurs les plus actifs de l'IA, mais qu'ils ne sont presque jamais les décideurs, et que des espaces significatifs doivent être créés, notamment au niveau national . Aerdts a noté que lors de l'élaboration de politiques pour les enfants et les jeunes, ceux-ci doivent être véritablement associés au processus décisionnel, et a mis en évidence un vide où les jeunes font face à des problèmes trop importants pour les parents, mais trop mineurs pour la police . Park a soutenu que les enfants sont des natifs de l'IA qui ont besoin de compétences en pensée critique et que leurs voix devraient alimenter les discussions sur la gouvernance . Hicks a cité une enquête menée auprès de 1 000 enfants dans 49 pays, qui ont déclaré vouloir que l'IA soit façonnée avec eux, et pas seulement pour eux . Chappaz a souligné que les enfants ne peuvent pas être exclus des discussions sur la gouvernance . Ces intervenants partagent une préoccupation quant au rôle de l'IA dans la déstabilisation de l'écosystème informationnel et dans la propagation de la désinformation et des discours haineux aux conséquences concrètes. Osterling a soutenu que le journalisme est une espèce clé de voûte de l'écosystème informationnel et que les systèmes d'IA sont entraînés sur des contenus journalistiques récupérés sans consentement, ce qui fragilise les modèles économiques du journalisme et la confiance du public . Brant a appelé à considérer l'intégrité de l'information dans le cadre de l'article 19 dans sa dimension collective ou sociale, et a noté que l'impact de l'IA sur la viabilité économique du journalisme devrait être une source de préoccupation . Smyth a soutenu que la modération de contenu en ligne par l'IA sans supervision humaine peut amplifier la désinformation, affectant de manière disproportionnée les femmes et les filles . Tan a cité des exemples concrets en Libye et au sein de la communauté Rohingya où des contenus générés par l'IA ont attisé l'hostilité et les abus . Ces intervenants partagent une critique structurelle de l'empreinte physique et environnementale de l'IA en tant que question de droits de l'homme concentrée dans des communautés déjà marginalisées. Luccioni a soutenu que si les bénéfices de l'IA peuvent techniquement être mondiaux, les impacts négatifs en termes d'eau, d'énergie, d'émissions et de santé sont très locaux et touchent les populations les plus marginalisées . Kakkar a soulevé des questions fondamentales sur la concentration des centres de données et l'extraction de minéraux principalement dans des zones d'inégalité existante dans le Sud global, et sur la manière dont la valeur économique est accumulée loin des communautés les plus touchées . Chetty a soutenu que les impacts planétaires et en matière de durabilité de l'IA doivent être mis en lumière parallèlement au développement et à la prospérité des populations locales .
Il était quelque peu inattendu qu'un représentant d'une grande entreprise commerciale de musique (Universal Music Group) et des représentants d'organisations de la société civile et de chercheurs en environnement convergent sur la transparence comme exigence fondamentale. Baruch, représentant Universal Music Group, a déclaré que sans transparence, il ne peut y avoir ni responsabilité, ni confiance, ni collaboration significative, et a appelé à ce que les créateurs sachent quand et comment leurs œuvres sont utilisées pour développer des modèles d'IA . Luccioni, dans une perspective de recherche environnementale, a décrit la transparence comme un droit humain fondamental pour lequel elle se bat, permettant aux utilisateurs de faire des choix éclairés . Dad, dans une perspective de société civile axée sur les droits numériques, a appelé à résoudre le problème des données probantes en dotant les organisations de la société civile de ressources pour qu'elles jouent un rôle de systèmes d'alerte précoce . Park, représentant une grande entreprise de télécommunications, a appelé à l'établissement de normes communes et bien conçues pour l'évaluation des risques liés à l'IA . Bien que représentant des constituencies très différentes aux intérêts souvent concurrents, tous ont convergé sur la transparence comme exigence fondamentale de la responsabilisation.
Il est notable que des gouvernements d'Espagne, de Pologne, d'Irlande, de Corée du Sud, de Slovénie et des Pays-Bas - représentant des traditions politiques, des blocs régionaux et des niveaux de développement de l'IA différents - aient tous explicitement rejeté le cadrage opposant innovation et réglementation. López Agueda a présenté la gouvernance de l'IA comme un choix entre droits numériques et oligarchie . Kownacki a déclaré que la réponse de la Pologne n'est pas de freiner l'innovation, mais de placer l'être humain au cœur du dispositif . Smyth a soutenu que l'Irlande croit fermement que les droits humains doivent être au cœur de la gouvernance de l'IA . Cha a déclaré que la Corée du Sud considère l'accès à l'IA non pas comme un privilège, mais comme un droit fondamental . Pipan a soutenu que la confiance n'est pas seulement un objectif éthique, mais un prérequis à une adoption plus large de l'IA . Aerdts a présenté des outils pratiques néerlandais comme preuve que la gouvernance fondée sur les droits et le déploiement efficace de l'IA sont compatibles . Ce consensus gouvernemental transrégional sur la compatibilité de la réglementation et de l'innovation était plus fort que ce à quoi on aurait pu s'attendre compte tenu des tensions géopolitiques persistantes autour de la gouvernance de l'IA.
Il était inattendu qu'un représentant d'Universal Music Group ait explicitement ancré la position de l'industrie musicale dans le droit international des droits humains, citant l'article 27 de la Déclaration universelle des droits de l'homme et l'article 15 du PIDESC comme protégeant les intérêts moraux et matériels des créateurs à l'ère de l'IA . Cela s'est aligné étroitement avec les positions de défenseurs des droits humains tels que Bahous, qui a cité les mêmes instruments comme fournissant un cadre complet pour protéger les droits , et Eghobamien-Mshelia, qui a soutenu que la CEDAW fournit un cadre essentiel pour la gouvernance de l'IA . Lampel a appelé à faire appliquer dès aujourd'hui le droit international des droits humains . La convergence d'un représentant de l'industrie musicale commerciale avec des défenseurs des droits humains sur l'applicabilité directe du droit international des droits humains existant à la gouvernance de l'IA constituait un domaine notable de consensus inattendu.
Le fait de présenter l'impact environnemental de l'IA comme une question de droits humains, plutôt que comme une simple préoccupation technique ou de durabilité, a constitué un domaine de consensus inattendu. Turk a noté que les centres de données hébergeant les serveurs d'IA étouffent l'environnement . Luccioni a soutenu que la transparence sur la consommation énergétique de l'IA est un droit humain fondamental et que les impacts environnementaux négatifs sont très locaux, affectant de manière disproportionnée les populations les plus marginalisées . Kakkar a soulevé des questions fondamentales sur la concentration des centres de données et l'extraction de minéraux dans des zones déjà marquées par les inégalités dans le Sud global . Lametti a explicitement remercié Luccioni d'avoir mis en lumière les dimensions des droits humains liées au climat et à l'impact climatique de l'IA . Hicks a noté que la durabilité environnementale figurait parmi les principales préoccupations en matière de droits humains identifiées dans l'enquête auprès des participants . Cette convergence entre un Haut-Commissaire, une scientifique spécialisée dans l'environnement, un universitaire en droit, un diplomate et un organisateur de session sur le cadrage des droits humains de l'impact environnemental de l'IA était notable.
La session a révélé un niveau de consensus remarquablement élevé parmi un large éventail d'intervenants — notamment des ministres gouvernementaux, des responsables de l'ONU, des représentants de la société civile, des universitaires, des acteurs du secteur privé et des représentants d'organisations internationales — sur plusieurs principes fondamentaux de la gouvernance de l'IA. Les domaines de convergence les plus forts étaient les suivants : (1) la gouvernance de l'IA doit être ancrée dans le droit international contraignant des droits de l'homme plutôt que dans une éthique volontaire ; (2) la réglementation et l'innovation sont complémentaires et non antagonistes ; (3) la supervision humaine effective doit être substantielle et non nominale ; (4) la transparence est une exigence fondamentale dans toutes les dimensions de l'IA ; (5) les enfants nécessitent une protection particulière, dont la responsabilité incombe aux développeurs et aux déployeurs ; (6) l'IA amplifie les inégalités existantes et requiert des réponses proactives en matière de gouvernance ; (7) l'IA agentique crée des défis de responsabilité sans précédent ; et (8) les communautés concernées doivent être véritablement associées aux processus de gouvernance. Une convergence notable s'est également dégagée sur la nécessité d'une coopération internationale et de cadres multilatéraux contraignants, ainsi que sur la reconnaissance de l'impact environnemental de l'IA en tant que question de droits de l'homme. Parmi les domaines de consensus inattendus, on notera la convergence entre le secteur privé (Universal Music Group) et la société civile sur la transparence et l'applicabilité du droit existant des droits de l'homme, ainsi que le rejet unanime, par des gouvernements issus de contextes politiques et régionaux très différents, de l'opposition entre innovation et réglementation.
Volker Turk soutient qu'une réglementation guidée par les droits de l'homme est la solution la plus évidente et s'interroge sur les raisons pour lesquelles cela fait encore débat , tandis que Zachary Lampel insiste sur le fait que l'état de droit exige des cadres juridiques contraignants appliqués de manière égale, indépendamment de la richesse ou du pouvoir . Nighat Dad appelle à des obligations de diligence raisonnable obligatoires . En revanche, Ulises Gutiérrez soutient que l'évolution rapide du paysage signifie que la gouvernance ne peut se limiter à la seule réglementation et que ce dont on a besoin est un nouveau contrat social aux niveaux national et international . El Fallah Seghrouchni, sans s'opposer à la réglementation, souligne que les mécanismes juridiques existants sont insuffisants pour traiter les effets internes et psychologiques de l'IA, suggérant que de nouveaux paradigmes de responsabilité sont nécessaires au-delà des approches réglementaires conventionnelles .
La solution la plus évidente, une réglementation guidée par les droits de l'homme, est là, sous nos yeux — le cadre des droits de l'homme de l'ONU comme boussole
L'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, indépendamment de la richesse, du pouvoir ou de l'influence — Cadres juridiques contraignants
La diligence raisonnable en matière de droits de l'homme et les évaluations d'impact doivent être obligatoires avant et après le déploiement de l'IA, et non simplement aspirationnelles — Diligence raisonnable obligatoire
Gouvernerr l'IA nécessite un nouveau contrat social aux niveaux national et international, et pas seulement une réglementation — Nouveau contrat social
L'IA agentique crée le défi de responsabilité juridique le plus important de la décennie, car aucun être humain unique n'est à l'origine des décisions finales dans les réseaux d'agents autonomes — Lacune de responsabilité de l'IA agentique
Nighat Dad soutient que les évaluations doivent être répétées chaque fois que les capacités changent de manière significative, y compris lors d'augmentations de la fonction agentique, et qu'une évaluation unique au lancement est structurellement inadéquate car les préjudices émergent lors du déploiement, de l'interaction et de l'itération . El Fallah Seghrouchni se concentre sur la nécessité d'une documentation structurée des chaînes d'agents et d'une responsabilité humaine identifiable au moment du déploiement dans les services publics . Luccioni souligne que l'IA agentique rend plus difficile l'identification de l'origine des défaillances et appelle à des garanties et des normes à chaque maillon de la machine . Kakkar insiste sur le fait que les systèmes judiciaires devront identifier les préjudices qui n'émergent qu'après une surveillance au niveau sociétal, suggérant une approche à la fois réactive et proactive . Ces intervenants partagent une préoccupation concernant la gouvernance du cycle de vie, mais divergent sur la question de savoir si l'accent doit être mis sur l'évaluation obligatoire avant le déploiement, la surveillance continue ou le recours après le préjudice.
La diligence raisonnable en matière de droits de l'homme et les évaluations d'impact doivent être obligatoires avant et après le déploiement de l'IA, et non simplement aspirationnelles — Diligence raisonnable obligatoire
Les systèmes d'IA doivent faire l'objet d'une documentation structurée des chaînes d'agents, de la désignation d'un responsable humain identifiable et d'un droit à un recours en temps utile — Trois obligations de responsabilité
L'IA agentique amplifie les degrés de séparation entre les utilisateurs et la technologie sous-jacente, rendant plus difficile l'identification de l'origine des défaillances — Opacité de l'IA agentique
Les systèmes judiciaires doivent convertir les principes des droits de l'homme en réalité en garantissant la responsabilité lorsque l'IA cause un préjudice, en mettant l'accent sur la transparence, la traçabilité et un recours effectif — Les systèmes judiciaires comme mécanismes de responsabilité
Livingstone met explicitement en garde contre le fait de résoudre le problème en restreignant les enfants, et souligne les droits des enfants à l'expression, à la participation, à l'éducation et à l'information à l'ère numérique . Lametti décrit la loi proposée par le Canada qui restreindrait l'accès des enfants de moins de 16 ans aux plateformes sociales jusqu'à ce qu'elles soient prouvées sûres, et exigerait que les chatbots d'IA soient prouvés sûrs avant d'être exposés aux enfants . Henriques soutient que les enfants ne devraient interagir avec les systèmes d'IA que s'ils sont prouvés sûrs et conçus pour respecter leurs droits , tandis que Kakkar soulève la préoccupation que la surveillance constante des enfants par l'IA pose des questions fondamentales sur leur développement en tant que citoyens démocratiques . Park adopte une perspective différente, soutenant que puisque les enfants sont déjà des natifs de l'IA, l'accent devrait être mis sur l'éducation et la pensée critique plutôt que sur la restriction . Ces intervenants s'accordent sur le fait que les enfants ont besoin de protection, mais divergent sur la question de savoir si la restriction, les exigences de preuve de sécurité, la conception fondée sur les droits ou l'éducation constitue le mécanisme principal.
Il existe un défi méthodologique dans l'étude des enfants en tant que catégorie protégée, ce qui explique en partie le manque de données probantes sur l'impact de l'IA sur les enfants et nécessite une approche prudente — Obstacles méthodologiques à la recherche sur les enfants
La loi proposée par le Canada exigerait que les chatbots d'IA soient prouvés sûrs avant d'être exposés aux enfants, avec un commissaire au numérique chargé d'assurer la conformité — Législation sur la preuve de sécurité
Les enfants ne constituent pas un groupe homogène ; les enfants autochtones, les filles, les enfants handicapés et les enfants d'ascendance africaine subissent des impacts disproportionnés des lacunes de la gouvernance de l'IA — Intersectionnalité des droits de l'enfant
L'IA et l'enfance soulèvent également un point fondamental concernant la surveillance des enfants — comment un enfant constamment observé et surveillé peut-il grandir en tant que membre actif d'une société démocratique ?
Les enfants d'aujourd'hui sont des natifs de l'IA qui ont besoin d'éducation et d'esprit critique pour interagir avec l'IA de manière équilibrée, et leurs voix doivent alimenter les discussions sur la gouvernance — Littératie en IA pour les enfants
Nighat Dad caractérise explicitement l'application inégale de la diligence raisonnable en matière de droits de l'homme selon les marchés comme un choix structurel, et non comme un manque de capacité, notant que les entreprises procèdent à des évaluations significatives principalement là où la loi l'exige (l'UE), puis déploient les mêmes systèmes dans le monde majoritaire sans processus équivalents . Shahani, en revanche, cadre le problème en partie comme une question de capacité, appelant à une capacité financée par des fonds publics et hébergée régionalement pour évaluer les systèmes d'IA avant leur déploiement, ainsi qu'à des référentiels ouverts construits avec et pour les langues sous-dotées en ressources . Chetty soutient que les modèles de gouvernance dominants sont structurellement inadéquats parce qu'ils sont calibrés pour les pays à revenus élevés et ignorent la souveraineté ou l'agentivité , s'alignant davantage sur la critique structurelle de Dad, mais formulant la solution comme un changement de cadre normatif plutôt que comme l'application des obligations existantes.
La diligence raisonnable en matière de droits de l'homme est appliquée de manière inégale selon les marchés, créant un régime de droits à deux vitesses déterminé par la géographie — Inégalité géographique dans la diligence raisonnable
Les pays de la majorité mondiale importent largement des modèles formés ailleurs et les déploient dans des contextes à enjeux élevés sans les moyens de les évaluer, ce qui nécessite une capacité d'évaluation régionale financée par des fonds publics — Capacité d'évaluation régionale
Les cadres de gouvernance de l'IA doivent aller au-delà des modèles d'autorégulation fondés sur l'éthique pour adopter des cadres normatifs ancrés dans le droit international des droits de l'homme — Au-delà de l'éthique volontaire
Ottley met en évidence un manque significatif de données probantes, notant que si les données sur les performances des modèles d'IA sont abondantes, il existe très peu de données sur la façon dont l'IA affecte la prise de décision des personnes, l'apprentissage des enfants ou les décisions cliniques, et que répondre à ces questions nécessite des études longitudinales et une collaboration interdisciplinaire . Livingstone, cependant, soutient que les données probantes relatives aux violations des droits de l'homme sont actuellement bien plus convaincantes que celles relatives aux bénéfices des droits de l'homme dans de nombreux contextes , et présente de nombreux préjudices documentés subis par les enfants . Dad soutient que le problème des données probantes est fondamentalement un problème de ressources et que les organisations de la société civile ont déjà documenté des préjudices des années avant qu'ils n'entrent dans les conversations politiques mondiales, mais que cette documentation est traitée comme une anecdote plutôt que comme une preuve . El Fallah Seghrouchni soulève une dimension différente, notant que même les chercheurs en IA ne disposent pas toujours des outils nécessaires pour comprendre la complexité des algorithmes, rendant la responsabilité extrêmement difficile indépendamment de la disponibilité des données probantes .
Il existe un manque significatif de données probantes sur la façon dont l'IA affecte la prise de décision des personnes, l'apprentissage des enfants, les décisions cliniques et le travail des agents publics, ce qui nécessite des études longitudinales interdisciplinaires — Lacune de données probantes sur l'impact de l'IA
Les organisations de la société civile dans le monde majoritaire sont des capteurs précoces des préjudices liés à l'IA, mais restent sans financement et précaires, ce qui nécessite des ressources et une connexion aux processus décisionnels — Financement des données probantes de la société civile
Les données probantes relatives aux violations des droits de l'homme sont actuellement bien plus convaincantes que celles relatives aux bénéfices des droits de l'homme dans de nombreux contextes où l'IA est utilisée
L'IA agentique crée le défi de responsabilité juridique le plus important de la décennie, car aucun être humain unique n'est à l'origine des décisions finales dans les réseaux d'agents autonomes — Lacune de responsabilité de l'IA agentique
Shahani soutient explicitement que la compatibilité entre les approches nationales n'exige pas l'uniformité, et qu'un socle commun de garanties en matière de droits, incluant la divulgation, la contestabilité et le recours, peut coexister avec un véritable pluralisme au-delà de ce socle . Lampel, en revanche, insiste sur le fait que l'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, sans égard pour la richesse, le pouvoir ou l'influence, ce qui implique une approche plus uniforme . Kownacki soutient que le facteur humain est le terrain commun sur lequel une véritable gouvernance mondiale peut être construite, suggérant un principe universel plutôt qu'un cadre pluraliste . Chetty appelle à dépasser l'éthique aspirationnelle pour adopter des cadres normatifs ancrés dans le droit international des droits de l'homme , ce qui implique une approche plus contraignante et uniforme que le modèle pluraliste de Shahani.
Un socle commun de garanties en matière de droits, incluant la divulgation, la contestabilité et le recours, doit s'appliquer à toute personne affectée par l'IA — Socle commun de droits
L'état de droit exige la mise en œuvre de cadres juridiques contraignants de manière égale, indépendamment de la richesse, du pouvoir ou de l'influence — Cadres juridiques contraignants
Le facteur humain — maintenir une personne ayant le dernier mot pour comprendre, contester et désactiver les décisions de l'IA — est le terrain commun sur lequel une véritable gouvernance mondiale de l'IA peut être construite — Le facteur humain comme terrain commun
Les cadres de gouvernance de l'IA doivent aller au-delà des modèles d'autorégulation fondés sur l'éthique pour adopter des cadres normatifs ancrés dans le droit international des droits de l'homme — Au-delà de l'éthique volontaire
Ce résultat est inattendu car les trois intervenants sont globalement alignés sur la nécessité d'un renforcement de la gouvernance de l'IA, mais divergent significativement sur l'état de la base de données probantes. Ottley, s'exprimant au nom du Groupe scientifique indépendant, met en évidence un manque significatif de données probantes et soutient que répondre aux questions sur l'impact sociétal de l'IA nécessite des études longitudinales, des collaborations interdisciplinaires et un travail minutieux avec les communautés protégées . Livingstone, également membre du Groupe scientifique, adopte une position radicalement différente, affirmant que les données probantes relatives aux violations des droits de l'homme sont actuellement bien plus convaincantes que celles relatives aux bénéfices des droits de l'homme . Dad soutient que le problème des données probantes est fondamentalement un problème de ressources, et que les organisations de la société civile ont déjà documenté des préjudices des années avant qu'ils n'entrent dans les conversations politiques mondiales, mais que cette documentation est traitée comme une anecdote plutôt que comme une preuve . Ce désaccord interne au sein et autour du Groupe scientifique sur l'adéquation des données probantes existantes est inattendu compte tenu du contexte institutionnel partagé et pourrait avoir des implications significatives sur l'urgence et la forme des réponses en matière de gouvernance.
Il s'agit d'un désaccord inattendu car il transcende la division habituelle entre gouvernance et industrie. Kakkar soutient explicitement que sans diffusion du pouvoir au-delà d'une poignée d'entreprises dans quelques juridictions, les garanties en matière de droits humains ne peuvent être assurées , et Chetty affirme que les modèles de gouvernance actuels sont structurellement inadéquats parce qu'ils sont pilotés par des acteurs dominants . Dad qualifie le manque d'uniformité dans la diligence raisonnable de choix structurel, et non de lacune de capacité . En revanche, Baruch, de Universal Music Group, soutient que la solution réside dans des accords librement et volontairement négociés entre créateurs, titulaires de droits et développeurs de technologies , et présente les partenariats existants avec les grandes entreprises technologiques comme la preuve que l'innovation et la protection des droits peuvent progresser conjointement . Ce désaccord est inattendu car le modèle de partenariat volontaire défendu par Baruch est précisément le type d'approche que Kakkar, Dad et Chetty jugent structurellement insuffisant pour remédier aux déséquilibres de pouvoir.
Il s'agit d'un désaccord inattendu car il remet en question la légitimité du forum même dans lequel se déroule le dialogue. Bonyo appelle explicitement à la transparence algorithmique concernant les procédures de visa, en soulignant que 51 % des discussions sur la gouvernance de l'IA se tiennent à Genève et que le reste du monde en est effectivement exclu faute d'accès aux visas . Elle cite nommément une participante absente, Freedom Wangi, une travailleuse de l'IA qui n'a pas pu obtenir de visa . Cela remet implicitement en cause l'engagement procédural de la co-modératrice en faveur d'une large participation et l'appel de López Agueda à un dialogue mondial inclusif , en soulignant que les conditions structurelles du dialogue lui-même reproduisent les exclusions que ce dialogue est censé traiter. Ce désaccord méta-niveau portant sur l'inclusivité du processus de gouvernance lui-même était inattendu dans le cadre d'un dialogue formel des Nations Unies.
Il s'agit d'un désaccord inattendu car, si Luccioni soutient que la transparence sur l'empreinte environnementale de l'IA est un droit humain fondamental et consacre l'intégralité de son intervention à cette question , Turk ne mentionne que brièvement les centres de données qui asphyxient l'environnement, comme l'un des éléments d'une liste de préjudices liés à l'IA , et Hicks rapporte que, dans l'enquête auprès des participants, la durabilité environnementale s'est classée au quatrième rang des préoccupations en matière de droits humains, derrière la responsabilité et l'état de droit, l'impact sur les enfants et la surveillance . Cela révèle un écart significatif entre le cadrage de Luccioni, qui présente l'impact environnemental comme une question centrale des droits humains, et le traitement de cette question par le dialogue dans son ensemble, qui la relègue au rang de préoccupation secondaire. Les résultats de l'enquête présentés par Hicks révèlent implicitement que les participants eux-mêmes n'accordent pas à la durabilité environnementale la priorité que l'argumentation de Luccioni laisserait supposer.
Le dialogue révèle un large consensus sur la nécessité d'une gouvernance de l'IA fondée sur les droits humains, mais des désaccords significatifs sur la forme, l'urgence et la portée des mécanismes de gouvernance. Les principales lignes de fracture sont les suivantes : (1) réglementation contraignante versus cadres de gouvernance plus larges et contrats sociaux ; (2) la question de savoir si les preuves existantes de préjudices sont suffisantes pour justifier une action immédiate ou si des données longitudinales plus rigoureuses sont nécessaires ; (3) si l'inégalité géographique dans la diligence raisonnable est un choix structurel ou une lacune de capacité ; (4) comment protéger les enfants par la restriction, la conception fondée sur les droits ou l'éducation ; (5) si des normes universelles contraignantes ou un socle commun assorti d'un pluralisme au-delà constituent le modèle approprié ; et (6) si l'impact environnemental de l'IA est une question centrale des droits humains ou une préoccupation secondaire. Il existe également un désaccord méta-niveau inattendu sur la question de savoir si le dialogue sur la gouvernance lui-même reproduit les exclusions qu'il cherche à traiter, soulevé par la contestation de Bonyo concernant les algorithmes de visa .
Les cinq intervenants s'accordent à dire que la gouvernance de l'IA est fondamentalement une question de droits humains et que les préjudices genrés liés à l'IA sont graves et systémiques. Turk affirme que l'IA alimente la désinformation et favorise les biais, notamment dans une perspective de genre ; Bahous documente que 44 % des systèmes d'IA évalués présentent des biais de genre et que jusqu'à 99 % des deepfakes ciblent des femmes ; Dad recense plus de 23 000 cas de violence facilitée par la technologie touchant de manière disproportionnée les femmes ; Eghobamien-Mshelia soutient que la CEDAW oblige les États à parvenir à l'égalité substantielle dans la gouvernance de l'IA ; et Smyth appelle à des garanties en matière de droits humains pour prévenir les violences basées sur le genre facilitées par la technologie . Cependant, ils divergent sur les mécanismes spécifiques : Bahous met l'accent sur les évaluations d'impact obligatoires et la représentation dans les effectifs , Dad se concentre sur des obligations de diligence raisonnable uniformes sur tous les marchés , Eghobamien-Mshelia insiste sur le cadre existant de la CEDAW , et Smyth se concentre sur la modération des contenus et la désinformation .
La gouvernance de l'IA doit être traitée comme une question fondamentale de droits humains, et non comme une simple question technique, le droit international des droits humains fournissant un cadre juridique contraignant - Les droits humains comme cadre contraignant Les évaluations d'impact sur les droits des femmes et des enfants doivent être obligatoires, réalisées avant le déploiement avec la participation des communautés concernées - Évaluations d'impact de genre obligatoires La violence de genre facilitée par la technologie ne peut être traitée comme un problème de sécurité de niche ; tout cadre de diligence raisonnable qui ne l'aborde pas a exclu la moitié de la population de sa protection - La VGFT comme problème systémique La CEDAW fournit un cadre essentiel exigeant des États qu'ils parviennent à l'égalité substantielle et s'attaquent aux obstacles structurels dans la gouvernance de l'IA - La CEDAW comme cadre de gouvernance de l'IA Les campagnes de désinformation et les discours de haine amplifiés par l'IA contraignent les femmes et les filles à l'autocensure, compromettant leur participation démocratique - Désinformation et exclusion démocratique
Les quatre intervenants s'accordent à dire que la responsabilité des systèmes d'IA agentiques constitue un défi critique et urgent. Arias Arzeno soutient qu'aucune institution publique ne peut justifier une décision en affirmant que le système le lui a dicté ; El Fallah Seghrouchni identifie la responsabilité de l'IA agentique comme le défi juridique le plus important de la décennie ; Luccioni soutient que l'IA agentique amplifie les degrés de séparation, rendant plus difficile l'identification de l'origine des défaillances ; et Kakkar souligne le fossé de gouvernance transnational transfrontalier comme le plus grand défi pour les systèmes judiciaires . Cependant, ils divergent sur les solutions : El Fallah Seghrouchni propose une documentation structurée des chaînes d'agents et une responsabilité humaine identifiable , Luccioni appelle à des normes à chaque maillon de la chaîne , Arias Arzeno se concentre sur le maintien de la responsabilité auprès des personnes et des institutions , et Kakkar insiste sur la nécessité de transférer la charge de la preuve aux entreprises .
Les systèmes judiciaires doivent convertir les principes des droits humains en réalité en garantissant la responsabilité lorsque l'IA cause un préjudice, en mettant l'accent sur la transparence, la traçabilité et le recours effectif - Les systèmes judiciaires comme mécanismes de responsabilité Les systèmes d'IA doivent faire l'objet d'une documentation structurée des chaînes d'agents, de la désignation d'un responsable humain identifiable et d'un droit à un recours en temps utile - Trois obligations de responsabilité L'IA agentique amplifie les degrés de séparation entre les utilisateurs et la technologie sous-jacente, rendant plus difficile l'identification de l'origine des défaillances - Opacité de l'IA agentique Les systèmes judiciaires devront faire face à la question la plus importante, à savoir le fossé de gouvernance transnational et transfrontalier
Les quatre intervenants s'accordent à dire que les jeunes et les enfants doivent être véritablement inclus dans la gouvernance de l'IA plutôt que d'en être simplement les sujets protégés. Paullier soutient que les jeunes sont les utilisateurs les plus actifs de l'IA mais qu'ils ne sont presque jamais les décideurs ; Aerdts insiste sur l'inclusion des jeunes dans les processus décisionnels aux côtés des parents et des éducateurs ; Park soutient que les voix des enfants devraient alimenter les discussions sur la gouvernance ; et Hicks cite une enquête menée auprès de 1 000 enfants dans 49 pays, qui ont déclaré vouloir que l'IA soit façonnée avec eux, et pas seulement pour eux . Cependant, ils divergent sur le mécanisme : Paullier met l'accent sur les structures de participation au niveau national , Aerdts se concentre sur les panels de jeunes de l'UNICEF et l'inclusion des parents , Park se concentre sur les programmes scolaires connectés aux ONG , et Hicks fait référence à une méthodologie d'enquête dédiée .
Des espaces significatifs permettant aux jeunes de participer à la gouvernance de l'IA doivent être créés au niveau national, et pas seulement au niveau mondial, car les jeunes comprennent le mieux à la fois les opportunités et les risques - Participation des jeunes au niveau national Lors de l'élaboration de politiques pour les enfants et les jeunes, ceux-ci doivent être véritablement inclus dans le processus décisionnel aux côtés des parents et des éducateurs, et ne pas être laissés à faire face à des problèmes trop importants pour les parents mais trop mineurs pour la police - Inclusion authentique des jeunes dans les politiques Les enfants d'aujourd'hui sont des natifs de l'IA qui ont besoin d'éducation et de compétences en pensée critique pour interagir avec l'IA de manière équilibrée, leurs voix devant alimenter les discussions sur la gouvernance - Littératie en IA pour les enfants Une enquête menée auprès de 1 000 enfants dans 49 pays a révélé qu'ils souhaitent que l'IA soit façonnée avec eux, et non simplement pour eux, et qu'elle respecte leurs droits plutôt que de simplement les en protéger - Les enfants veulent avoir leur mot à dire dans la gouvernance de l'IA
Les quatre intervenants s'accordent à dire que les impacts négatifs des infrastructures d'IA se concentrent dans le Sud global et parmi les communautés marginalisées, tandis que les bénéfices s'accumulent ailleurs. Luccioni soutient que si les avantages de l'IA peuvent être mondiaux, les impacts environnementaux négatifs sont très locaux et affectent de manière disproportionnée les populations marginalisées ; Kakkar note que les centres de données et l'extraction de minéraux se concentrent dans des zones déjà marquées par les inégalités dans le Sud global ; Chetty soutient que les modèles de gouvernance dominants extraient de la valeur des individus, des communautés et des nations sans contrepartie ; et la représentante de l'APC soutient que les communautés doivent posséder et gérer leur propre infrastructure de connectivité . Cependant, ils divergent sur les solutions : Luccioni se concentre sur la transparence énergétique et l'étiquetage , Kakkar se concentre sur le passage des droits individuels aux droits collectifs , Chetty propose le cadre normatif Just AI , et la représentante de l'APC se concentre sur une infrastructure de connectivité centrée sur les communautés .
Les centres de données rendent les impacts négatifs de l'IA très locaux en termes d'eau, d'énergie, d'émissions et de santé, affectant de manière disproportionnée les populations les plus marginalisées - Préjudices environnementaux locaux Nous observons également une concentration des centres de données et une extraction de minéraux, principalement dans des sites où les inégalités sont déjà très prononcées dans le Sud global La séparation de la gouvernance des données et de la gouvernance de l'IA dans les forums internationaux occulte la justice des données fondamentale qui doit sous-tendre tous les systèmes d'IA - La justice des données indissociable de la gouvernance de l'IA La connectivité centrée sur les communautés est un prérequis pour une participation équitable à l'IA ; les communautés ne sont pas le dernier kilomètre mais le premier kilomètre de l'IA - Les communautés comme premier kilomètre
Les quatre intervenants s'accordent à dire que la désinformation générée par l'IA et l'érosion de l'écosystème informationnel posent de graves risques pour les droits humains. Osterling soutient que le journalisme est une espèce clé de voûte de l'écosystème informationnel et que les systèmes d'IA sont entraînés sur des contenus journalistiques récupérés sans consentement ; Brant appelle à considérer l'intégrité de l'information comme un droit collectif englobant le besoin d'une information cohérente, exacte et fiable ; Smyth soutient que la modération des contenus par l'IA sans supervision humaine amplifie la désinformation, affectant de manière disproportionnée les femmes et les filles ; et Tan présente des exemples concrets de discours haineux générés par l'IA créant des risques de protection pour les réfugiés en Libye et pour les Rohingyas . Cependant, ils divergent sur la priorité : Osterling met l'accent sur la viabilité économique du journalisme et l'infrastructure numérique publique , Brant se concentre sur la responsabilité des plateformes et la responsabilité partagée , Smyth se concentre sur la dimension genrée , et Tan se concentre sur les risques de protection pour les personnes déplacées et apatrides .
Le journalisme est une espèce clé de voûte de l'écosystème de l'information ; les systèmes d'IA sont entraînés sur des contenus journalistiques collectés sans consentement ni compensation, ce qui fragilise les modèles économiques du journalisme - Le journalisme comme infrastructure critique L'intégrité de l'information doit être comprise dans sa dimension collective ou sociale, en tant que composante du droit d'accès à une information exacte et fiable, et l'impact de l'IA sur la viabilité économique du journalisme doit être traité - L'intégrité de l'information comme droit collectif Les outils d'IA utilisés pour la modération de contenus en ligne sans supervision humaine peuvent amplifier la désinformation, affectant de manière disproportionnée les femmes et les filles - La modération automatisée amplifie la désinformation La désinformation générée par l'IA et les discours de haine en ligne ont créé des risques de protection directs pour les réfugiés et les personnes déplacées, comme en témoignent les situations en Libye et parmi les Rohingyas - Les discours de haine générés par l'IA comme risque de protection
- La gouvernance de l'IA doit être ancrée dans le droit international des droits de l'homme en tant que cadre juridique contraignant, et non dans une éthique purement aspirationnelle ou une autorégulation volontaire, la réglementation étant considérée comme un prérequis à la confiance du public plutôt que comme un obstacle à l'innovation.
- Le devoir de diligence en matière de droits de l'homme et les évaluations d'impact doivent être obligatoires tout au long du cycle de vie de l'IA — de la conception au déploiement et au suivi — et doivent s'appliquer de manière uniforme sur tous les marchés et dans toutes les zones géographiques, et non uniquement là où la réglementation l'impose.
- L'IA agentique représente le défi de responsabilité juridique le plus important de la décennie, car les réseaux d'agents autonomes rendent extrêmement difficile l'identification du nœud ayant causé un préjudice et la détermination du responsable, ce qui nécessite de nouveaux paradigmes de responsabilité, notamment une documentation structurée des chaînes d'agents et la désignation d'un responsable humain identifiable.
- L'IA nuit de manière disproportionnée aux femmes et aux filles par le biais de biais algorithmiques, de deepfakes, de violences basées sur le genre facilitées par la technologie et de leur exclusion de la gouvernance de l'IA ; 44 % des systèmes d'IA évalués présentent un biais de genre, jusqu'à 99 % des deepfakes en ligne ciblent des femmes, et seulement 24 pays sur 138 font référence au genre dans leurs stratégies nationales d'IA.
- Les droits de l'enfant doivent constituer une considération transversale dans tous les cadres de gouvernance de l'IA, la sécurité devant être intégrée dans les systèmes dès leur conception ; les données montrent une augmentation exponentielle des contenus pédopornographiques générés par l'IA, des défaillances systématiques des produits d'IA compagnons à satisfaire aux normes de sécurité les plus élémentaires, et jusqu'à un enfant par classe dans 11 pays du Sud global signalant des deepfakes sexuels générés par l'IA les représentant.
- Le pouvoir sur l'IA est dangereusement concentré entre les mains d'une poignée d'entreprises et de quelques pays, ce qui aggrave les inégalités mondiales ; les pays de la majorité mondiale importent en grande partie des modèles entraînés ailleurs et les déploient dans des contextes à forts enjeux sans disposer des moyens de les évaluer, tandis que les organisations de la société civile de ces pays qui documentent les préjudices liés à l'IA restent chroniquement sous-financées.
- Les impacts environnementaux négatifs de l'IA — notamment la consommation d'eau et d'énergie, les émissions et les atteintes à la santé liées aux centres de données — sont très localisés et affectent de manière disproportionnée les populations les plus marginalisées, mais la transparence sur ces impacts reste très insuffisante, même pour les organisations internationales.
- Il existe un décalage critique entre les métriques d'ingénierie (vitesse, précision, capacité) et les questions sociétales auxquelles la gouvernance de l'IA doit répondre (protection des droits de l'homme, responsabilité des institutions, amélioration de la société) ; la société doit définir ce que signifie le succès et la science doit le mesurer.
- Les jeunes sont les utilisateurs les plus actifs de l'IA et vivront le plus longtemps avec les conséquences des décisions prises aujourd'hui, pourtant ils ne sont presque jamais associés aux prises de décision ; une participation significative des jeunes doit être créée au niveau national, et pas seulement dans les forums mondiaux.
- L'IA menace l'écosystème de l'information en alimentant la désinformation, en fragilisant les modèles économiques du journalisme par la collecte non consentie de contenus journalistiques, et en permettant des discours haineux générés par l'IA qui créent des risques de protection directs pour les réfugiés et les personnes déplacées.
- Les algorithmes de gestion des visas et des frontières soulèvent déjà des préoccupations en matière de droits de l'homme, des processus algorithmiques opaques restreignant la participation aux discussions sur la gouvernance de l'IA ; 51 % des conversations sur la gouvernance de l'IA se déroulent à Genève, tandis que le reste du monde en est effectivement exclu.
- La liberté de pensée, longtemps englobée dans la liberté d'expression, doit être réinterprétée dans le contexte de l'IA qui menace l'autonomie cognitive par le micro-ciblage, la manipulation et le profilage psychologique, y compris des enfants.
“Avant qu'un nouveau médicament arrive sur le marché, il fait l'objet d'années d'essais cliniques, de modifications réglementaires, d'examens et d'autorisations de mise sur le marché. Ce processus peut durer entre 10 et 15 ans. De nombreux médicaments échouent en raison d'un manque d'efficacité ou de problèmes de sécurité. Et même avec toutes ces garanties, des erreurs peuvent encore se produire. Prenons-nous le même soin avec l'intelligence artificielle ?”
“Cela me rappelle le protagoniste K dans le roman de Franz Kafka, Le Château. K arrive dans un nouveau village en tant qu'arpenteur et passe le reste du roman à tenter de comprendre un système qui demeure inaccessible et sans comptes à rendre. Sommes-nous comme K, piégés dans un système de pouvoir opaque dans lequel nous perdons notre capacité d'agir ? L'IA est une question de pouvoir sur les données, les marchés, les ressources et l'information, mais à quelles fins ?”
“Le slogan non officiel de l'industrie technologique et de l'IA est : plus grand, plus rapide, meilleur. Je préférerais plaider pour : plus intelligent, plus humain, plus sage.”
“La notion de quelque chose d'exogène par rapport à quelque chose d'endogène... Lorsque vous utilisez des algorithmes qui manipulent la psychologie d'un enfant, c'est quelque chose que vous ne pouvez pas mesurer. C'est quelque chose que vous ne pouvez même pas percevoir. Par conséquent, la nature interne de la psychologie de l'enfant et la nature interne des effets de l'IA créent des problèmes considérables au niveau des droits et des mécanismes juridiques dont nous disposons. Comment pouvons-nous auditer nos neurones ? Comment pouvons-nous comprendre que nos cerveaux ont été transformés ?”
“La responsabilité dans les systèmes agentiques est probablement le défi juridique le plus important de cette décennie, car nous avons un réseau d'agents d'IA qui sont individuellement autonomes et il n'y a aucun être humain à l'origine de la décision finale. Ainsi, lorsque nous voulons rendre un réseau agentique responsable, nous ne savons pas lequel des agents est responsable et nous ne savons pas comment répartir cette responsabilité entre les différents agents.”
“Les preuves des violations sont actuellement bien plus convaincantes que les preuves des bénéfices pour les droits humains dans de nombreux contextes où l'IA est utilisée... Nous avons également identifié les coûts d'opportunité : le fait de ne pas réaliser les bénéfices de l'IA constitue également un risque pour les droits humains.”
“Dans 11 pays du Sud global, jusqu'à un enfant par classe a signalé que l'IA avait été utilisée pour créer des deepfakes sexuellement explicites le représentant. Les signalements de matériel d'abus sexuel sur enfants généré par l'IA à la cyber tip line américaine du NCMEC augmentent de façon exponentielle. Du matériel d'abus sexuel sur enfants est documenté dans certains ensembles de données d'entraînement, et les auteurs d'infractions peuvent désormais affiner des modèles ouverts à partir d'images d'exploitation sexuelle d'enfants.”
“La diligence raisonnable en matière de droits humains, telle que la pratiquent la plupart des entreprises d'IA aujourd'hui, ne répond pas véritablement aux normes des principes directeurs des Nations Unies relatifs aux entreprises et aux droits de l'homme. Elle intervient après que les décisions de co-conception ont été prises. Elle se produit là où la réglementation l'impose. Et elle se déroule sans la participation des personnes réellement concernées. Ce que nous avons dans la plupart des cas n'est pas de la diligence raisonnable. C'est véritablement de la documentation... Les entreprises réalisent des évaluations significatives là où la loi l'exige, principalement dans l'UE. Elles déploient ensuite le même système dans la majorité du monde sans processus équivalent. Et je dirais que c'est un choix structurel, non pas un manque de capacité.”
“La société doit décider à quoi ressemble le succès, et la science doit déterminer comment le mesurer. Et ensemble, nous devons construire les données probantes qui nous indiquent si nous l'atteignons réellement. Avons-nous donc convenu de ce à quoi ressemble le succès ?”
“Le problème des données probantes est un problème de ressources. Les organisations de la société civile ou les organisations numérisées dans la majorité du monde sont les capteurs les plus précoces des préjudices liés à l'IA. Nous avons documenté les images intimes synthétiques ciblant les femmes des années avant que cela n'entre dans les discussions politiques mondiales. Mais cette documentation est non financée, précaire et traitée comme une anecdote plutôt que comme une preuve. Si ce dialogue souhaite un système d'alerte précoce pour les préjudices liés à l'IA, il existe déjà. Il doit être doté de ressources et connecté aux processus décisionnels.”
“Lorsque nous décidons de ce qu'un algorithme peut faire à un être humain, nous décidons de ce que nous croyons qu'une personne vaut... Certains choix ne doivent jamais être laissés à une machine seule. La Pologne le sait. Elle le sait de sa propre histoire, elle sait ce que cela coûte quand les gens perdent le contrôle sur les systèmes qui décident de leur sort.”
“51 % des discussions sur la gouvernance de l'IA cette année ont lieu à Genève. Ce qui signifie que le reste du monde en est largement exclu, faute de pouvoir obtenir un visa pour venir ici. Je nous invite donc à reconsidérer ce que cela implique... Je demande aux pays du Nord global de reconsidérer le type d'algorithmes auxquels nous sous-traitons la décision d'autoriser ou non les gens à se rendre ici.”
Comment peut-on évaluer les effets de l'IA sur la cognition et la psychologie humaines, en particulier chez les enfants ?
La Ministre a soulevé le concept de droits cognitifs et la difficulté de mesurer la manipulation psychologique par les algorithmes. Elle a noté que même les chercheurs en IA manquent d'outils pour comprendre pleinement la complexité de ces systèmes, ce qui rend essentiel le développement de méthodes permettant d'évaluer les impacts cognitifs internes de l'IA, en particulier sur les enfants.
Comment la responsabilité doit-elle être répartie au sein de réseaux d'agents IA autonomes lorsqu'aucun être humain n'est à l'origine d'une décision finale ?
Plusieurs intervenants ont souligné que les systèmes d'IA agentiques créent un nouveau défi juridique non résolu : lorsqu'un réseau d'agents contribue chacun de manière incrémentale à un résultat préjudiciable, il n'est pas clair quel agent ou quel mandant humain porte la responsabilité. Cela nécessite un nouveau paradigme de responsabilité, incluant une documentation structurée des chaînes d'agents et une supervision humaine identifiable.
Quelles études longitudinales et quelles recherches interdisciplinaires sont nécessaires pour comprendre comment l'IA affecte réellement l'apprentissage, la santé mentale et le développement des enfants ?
Les deux panélistes ont noté un manque significatif de preuves : si les données sur les performances des modèles d'IA sont abondantes, il existe très peu de preuves rigoureuses sur la manière dont l'IA affecte l'éducation, le bien-être émotionnel et le développement cognitif des enfants. Des études longitudinales et des partenariats avec des communautés protégées sont nécessaires.
Comment rendre le devoir de diligence en matière de droits humains obligatoire et uniforme sur tous les marchés où un système d'IA est déployé, et pas seulement dans les juridictions dotées d'une réglementation solide ?
La fondatrice de la Digital Rights Foundation a mis en évidence un régime structurel à deux niveaux de droits, dans lequel des évaluations significatives des droits humains sont menées dans l'UE mais pas dans le Sud global. Des recherches et des développements politiques supplémentaires sont nécessaires pour établir des obligations de diligence raisonnable uniformes, indépendamment de la géographie.
Comment définir et mesurer le « succès » des systèmes d'IA en termes de droits humains, de responsabilité et de bien-être sociétal, plutôt qu'en fonction de simples critères techniques ?
La panéliste scientifique a soutenu que la société et la science posent des questions fondamentalement différentes sur l'IA. La société doit s'accorder sur ce que représente le succès en termes de droits humains, et la science doit ensuite développer les outils pour le mesurer. Sans cet alignement, les cadres de gouvernance risquent d'optimiser pour de mauvais résultats.
Comment les droits cognitifs peuvent-ils être définis juridiquement et protégés dans le contexte de systèmes d'IA qui manipulent les états psychologiques ?
En référence à la première tentative législative du Chili d'introduire des droits cognitifs, la Ministre a soulevé la nécessité de cadres internationaux protégeant les individus contre la manipulation psychologique algorithmique. Il s'agit d'un domaine du droit encore peu exploré qui nécessite des recherches supplémentaires et un développement normatif.
Quels mécanismes peuvent garantir que les enfants soient réellement associés aux processus décisionnels en matière de gouvernance de l'IA ?
Plusieurs intervenants ont noté que les enfants comptent parmi les utilisateurs les plus fréquents de l'IA, mais sont largement absents des discussions sur la gouvernance. Des travaux supplémentaires sont nécessaires pour concevoir des mécanismes de participation inclusifs permettant aux voix des enfants de façonner véritablement les politiques en matière d'IA, et non d'être simplement consultées après que les décisions ont été prises.
Comment rendre transparents et mesurables les impacts environnementaux et sur les droits humains des centres de données d'IA, en particulier pour les communautés marginalisées situées à proximité de ces installations ?
Le cofondateur du Sustainable AI Group a noté que même des organismes internationaux comme l'AIE peinent à obtenir des données sur l'énergie et les émissions de leurs pays membres. Des recherches sont nécessaires sur des mécanismes standardisés de transparence et de reporting concernant l'empreinte environnementale de l'IA, avec une attention particulière aux impacts sanitaires sur les populations locales et marginalisées.
Comment doter les systèmes judiciaires des capacités techniques, de l'expertise et des outils d'application transfrontalière nécessaires pour tenir les acteurs de l'IA responsables de leurs actes ?
Les deux intervenants ont identifié des lacunes importantes dans la capacité judiciaire à traiter les préjudices liés à l'IA, notamment la difficulté de rassembler des preuves, la nature transnationale des chaînes d'approvisionnement de l'IA et la concentration du pouvoir dans une poignée d'entreprises. Des recherches supplémentaires sont nécessaires sur la manière dont les tribunaux peuvent accéder à l'information, inverser la charge de la preuve et faire appliquer les décisions à travers les juridictions.
Comment développer des indicateurs et des systèmes de suivi tenant compte du genre afin de mesurer si les femmes participent à l'IA de manière égale et en tirent des bénéfices équitables, et si elles sont protégées contre les préjudices facilités par l'IA ?
Les deux intervenants ont noté que l'égalité des genres reste largement invisible dans les cadres de gouvernance de l'IA, seule une petite minorité des stratégies nationales en matière d'IA incluant des dispositions substantielles tenant compte du genre. Le développement d'outils de mesure et d'indicateurs robustes est essentiel pour garantir la responsabilité dans le cadre d'instruments tels que la CEDAW.
Quelles sont les implications de la gestion algorithmique par l'IA pour les travailleurs de plateformes, en particulier dans le Sud global, et comment les protections du travail existantes peuvent-elles leur être étendues ?
La fondatrice de Lawyers Hub a mis en lumière les travailleurs de plateforme gérés par des algorithmes au Kenya, tandis que l'intervenante du Tech Global Institute a noté que les travailleurs des données et des plateformes, majoritairement des femmes, ne bénéficient pas de protections du travail. Des recherches supplémentaires sont nécessaires sur la manière dont la gestion algorithmique affecte les droits des travailleurs et sur la façon dont les protections du travail transfrontalières peuvent être appliquées.
Comment remédier à la séparation entre gouvernance des données et gouvernance de l'IA dans les forums internationaux, sachant que la justice des données est fondamentale pour une IA équitable ?
La directrice exécutive de Research ICT Africa a soutenu que traiter la gouvernance des données et la gouvernance de l'IA comme des questions distinctes occulte les injustices fondamentales intégrées dans les systèmes d'IA. Des recherches et des travaux politiques supplémentaires sont nécessaires pour intégrer ces cadres, notamment afin de protéger la souveraineté des données des nations du Sud global.
Comment rendre transparents et soumis à un contrôle au regard des droits humains les algorithmes de gestion des visas et des frontières, alors qu'ils déterminent déjà qui peut participer aux discussions mondiales sur la gouvernance de l'IA ?
La coprésidente a noté que 51 % des conversations sur la gouvernance de l'IA se déroulent à Genève, alors que de nombreuses parties prenantes concernées ne peuvent y assister en raison de refus de visa qui peuvent eux-mêmes être influencés par des algorithmes. Cela soulève des questions urgentes sur la transparence et la responsabilité des systèmes qui contrôlent l'accès à la participation à la gouvernance.
Comment protéger les savoirs autochtones et traditionnels contre leur intégration dans les données d'entraînement de l'IA sans consentement, reconnaissance ni retour aux communautés concernées ?
L'intervenante du Tech Global Institute a soulevé la question de la gestion des données pilotée par les communautés comme forme de supervision humaine, notant que les savoirs autochtones sont extraits sans consentement. Des recherches supplémentaires sont nécessaires sur les mécanismes juridiques et techniques permettant de protéger ces savoirs et de garantir que les communautés bénéficient de leur utilisation.
Quelles infrastructures numériques publiques — notamment les services cloud et les outils journalistiques — sont nécessaires pour éviter que la gouvernance de l'IA et les écosystèmes d'information ne soient contrôlés par une poignée de grandes plateformes ?
Le représentant du Global Forum for Media Development a soutenu que le journalisme est une espèce clé de voûte de l'écosystème informationnel et que les systèmes d'IA entraînés sur des contenus journalistiques sans consentement ni rémunération compromettent la responsabilité démocratique. Des recherches supplémentaires sont nécessaires sur les infrastructures d'IA d'intérêt public et les politiques industrielles favorisant la viabilité des médias.
Comment rendre explicables et contestables les systèmes d'IA utilisés dans les contextes d'asile, de gestion des frontières et de réfugiés, pour des personnes qui peuvent ignorer comment les décisions les concernant ont été prises ?
Le Directeur général du UNHCR a souligné que les personnes déplacées de force et les apatrides se heurtent à des obstacles cumulés lorsqu'elles cherchent à contester des décisions assistées par IA dans des contextes à enjeux élevés, tels que les procédures d'asile. Des recherches sont nécessaires sur des mécanismes d'explication et de recours accessibles, adaptés aux contextes humanitaires.
Comment documenter, prendre en charge et intégrer dans les cadres de gouvernance de l'IA le coût psychologique supporté par les annotateurs de données et les modérateurs de contenu, en particulier dans le Sud global ?
Le co-président a fait référence à l'Africa AI Governance Index et aux effets documentés sur la santé mentale des travailleurs chargés d'entraîner les modèles d'IA. Ce domaine reste insuffisamment étudié et requiert à la fois des investigations empiriques et des réponses politiques étendant les protections des droits humains à l'ensemble de la chaîne de valeur de l'IA.
Comment repenser les processus de négociation multilatérale pour passer d'une logique de positions à une négociation intégrative, afin de dégager un terrain commun sur la gouvernance mondiale de l'IA ?
Le chercheur principal de l'Institute for Global Negotiation a soutenu que la compétition géopolitique constitue un obstacle majeur à la gouvernance mondiale de l'IA et que des formats de négociation innovants sont nécessaires pour concilier des intérêts divergents. Des recherches supplémentaires sur la conception des processus et les méthodologies de négociation sont indispensables pour rendre la gouvernance mondiale de l'IA réalisable.
Comment développer et rendre obligatoires un étiquetage de l'efficacité énergétique des systèmes d'IA et des déclarations standardisées d'impact environnemental, afin de permettre des choix éclairés de la part des utilisateurs, des organisations et des gouvernements ?
La co-fondatrice du Sustainable AI Group a présenté son projet AI Energy Score comme une première étape vers la transparence, tout en soulignant que la mise en œuvre de tels standards se heurte à des résistances importantes. Des travaux de recherche et d'élaboration de politiques supplémentaires sont nécessaires pour développer des indicateurs universellement applicables et comparables permettant d'évaluer le coût environnemental des systèmes d'IA.
Comment les éléments de preuve rassemblés par les organisations de la société civile du Sud global sur les préjudices liés à l'IA peuvent-ils être financés, formalisés et reliés aux processus scientifiques et décisionnels ?
La fondatrice de la Digital Rights Foundation a soutenu que les organisations de la société civile sont des capteurs précoces des préjudices causés par l'IA, mais que leur travail de documentation est non financé et traité comme un témoignage anecdotique plutôt que comme une preuve. Des recherches sont nécessaires pour institutionnaliser et doter de ressources ce savoir, afin qu'il puisse alimenter le consensus scientifique et les politiques publiques en temps utile.
Quels sont les défis méthodologiques liés à l'étude de l'impact de l'IA sur les enfants en tant que catégorie de recherche protégée, et comment les surmonter sans affaiblir les garanties éthiques ?
Le membre du panel scientifique a noté que les enfants constituent une catégorie protégée en éthique de la recherche, ce qui limite les études pouvant être menées et contribue au manque de données probantes sur l'impact de l'IA sur les enfants. Des travaux supplémentaires sont nécessaires pour développer des méthodologies éthiques permettant une recherche rigoureuse tout en maintenant des protections appropriées.
Comment concevoir des cadres de gouvernance de l'IA pour remédier à la concentration du pouvoir entre quelques entreprises et juridictions, et permettre aux nations du Sud global de devenir co-créatrices plutôt que simples consommatrices passives de l'IA ?
Plusieurs intervenants ont identifié la concentration du développement de l'IA dans quelques entreprises et pays comme un obstacle structurel à une gouvernance équitable. Des recherches sont nécessaires sur les alternatives d'intérêt public, le renforcement des capacités régionales en matière d'IA, et les modèles de gouvernance permettant une diffusion du pouvoir et une participation significative des acteurs du Sud global.
Comment la gouvernance de l'IA peut-elle garantir que la connectivité centrée sur les communautés — en particulier pour les communautés autochtones, rurales et de langues sous-représentées — soit considérée comme un prérequis à une participation équitable à l'IA, et non comme une considération secondaire ?
La représentante de l'Association for Progressive Communications a soutenu qu'une gouvernance significative de l'IA exige que les communautés possèdent et gèrent leur propre infrastructure de connectivité. Des recherches supplémentaires sont nécessaires pour déterminer comment les infrastructures numériques communautaires peuvent être intégrées dans les cadres de gouvernance de l'IA en tant qu'exigence fondamentale des droits humains.
