Thematic discussion 3: Safe, secure and trustworthy AI - Global Dialogue on Artificial Intelligence Governance - Day 2
Résumé
Cette discussion portait sur la construction d'une IA sûre, sécurisée et digne de confiance, grâce à l'interopérabilité et à la compatibilité des approches de gouvernance à l'échelle internationale. La co-présidente Paula Bogantes Zamora a formulé le défi central non pas comme la question de savoir si les cadres peuvent coexister sur le papier, mais si la sécurité, la responsabilité et la confiance peuvent être démontrées au-delà des frontières . Elle a souligné que le développement de l'IA est très concentré, les institutions des États-Unis ayant produit 59 modèles d'IA notables et la Chine 35, tandis que le reste du monde n'en a produit que 13 . Elle a également mis en évidence que 118 pays, principalement issus du Sud global, ne participent pas de manière significative aux discussions internationales sur la gouvernance de l'IA .
La co-présidente Rebecca Finlay a appelé à trois actions concrètes : renforcer les preuves scientifiques indépendantes, ouvrir la science grâce à une plus grande transparence et divulgation, et faire progresser l'intérêt public par l'établissement de référentiels inclusifs et une responsabilité publique accrue . Le Secrétaire général adjoint Amandeep Singh-Gill a averti que la fragmentation mondiale conduit à l'arbitrage réglementaire, à des lacunes en matière de responsabilité, à des charges de conformité accrues et à un approfondissement des inégalités de gouvernance , et a soutenu que l'objectif devrait être de construire des passerelles pratiques entre des approches diverses plutôt que d'harmoniser la gouvernance de l'IA en un modèle unique .
Les panélistes ont exploré les éléments constitutifs existants pour l'interopérabilité, notamment les Principes de l'OCDE sur l'IA et le Processus d'IA d'Hiroshima , tandis que des représentants de l'industrie ont noté que même des concepts partagés tels que la « transparence » comportent des exigences techniques différentes selon les cadres, nécessitant une cartographie granulaire au niveau des contrôles plutôt qu'une simple harmonisation de haut niveau . L'Organisation météorologique mondiale s'est appuyée sur plus de 150 ans d'échange de données transfrontalières pour soutenir que la confiance doit être construite par la vérification et des normes communes, et non simplement déclarée , et Dr Joy Buolamwini a averti que les référentiels d'évaluation doivent inclure la majorité mondiale, moins de 5 % de certains référentiels représentant actuellement ces populations .
Les États membres et les parties prenantes ont constamment souligné que l'interopérabilité ne doit pas devenir un mécanisme d'imposition des règles des nations puissantes aux autres , et que les pays en développement doivent participer en tant que co-concepteurs plutôt que simples destinataires des règles . Parmi les priorités spécifiques soulevées figuraient le signalement partagé des incidents , les méthodes d'évaluation multilingues , les bacs à sable réglementaires transfrontaliers , et les défis urgents de gouvernance posés par les systèmes d'IA agentiques agissant de manière autonome au-delà des frontières .
La session s'est conclue par une synthèse des co-présidentes selon laquelle une gouvernance efficace de l'IA nécessite des systèmes adaptatifs, des référentiels minimaux communs ancrés dans les droits humains, des normes ouvertes et inclusives, une vérification indépendante par des tiers, et une participation multi-parties prenantes soutenue entre les dialogues , soulignant que la confiance dans l'IA ne peut être construite que par des preuves, la coopération institutionnelle et des cadres de gouvernance fonctionnant au-delà des frontières .
Points clés
Objectif général
La discussion portait sur la construction d'une IA sûre, sécurisée et digne de confiance grâce à l'interopérabilité et à la compatibilité des approches de gouvernance. La session a réuni des gouvernements, des organisations internationales, l'industrie, le monde académique et la société civile pour explorer comment des cadres nationaux de gouvernance de l'IA diversifiés peuvent être amenés à fonctionner ensemble au-delà des frontières sans nécessiter une harmonisation complète, tout en garantissant une participation inclusive de tous les pays, en particulier ceux du Sud global.
---
Principaux points de discussion
- La concentration du pouvoir en matière d'IA et ses implications pour la gouvernance : Une préoccupation centrale tout au long de la session était la concentration extrême du développement et des infrastructures d'IA dans un petit nombre de pays. En 2025, les institutions des États-Unis ont produit 59 modèles d'IA notables et la Chine 35, tandis que le reste du monde n'en a produit que 13, les États-Unis détenant environ 75 % de la puissance de calcul parmi les 500 plus grands clusters d'IA connus . Cette concentration signifie que les pays et les entreprises disposant de la plus grande capacité de calcul exercent également une influence disproportionnée sur les risques mesurés, les référentiels acceptés et les institutions reconnues comme capables de certifier la sécurité . Par ailleurs, 118 pays, principalement issus du Sud global, ne participent pas de manière significative aux principales discussions internationales sur la gouvernance de l'IA . Des intervenants du Pakistan, du Bangladesh et d'Afrique du Sud ont renforcé cette préoccupation, soutenant que les normes de sécurité ne doivent pas être établies par quelques-uns et exportées vers le plus grand nombre, mais développées par des processus multilatéraux inclusifs .
- L'interopérabilité comme nécessité pratique, et non comme uniformité réglementaire : Plusieurs intervenants ont souligné que l'objectif n'est pas de créer un modèle mondial unique de gouvernance de l'IA, mais de construire des passerelles pratiques entre des approches nationales diverses. L'analogie d'ouverture du facilitateur avec les adaptateurs électriques illustrait ce principe - des systèmes différents peuvent coexister s'ils disposent d'interfaces de confiance . La co-présidente du Costa Rica a proposé un concept d'« interopérabilité minimale viable » avant 2027, englobant une terminologie partagée, des classifications de risques comparables, une documentation cohérente, un signalement interopérable des incidents et des méthodes d'évaluation multilingues . Amandeep Singh-Gill a averti que la fragmentation conduit à l'arbitrage réglementaire, à des lacunes en matière de responsabilité, à des charges de conformité accrues pour les PME et les pays à faible revenu, et à un approfondissement de la dépendance en matière de gouvernance . Syed Ahmed d'Infosys a illustré la complexité pratique, notant que même un concept comme la « transparence » signifie des choses différentes selon l'AI Act de l'UE et les normes ISO, nécessitant une cartographie granulaire approfondie plutôt qu'une harmonisation superficielle .
- Le besoin urgent de preuves scientifiques indépendantes et inclusives : Un thème récurrent était que les cadres de gouvernance se multiplient plus vite que les preuves scientifiques qui les sous-tendent, et que l'évaluation existante est trop souvent réalisée par les entreprises qui développent elles-mêmes les systèmes . Rebecca Finlay a appelé à trois actions concrètes : renforcer la base de preuves scientifiques indépendantes, ouvrir la science grâce à une plus grande transparence et divulgation, et faire progresser l'intérêt public par des référentiels partagés . Dr. Joy Buolamwini a souligné que des mesures de succès trompeuses - telles que des référentiels où moins de 5 % des données représentent la majorité mondiale - risquent d'ancrer les biais plutôt que de les corriger . Le Secrétaire général de l'Organisation météorologique mondiale s'est appuyé sur 150 ans d'échange de données transfrontalières pour soutenir que la confiance doit être construite par la vérification selon des normes partagées, et non simplement déclarée . Le rédacteur principal du Rapport international sur la sécurité de l'IA a souligné que les risques frontières, notamment l'utilisation abusive pour des armes biologiques et les systèmes agentiques défaillants, ne peuvent être écartés comme spéculatifs et nécessitent une attention urgente fondée sur des preuves .
- L'IA agentique comme frontière de gouvernance émergente et urgente : Plusieurs intervenants ont mis en évidence le passage de la supervision des modèles d'IA statiques à la gouvernance dynamique de systèmes agentiques de plus en plus autonomes et multi-étapes, comme défi déterminant. Amandeep Singh-Gill a noté que cette évolution rapide peut dépasser les pratiques de gouvernance existantes, nécessitant des mécanismes adaptatifs tels que des taxonomies de risques évolutives et un déploiement par étapes . Paula Bogantes Zamora a soutenu que l'interopérabilité pour l'IA agentique doit aller au-delà de la connexion des systèmes pour inclure une identité d'agent vérifiable, une délégation traçable, des autorisations lisibles par machine et une révocation efficace . Concordia AI a averti que, les agents d'IA pouvant agir directement sur le monde réel, les défaillances peuvent causer des préjudices graves avant qu'une intervention humaine soit possible, et que les normes de sécurité doivent être proportionnelles aux niveaux d'autonomie . La responsabilité doit être intégrée avant le déploiement, et non ajoutée après un incident, et une chaîne claire de responsabilité humaine doit sous-tendre chaque action d'un agent .
- L'inclusion, la diversité linguistique et le renforcement des capacités comme prérequis d'une gouvernance digne de confiance : Les intervenants ont constamment soutenu que l'interopérabilité risque de reproduire les inégalités si elle présuppose un accès universel à une connectivité avancée, à des ressources de calcul et à une expertise réglementaire . Le monde compte plus de 7 000 langues, mais la formation et l'évaluation de l'IA n'en couvrent qu'une fraction, les modèles présentant souvent des performances moins sûres dans les langues disposant de peu de données numériques . La Lettonie a souligné que l'écart entre les langues dominantes et les langues sous-représentées dans les principaux modèles d'IA se creuse, et non se réduit, et a appelé à des référentiels ouverts reflétant la diversité linguistique et culturelle . Le représentant du Centre pour une IA responsable de l'IIT a noté que même la participation aux forums de gouvernance est inégale, un collègue n'ayant pu y assister en raison de difficultés de visa - illustration concrète des obstacles à l'accès . La Lituanie, le Brésil et l'Éthiopie ont tous appelé à des cadres de gouvernance inclusifs dans leur conception, équitables dans leur application, et favorisant le transfert de technologie et le renforcement des capacités .
---
Ton général
Le ton général de la discussion était constructif et collaboratif, avec une forte note d'urgence sous-jacente. Les intervenants de tous les groupes de parties prenantes partageaient un engagement commun à faire fonctionner la gouvernance de l'IA au-delà des frontières, et il y avait un consensus notable sur le fait que la fragmentation est néfaste et que l'interopérabilité - plutôt que l'uniformité - est l'objectif approprié .
Cependant, le ton portait une note persistante de préoccupation et de franchise. La co-présidente Paula Bogantes Zamora a établi un registre direct dès le début, déclarant sans détour que « le monde n'a pas besoin de davantage de principes sur l'IA - il a besoin d'une manière commune de prouver qu'ils sont mis en œuvre » , et présentant des données saisissantes sur les inégalités mondiales dans le développement de l'IA . Cette honnêteté critique a été reprise par des intervenants du Sud global, qui ont repoussé les cadres de gouvernance risquant d'être « exportés plutôt que partagés » .
La contribution de Dr. Joy Buolamwini a introduit un registre plus poétique et émotionnellement résonnant, ancrant la discussion technique dans le coût humain des préjudices algorithmiques et rappelant aux participants les personnes qui subissent les conséquences des défaillances de gouvernance . Cela a momentanément fait basculer le ton vers une urgence morale avant de revenir au registre pratique et orienté vers les politiques de la session dans son ensemble.
À l'approche des synthèses finales, le ton est devenu plus prospectif et optimiste, les deux co-présidentes soulignant les fondements communs, la valeur de la participation multi-parties prenantes et l'importance de maintenir l'élan entre les dialogues . Dans l'ensemble, la discussion a équilibré le réalisme quant à l'ampleur du défi avec un optimisme sincère quant à la possibilité d'une action collective.
Intervenants
- Paula Bogantes Zamora - Co-présidente du Groupe thématique 3 ; Ministre des Sciences, de l'Innovation, de la Technologie et des Télécommunications du Costa Rica - Rebecca Finlay - Co-présidente du Groupe thématique 3 ; PDG de Partnership on AI - Amandeep Singh-Gill - Secrétaire général adjoint et Envoyé spécial pour la technologie aux Nations Unies - Virginia Dignum - Modératrice du Panel 1 ; Professeure à l'Université d'Umeå - Yoichi Iida - Conseiller au Ministère de l'Économie, du Commerce et de l'Industrie du Japon ; Professeur invité à l'Université de Tokyo ; représentant le Gouvernement du Japon - Syed Ahmed - Représentant d'Infosys ; membre de la communauté des Intégrateurs de systèmes mondiaux (GSI) - Nouf Al Hameli - Conseillère spéciale pour la science et la technologie, Ministère des Affaires étrangères, EAU - Melahat Bilge Demirkoz - Membre du Groupe scientifique international indépendant des Nations Unies sur l'IA - Leonardo Cervera Narvas - Directeur général, Contrôleur européen de la protection des données (CEPD) ; représentant l'autorité de supervision de l'IA de l'Union européenne - Rachel Adams - Modératrice du Panel 2 - Seema Malhotra - Ministre au sein du Foreign, Commonwealth and Development Office du Royaume-Uni - Celeste Saulo - Secrétaire générale de l'Organisation météorologique mondiale (OMM) - Qinghua Lu - Membre du Groupe scientifique international indépendant des Nations Unies sur l'IA ; Chercheuse au CSIRO Australie - Ravin Thambapillai - Co-fondateur et PDG de Credo AI - Joy Buolamwini - Fondatrice de l'Algorithmic Justice League ; chercheuse et poète - Sam Gregory (Witness) - Directeur exécutif de Witness ; représentant de la société civile travaillant sur les deepfakes, l'intégrité de l'information et les droits humains - Représentant de l'UPU - Représentant de l'Union postale universelle, agence spécialisée des Nations Unies - Représentant de la Lettonie - Délégué distingué représentant la Lettonie - Représentant d'EY - Représentant d'Ernst & Young (EY) ; cabinet mondial de services professionnels - Représentant du Brésil - Eugenio Garcia ; délégué distingué représentant le Brésil - Représentant de la France - Délégué distingué représentant la France - Centre pour une IA responsable - Représentant du Centre pour une IA responsable, Institut indien de technologie (IIT) ; intervenant au nom de sa collègue Geeta Raju - Représentant de l'Afrique du Sud - Délégué distingué représentant l'Afrique du Sud - Représentant de la Sociedad Mexicana de Inteligencia Artificial de la Universidad Panamericana - Représentant académique du Mexique ; membre de la Société mexicaine d'intelligence artificielle, Universidad Panamericana - Délégué du Japon - Délégué distingué représentant le Japon (deuxième intervention, distinct de l'apparition de Yoichi Iida en panel) - Représentant de l'IEC - Représentant de la Commission électrotechnique internationale (CEI) - Délégué du Pakistan - Délégué distingué représentant le Pakistan - Représentant de Concordia - Représentant de Concordia AI - Délégué du Bangladesh - Délégué distingué représentant le Bangladesh - Rédacteur principal du Rapport international sur la sécurité de l'IA - Rédacteur principal du Rapport international sur la sécurité de l'IA (édition 2026) ; représentant la communauté d'experts contributeurs - Délégué de l'Australie - Délégué distingué représentant l'Australie - Représentant du Bureau du Coordonnateur résident des Nations Unies - Intervenant au nom de cinq Coordonnateurs résidents servant l'Angola, l'Eswatini, le Costa Rica, le Monténégro et la Bosnie-Herzégovine - Délégué de la Lituanie - Délégué distingué représentant la Lituanie - Représentant du Global Cities Hub - Représentant du Global Cities Hub ; défenseur des gouvernements locaux et régionaux dans la gouvernance de l'IA - Délégué de l'Éthiopie - Délégué distingué représentant l'Éthiopie - Représentant de Dubai Cable - Représentant de Dubai Cable ; praticien en stratégie d'IA d'entreprise - Intervenant 1 (Facilitateur/UNICC ou UNDRR) - Facilitateur représentant l'UNICC (Centre informatique international des Nations Unies) ou l'UNDRR ; a ouvert et géré la logistique de la session - Facilitateur UNICC - Facilitateur représentant l'UNICC ; a présenté les intervenants et géré les transitions entre les panels - Co-président - Co-président de session gérant la parole pour les interventions des États membres et des parties prenantes (rôle procédural distinct, identité non entièrement précisée dans la transcription) - Organisateur de la conférence - Organisateur de conférence non nommé gérant la liste des intervenants et la logistique
Intervenants supplémentaires :
- Yoshua Bengio - Co-président du Groupe scientifique international indépendant des Nations Unies sur l'IA ; présent dans la salle mais n'ayant pas pris la parole - Maria Ressa - Co-présidente du Groupe scientifique international indépendant des Nations Unies sur l'IA ; présente dans la salle mais n'ayant pas pris la parole lors de cette session (mentionnée comme ayant pris la parole la veille)
Groupe thématique 3 : Une IA sûre, fiable et digne de confiance - Interopérabilité et compatibilité des approches
#
Ouverture et cadrage
Le premier Dialogue mondial de l'ONU sur la gouvernance de l'IA, dans le cadre du Groupe thématique 3, a réuni des gouvernements, des organisations internationales, des acteurs industriels, des universitaires et la société civile pour examiner comment des cadres nationaux de gouvernance de l'IA diversifiés peuvent fonctionner ensemble au-delà des frontières sans nécessiter une harmonisation complète. Le facilitateur de la session a ouvert les travaux avec une analogie délibérément accessible : tout comme les voyageurs utilisent des adaptateurs électriques pour faire fonctionner leurs ordinateurs portables et leurs téléphones avec différents systèmes de tension nationaux, la gouvernance de l'IA n'exige pas que chaque pays adopte le même système réglementaire, mais requiert des interfaces de confiance et des normes communes permettant à différentes approches de s'articuler . Le facilitateur a également mentionné l'initiative d'interéchange d'infrastructure IA de l'OMPI comme exemple existant de travaux sur l'interopérabilité dans le domaine de la propriété intellectuelle, soulignant que permettre à différentes législations et systèmes nationaux de fonctionner ensemble n'est pas un défi nouveau. Le facilitateur a présenté l'interopérabilité comme essentielle, avertissant que sans elle, les cadres de gouvernance se fragmentent, la mise en œuvre devient plus complexe et coûteuse, la confiance est plus difficile à établir, et les bénéfices de l'IA sont plus difficiles à concrétiser et à partager .
#
Co-présidente Paula Bogantes Zamora : Le véritable défi de l'interopérabilité
La co-présidente Paula Bogantes Zamora du Costa Rica a d'emblée instauré un niveau d'exigence intellectuelle élevé, affirmant sans détour que « le monde n'a pas besoin de davantage de principes sur l'IA - il a besoin d'une méthode commune pour prouver qu'ils sont mis en œuvre » . Elle a reformulé le défi central : il ne s'agit pas de savoir si les cadres peuvent coexister sur le papier, mais de savoir si la sécurité, la responsabilité et la confiance peuvent être démontrées au-delà des frontières . Cette provocation a déplacé le centre de gravité de la session, passant de l'établissement de principes à la mise en œuvre vérifiable, un thème qui a persisté tout au long de la journée.
Bogantes Zamora a présenté des données saisissantes sur la concentration du développement de l'IA. En 2025, les institutions des États-Unis ont produit 59 modèles d'IA notables et la Chine 35, tandis que le reste du monde n'en a produit que 13 . Les États-Unis détenaient environ 75 % de la puissance de calcul parmi les 500 plus grands clusters d'IA connus, la Chine en détenant 15 % supplémentaires . Elle a tiré de ces chiffres une conclusion structurelle percutante : « la concentration des infrastructures devient concentration des preuves » . Les pays et les entreprises disposant de la plus grande capacité de calcul exercent également une influence disproportionnée sur les risques mesurés, les critères d'évaluation acceptés, les langues évaluées et les institutions reconnues comme capables de certifier la sécurité . Par ailleurs, l'évaluation scientifique préliminaire indiquait que 118 pays, principalement issus du Sud global, ne participent pas de manière significative aux principales discussions internationales sur la gouvernance de l'IA, tandis que moins de 1 % des clusters d'IA mondiaux et un tiers des pays en développement disposent de stratégies nationales en matière d'IA .
Bogantes Zamora a exhorté les participants à résister à deux faux choix. D'une part, l'interopérabilité ne doit pas signifier l'uniformité réglementaire, en particulier lorsque les régions partent de bases technologiques profondément différentes - en 2025, les réseaux 5G couvraient 70 % de la population en Asie-Pacifique mais seulement 12 % en Afrique, et en 2024, l'Afrique n'a capté que 3 % des investissements mondiaux dans les centres de données . D'autre part, le respect du contexte national ne doit pas devenir un prétexte pour des systèmes incapables de communiquer, de comparer des preuves ou de reconnaître mutuellement leurs garanties . L'objectif, a-t-elle soutenu, doit être une compatibilité pratique minimale en matière de terminologie, de classification des risques, de protection des données, de cybersécurité, de documentation, de tests et de signalement des incidents, tout en permettant aux pays de séquencer la mise en œuvre selon leur capacité institutionnelle .
Elle a également mis en lumière la langue comme test décisif : le monde compte plus de 7 000 langues, mais la formation et l'évaluation des modèles d'IA n'en couvrent qu'une fraction, et les modèles fonctionnent souvent de manière moins sûre dans les langues disposant de peu de données numériques . Pour sa région, cela signifiait que les variantes de l'espagnol, le portugais, les langues autochtones et les langues créoles ne peuvent rester en dehors des cadres d'évaluation mondiaux . Pour l'IA agentique - des systèmes susceptibles d'agir au nom de personnes ou d'institutions sur plusieurs plateformes - elle a soutenu que l'interopérabilité doit aller au-delà de la simple connexion des systèmes pour inclure une identité d'agent vérifiable, une délégation traçable, des autorisations lisibles par machine, un échange de données sécurisé, des actions auditables et une révocation effective . L'initiative Arawite de l'Estonie a été citée comme exemple émergent de développement de cadres d'identité et de registre permettant aux États d'interagir avec des agents d'IA de manière fiable et responsable .
Bogantes Zamora a proposé un objectif concret à court terme : une « interopérabilité minimale viable » avant le dialogue de 2027, englobant une terminologie partagée, des classifications de risques comparables, une documentation cohérente, un signalement interopérable des incidents et des méthodes d'évaluation multilingues, avec des voies vers la reconnaissance mutuelle des tests, des audits et des certifications . Elle a conclu en attribuant à la co-présidente Rebecca Finlay l'idée selon laquelle « l'adoption avance à la vitesse de la confiance », soutenant que la confiance ne peut être proclamée par des principes seuls, mais doit être construite par des preuves, des garanties, une coopération institutionnelle et des cadres de gouvernance capables de fonctionner au-delà des frontières .
#
Co-présidente Rebecca Finlay : Trois actions concrètes
La co-présidente Rebecca Finlay du Partnership on AI s'est appuyée sur les contributions de la veille du Secrétaire général Guterres, qui avait souligné l'importance de bases communes pour les systèmes frontières et de méthodes communes pour les vérifier , et de Maria Ressa, qui avait présenté les preuves scientifiques comme l'antidote à la fois aux discours alarmistes et à l'utopisme technologique . Finlay a présenté le panel scientifique et le dialogue comme deux parties complémentaires d'une mission commune : le panel fournit les preuves et le dialogue fournit l'orientation, conçus pour fonctionner ensemble dès le départ .
Elle a recommandé trois actions concrètes pour la session et l'année à venir . Premièrement, renforcer la base de preuves scientifiques indépendantes en investissant dans les travaux du panel scientifique et en les connectant, en favorisant la cohérence par des liens avec d'autres rapports sur l'état de la sécurité - notamment ceux du Royaume-Uni, du Consensus de Singapour et du prochain Rapport sur la sécurité du Sud global - et en approfondissant la science de l'évaluation à l'échelle mondiale . Deuxièmement, donner la priorité à la science et l'ouvrir, en soutenant que la transparence ne ralentit pas le progrès mais le rend vérifiable, crédible et défendable . Elle a appelé à un renforcement de la divulgation de la part des entreprises privées développant et déployant l'IA à l'échelle mondiale, et à la construction d'un écosystème international cohérent d'assurance dans lequel les critères d'évaluation, les normes, l'évaluation par des tiers et la vérification transforment les divulgations individuelles en une base de preuves à l'échelle du secteur . Troisièmement, faire progresser les avancées dans l'intérêt public en définissant de manière inclusive une base commune de bonnes pratiques, en suivant les progrès accomplis et en utilisant les cadres existants des droits de l'homme comme mesure . Pour les risques les plus graves et les groupes les plus vulnérables, notamment les enfants, elle a appelé à des mesures de précaution fondées sur les avis d'experts indépendants .
Finlay a également annoncé le lancement du Global AI Progress Hub, une plateforme publique où les organisations de l'écosystème de l'IA responsable peuvent partager leurs progrès dans le cadre d'un référentiel clair servant l'intérêt public . Elle a proposé une réorientation des questions directrices du domaine : au lieu de demander à quelle vitesse un système peut être déployé, demander qui il sert, qui est responsable en cas d'échec et comment nous le savons ; au lieu de demander quelle est la puissance d'un système, demander dans quelle mesure sa sécurité est vérifiable et sur la base de quelles preuves .
#
Cadrage thématique : Amandeep Singh-Gill sur la fragmentation et l'interopérabilité
Le Secrétaire général adjoint et Envoyé spécial pour les technologies numériques et émergentes Amandeep Singh-Gill - qui a reconnu la présence dans la salle du co-président Ambassadeur Thamsar - a présenté un exposé de cadrage reliant les trois thèmes de la session : renforcer la sécurité et la confiance, permettre à différentes approches de gouvernance de fonctionner au-delà des frontières, et le rôle du dialogue dans la promotion de l'interopérabilité . Il a noté que les travaux menés par le Laboratoire de gouvernance de l'IA pour l'humanité à Valence avaient également produit des preuves du passage d'une gouvernance des systèmes statique à une gouvernance dynamique, notamment à mesure que les systèmes d'IA agentiques deviennent plus autonomes, capables d'utiliser des outils et multi-étapes . Cette évolution rapide peut dépasser les pratiques de gouvernance existantes, nécessitant des mécanismes adaptatifs et anticipatoires tels que des taxonomies de risques évolutives, des environnements de test de contrôle et un déploiement par étapes .
Singh-Gill a ensuite exploré l'antonyme de l'interopérabilité - la fragmentation - en identifiant quatre défis structurels qu'elle crée . Premièrement, l'arbitrage réglementaire, les développeurs et les fournisseurs pouvant déplacer leurs activités vers des juridictions à la surveillance plus faible, affaiblissant la sécurité, la confiance et les protections des droits de l'homme . Deuxièmement, les lacunes en matière de responsabilité, les systèmes d'IA opérant à travers des chaînes de valeur mondiales, rendant difficile la détermination du droit applicable ou l'attribution de responsabilité en cas de préjudice . Troisièmement, l'augmentation des charges de conformité, en particulier pour les PME, les chercheurs et les développeurs des pays à faible revenu qui peuvent manquer des ressources nécessaires pour naviguer dans de multiples régimes . Quatrièmement, l'approfondissement des inégalités de capacité de gouvernance et des dépendances, les États à faible capacité pouvant être contraints soit de s'aligner sur des cadres dominants qui ne reflètent pas les réalités locales, soit de risquer l'exclusion des flux de données mondiaux, du commerce et des investissements .
Il a proposé des bacs à sable réglementaires transfrontaliers comme voie pratique - connectant des bacs à sable de différents environnements pour permettre des projets pilotes transfrontaliers, des évaluations de modèles et le partage de preuves . Il a souligné de manière cruciale que l'objectif n'est pas d'harmoniser la gouvernance de l'IA en un seul modèle, mais de construire des ponts pratiques entre des approches diverses afin que l'IA puisse être sûre, fiable et digne de confiance au-delà des frontières . Il a décrit le dialogue de l'ONU comme une nouvelle approche de l'apprentissage international - non pas une plateforme descendante mais une facilitation horizontale d'une gouvernance de l'IA sûre, fiable, digne de confiance et interopérable .
#
Premier panel : Éléments constitutifs existants et défis pratiques
Le premier panel modéré, présidé par la professeure Virginia Dignum de l'Université d'Umeå, a exploré les cadres existants et les défis pratiques de la fragmentation. Dignum a ouvert les travaux en présentant l'IA comme « un ensemble de choix, techniques, institutionnels et politiques », et l'interopérabilité comme l'un des exemples les plus clairs de tels choix . Sans normes probatoires partagées et approches mutuellement reconnues, a-t-elle averti, les régimes parallèles risquent de ne protéger ni les personnes ni de permettre à la responsabilité de suivre la technologie .
Yoichi Iida, conseiller au ministère japonais de l'Économie, du Commerce et de l'Industrie, a mis en avant les Principes de l'OCDE sur l'IA et le Processus d'IA d'Hiroshima comme instruments fondateurs de l'interopérabilité . Le Japon avait formulé ses lignes directrices nationales et sa loi nationale sur l'IA sur la base de ces principes, et le Processus d'IA d'Hiroshima fournit un code de conduite pour les organisations d'IA, comprenant un cadre volontaire pour évaluer et atténuer les risques et divulguer les informations pertinentes sur la gestion des risques . Il a décrit cette approche comme ascendante et multi-parties prenantes . Les travaux pratiques de cartographie croisée entre le cadre d'Hiroshima et le cadre de l'ASEAN pour les modèles d'IA avancés avaient révélé davantage de points communs que d'écarts, la plupart des différences s'expliquant par la diversité culturelle et sociale plutôt que par une incompatibilité fondamentale .
Syed Ahmed d'Infosys, s'exprimant au nom de la communauté des intégrateurs de systèmes mondiaux, a illustré la complexité pratique de l'interopérabilité du point de vue industriel. Il a noté que même un concept comme la « transparence » comporte des exigences techniques différentes selon les cadres : dans l'ISO, la transparence signifie l'explicabilité du modèle, tandis que dans le règlement européen sur l'IA, elle signifie fournir des preuves suffisantes, notamment des journaux système . Cela signifie que la cartographie n'est pas univoque même lorsque l'intention est globalement la même, et qu'une interopérabilité effective nécessite de descendre deux à trois niveaux pour cartographier chacun des contrôles requis . Il a décrit une tentative d'utiliser l'IA pour construire un adaptateur de gouvernance qui avait échoué au niveau élevé, et a proposé que le travail fondamental nécessaire consiste à construire un méta-modèle pour la cartographie des contrôles au niveau le plus bas, créant un graphe de connaissances pouvant servir de base à l'interopérabilité .
Nouf Al Hameli, conseillère spéciale auprès du ministère des Affaires étrangères des EAU, a abordé la fragmentation sous un angle transfrontalier. Elle a noté que « l'IA à haut risque » ne signifie pas la même chose pour deux régulateurs, le règlement européen sur l'IA définissant les niveaux de risque principalement par cas d'usage, l'approche américaine étant largement sectorielle et volontaire, et d'autres pays exigeant l'enregistrement des algorithmes et l'étiquetage des contenus qui ne se correspondent pas mutuellement . Un seul modèle déployé à l'échelle mondiale peut simultanément être à haut risque, légèrement réglementé et nécessiter un dépôt auprès de l'État selon la frontière qu'il franchit . Elle a également identifié l'absence d'infrastructure partagée de signalement des incidents comme une lacune critique : différents systèmes de surveillance des incidents suivent les défaillances de manière indépendante et volontaire, sans obligation légale de signalement et sans reconnaissance mutuelle, ce qui signifie que si une défaillance de sécurité survient dans un pays, il n'existe pas de voie garantie pour que cette leçon parvienne aux régulateurs ailleurs avant que la même défaillance ne se reproduise . Elle a également attiré l'attention sur la fragmentation sectorielle nationale au sein des pays - où l'IA dans le secteur bancaire peut être rigoureusement réglementée parce que la banque est déjà réglementée, tandis que des risques équivalents dans d'autres secteurs ne sont pas traités en raison de l'absence d'un responsable réglementaire préexistant .
Melahat Bilge Demirkoz, membre du Panel de l'ONU sur l'IA, s'est appuyée sur le rapport préliminaire du panel pour identifier quatre défis structurels. Premièrement, un dilemme probatoire : les preuves scientifiques robustes ne peuvent pas suivre le rythme des progrès rapides de l'IA, et les modèles de gouvernance sont rarement testés de manière indépendante - lorsqu'ils le sont, c'est par les mêmes entreprises qui développent les systèmes . Deuxièmement, la nécessité de passer de l'évaluation des seuls modèles à l'évaluation de systèmes entiers, incluant les outils, les environnements et les utilisateurs . Troisièmement, l'absence d'une base de preuves indépendante unifiée en dehors des entreprises développant des modèles, ce qui compromet la confiance du public et la responsabilité objective . Quatrièmement, des résultats macroéconomiques et d'innovation incertains, avec une lacune critique dans les données cohérentes sur la manière dont l'IA affecte les marchés du travail et la productivité .
Leonardo Cervera Navas, Directeur général du Contrôleur européen de la protection des données, a offert la perspective de l'UE sur la gouvernance et ses finalités. Il a cité la base juridique du règlement européen sur l'IA dans le Traité sur le fonctionnement de l'Union européenne - une gouvernance pour la protection de la santé et de la sécurité, et pour la protection de la vie privée et d'autres droits fondamentaux . Il a utilisé l'analogie du feu comme première technologie transformatrice de l'humanité : nos ancêtres ont développé deux règles simples - toujours utiliser le feu avec précaution, et ne jamais laisser le feu sans surveillance - et exactement les mêmes règles devraient s'appliquer à l'IA . Le règlement européen sur l'IA incarne ce principe : plus le risque est élevé, plus les soins et la surveillance requis sont importants . Dans ses remarques de clôture, il a étendu l'analogie à l'aviation civile, soutenant que les mêmes règles de sécurité de base s'appliquent partout dans le monde quel que soit le lieu de départ d'un avion, et que s'accorder sur des règles de sécurité et d'éthique de base appliquées à l'échelle mondiale est ce qui est nécessaire pour faire de l'IA un succès pour les entreprises et les citoyens .
#
Activité interactive et transition
Entre les deux panels, le facilitateur a invité les participants à se tourner vers une personne qu'ils ne connaissaient pas et à identifier une priorité clé en matière d'interopérabilité pour une IA sûre, fiable et digne de confiance . Cet exercice visait à faire émerger les priorités de terrain de la pleine diversité des participants, les réponses devant être recueillies sur des post-it et intégrées dans le rapport de synthèse des co-présidents . Le second panel est ensuite passé du « quoi » au « comment » - explorant ce qui doit effectivement être partagé au-delà des frontières pour que l'IA sûre, fiable et digne de confiance puisse être gouvernée de manière compatible et inclusive.
#
Deuxième panel : Éléments constitutifs de l'interopérabilité pour une infrastructure de gouvernance mondiale
Le second panel, modéré par Rachel Adams, s'est concentré sur trois questions : quelles fondations communes émergent déjà ; quelles mesures pratiques les gouvernements, l'industrie et les organismes de normalisation peuvent prendre dès maintenant ; et comment les pays et les communautés disposant de moins de ressources peuvent être des acteurs actifs dans la conception de l'infrastructure mondiale de gouvernance .
La ministre Seema Malhotra, ministre au sein du Foreign Office du Royaume-Uni, a décrit l'Institut de sécurité de l'IA du Royaume-Uni comme construisant des fondations scientifiques pour une IA digne de confiance grâce à des méthodologies d'évaluation, des tests, des garanties et des évaluations des risques, contribuant à créer une base de preuves commune pour comprendre les capacités et les risques des systèmes d'IA avancés . Grâce au réseau croissant d'instituts de sécurité de l'IA, les pays collaborent de plus en plus sur les approches d'évaluation, la recherche technique et la compréhension partagée des risques liés à l'IA frontière . Le Royaume-Uni préside également le Réseau international pour la mesure, l'évaluation et la science de l'IA avancée, reconnaissant que l'IA digne de confiance doit reposer sur des capacités robustes de mesure, de test et d'évaluation . Elle a souligné que l'IA doit être adaptée au contexte local, décrivant le Programme d'IA pour le développement du Royaume-Uni comme construisant des outils d'IA dans plus de 40 langues africaines et soutenant 13 laboratoires d'IA pour développer des écosystèmes d'IA à direction locale .
Celeste Saulo, Secrétaire générale de l'Organisation météorologique mondiale, s'est appuyée sur les 150 ans d'expérience de l'OMM en matière d'échange de données entre 193 pays pour offrir des leçons pour la gouvernance de l'IA . Elle a soutenu que la confiance ne vient pas du fait d'en parler - elle doit être construite, et le mécanisme clé est la vérification : l'OMM a une longue histoire de confrontation des prévisions à la réalité pour établir des normes de qualité pour les systèmes pilotés par l'IA et les systèmes dynamiques . Lorsque les Services météorologiques et hydrologiques nationaux membres de l'OMM ont été interrogés sur les opportunités et les défis de l'IA, l'accès équitable est apparu comme leur principale préoccupation . Elle a soutenu que des institutions comme l'OMM, dotées d'une expertise approfondie dans le partage de normes de données de manière fiable, peuvent aider à renforcer les capacités dont chaque pays a besoin pour bénéficier de l'IA .
Qinghua Lu, membre du Panel de l'ONU sur l'IA et chercheuse au CSIRO Australie, a proposé deux approches complémentaires de la collaboration internationale . Une approche horizontale axée sur la cartographie et la connexion des outils et normes existants, avec des groupes de travail dédiés construisant des connecteurs entre différents cadres de gestion des risques, des taxonomies d'incidents et des métriques d'évaluation . Une approche verticale axée sur la collaboration autour de défis techniques spécifiques, comme l'exercice de test conjoint du réseau international d'instituts de sécurité de l'IA sur les tests de capacités multilingues, où une méthodologie commune a été utilisée, chaque pays se concentrant sur différentes langues et les résultats étant partagés entre les pays . Elle a également appelé les pays à s'accorder sur des principes communs de gestion des risques et à passer d'une évaluation statique à une gouvernance dynamique, notant que l'évaluation comparative seule est insuffisante pour les systèmes agentiques qui reçoivent des instructions humaines au moment de l'exécution .
Ravin Thambapillai, co-fondateur et PDG de Crudel AI, a offert la perspective d'un praticien sur la manière dont les normes techniques open source peuvent atteindre une adoption mondiale rapide. Il a décrit le protocole de contexte de modèle (MCP), qui est passé d'une annonce à une norme mondiale de facto en 18 mois, adopté par tous les grands laboratoires de recherche en IA, les entreprises et les sociétés d'IA . La rapidité d'adoption est venue de la conception de la spécification autour des points de douleur réels de la mise en œuvre, notamment les défis de gouvernance tels que la manière de savoir si un système d'IA est autorisé à effectuer une action et la manière d'intégrer l'approbation humaine dans la chaîne d'outils . Il a reconnu que le MCP n'avait pas été conçu avec les bons cadres d'autorisation dès le premier jour, nécessitant une adaptation ultérieure , mais a soutenu que les normes de gouvernance open source qui répondent à de véritables points de douleur de mise en œuvre, sont accessibles à tous les pays et accélèrent simultanément les bénéfices de l'IA et les cadres de gouvernance seront rapidement adoptées par l'industrie .
La Dr Joy Buolamwini, fondatrice de l'Algorithmic Justice League, a ouvert son intervention avec un poème - « Unstable Desire » - pour recentrer la discussion sur les personnes exploitées, condamnées ou autrement lésées par les systèmes d'IA . Elle a ensuite formulé deux points substantiels. Premièrement, que le signalement des préjudices doit inclure non seulement le modèle et la défaillance, mais aussi l'objectif, la personne et ses données démographiques, afin que lorsque le domaine passe de la documentation des préjudices à leur réparation, l'architecture de réparation ait été intégrée dans le système dès le départ . Deuxièmement, que les mesures de succès trompeuses doivent être évitées : les critères d'évaluation de référence d'institutions comme le National Institute for Standards and Technology avaient historiquement représenté moins de 5 % de la majorité mondiale, ce qui signifie qu'ils se sont révélés être de la pyrite . Elle a appelé à tirer les leçons de ces échecs pour servir les personnes « codées X » et transformer l'atmosphère de l'innovation .
#
Interventions des États membres et des parties prenantes
Les deux séries d'interventions des États membres et des parties prenantes ont renforcé et approfondi les thèmes établis lors des panels. L'Union postale universelle a souligné que dans la chaîne d'approvisionnement postale, la décision automatisée d'une partie prenante affecte immédiatement les autres en aval de la chaîne, faisant du risque systémique une réalité opérationnelle quotidienne plutôt qu'une préoccupation abstraite . Elle a appelé à une interopérabilité des approches de gouvernance qui va au-delà du niveau des principes pour assurer une compréhension commune de la manière dont des concepts comme la transparence s'appliquent dans des secteurs spécifiques .
La Lettonie a offert deux leçons concrètes tirées de sa propre expérience. Premièrement, lors de la collecte de données pour un modèle d'IA multilingue ouvert de l'UE, elle a dû filtrer des millions d'articles provenant de réseaux de désinformation coordonnés infiltrant les modèles d'IA mondiaux, mais il n'existe pas de norme partagée pour l'origine des données d'entraînement et aucun canal pour avertir les autres . Deuxièmement, l'écart entre les langues dominantes et les langues sous-représentées dans les principaux modèles d'IA se creuse, et non se réduit, dépouillant le patrimoine culturel et coûtant plusieurs fois plus de tokens lors de l'utilisation de l'IA dans les petites langues . La Lettonie a proposé trois priorités : des méthodes d'évaluation partagées et des critères d'évaluation ouverts reflétant la diversité linguistique et culturelle ; une compatibilité minimale sur l'origine des données et le signalement des incidents ; et le renforcement des capacités afin que chaque pays puisse participer à l'évaluation en tant que partenaire égal .
Ernst & Young a soutenu que la bonne gouvernance ne consiste pas à assurer la conformité mais à s'assurer que les systèmes d'IA fonctionnent de la bonne manière, et que c'est un intérêt partagé des entreprises et de la société - personne ne veut que les systèmes d'IA échouent, car c'est mauvais pour la société et mauvais pour l'industrie . Le Brésil a souligné que l'interopérabilité ne doit pas être confondue avec l'uniformité réglementaire, que la souveraineté numérique n'est pas l'isolement numérique, et que l'ONU a un rôle central à jouer pour garantir que les pays en développement participent non pas simplement comme preneurs de règles mais comme co-participants à part entière dans l'élaboration des règles de gouvernance de l'IA .
La France a mis en avant le Processus d'IA d'Hiroshima, dans le cadre duquel 56 entreprises ont souscrit à des principes et pratiques communs pour la gouvernance des systèmes d'IA avancés , et a appelé à une évaluation indépendante des modèles d'IA avant leur déploiement . Sam Gregory de Witness a soutenu avec force que l'IA digne de confiance est impossible sans un environnement informationnel digne de confiance, et que l'érosion de la réalité partagée par les clones synthétiques, les scènes de conflit falsifiées, les images sexuelles non consenties et le « dividende du menteur » - où des événements réels sont rejetés comme générés par l'IA - constitue un risque systémique pour la sécurité, et non simplement une question d'éthique . Il a appelé à une infrastructure d'authenticité interopérable et à des normes de provenance des contenus construites avec la vie privée et les droits de l'homme en leur centre, ainsi qu'à un groupe de travail multi-parties prenantes sur l'authenticité des contenus et l'intégrité de l'information sur la voie de la prochaine réunion de l'ONU à New York .
Le Center for Responsible AI de l'IIT a appelé à des cadres structurés de signalement des incidents d'IA démocratisés au niveau des bases, établissant des responsabilités partagées tout au long de la chaîne de valeur de l'IA et permettant une gouvernance proactive et orientée vers l'apprentissage . Le représentant a également noté, dans un moment de franchise non scénarisée, que le fait même qu'il présentait à la place de son collègue démontrait la difficulté pour les personnes du Sud global d'accéder aux forums de gouvernance, son collègue n'ayant pas pu obtenir un visa à court préavis .
L'Afrique du Sud a appelé à des cadres mondiaux qui reflètent non seulement les priorités des économies avancées mais aussi les réalités et les besoins des pays en développement, notant que l'IA est intégrée dans des secteurs sensibles, notamment la défense et la sécurité nationale, à une échelle et une vitesse qui ont considérablement augmenté. Elle a plaidé pour des cadres de gouvernance inclusifs dans leur conception, équitables dans leur application et favorables au transfert de technologie et au renforcement des capacités .
La Société mexicaine pour l'intelligence artificielle a appelé à un nouvel instrument international qui donne la priorité à l'interopérabilité avec des normes minimales obligatoires juridiquement contraignantes véritablement applicables dans tous les pays de toutes les régions .
Le délégué du Japon a décrit le Processus d'IA d'Hiroshima comme ayant fait progresser la gouvernance internationale inclusive grâce au développement de principes directeurs et d'un code de conduite comme premières normes internationales pour l'IA générative, avec environ 70 pays et régions, dont le Sud global, ayant approuvé ces principes . Le Pakistan a offert un contrepoint direct, soutenant que les normes de sécurité sont établies par un petit nombre d'États et d'entreprises à travers des processus dans lesquels la majeure partie du monde n'a pas voix au chapitre, et appelant à ce que les normes de sécurité soient élaborées à travers des processus multilatéraux inclusifs au sein des Nations Unies où toutes les nations participent en tant qu'égaux . Le Pakistan a également soutenu que la capacité à évaluer et à gouverner l'IA doit être traitée comme faisant partie intégrante de la sécurité elle-même, soutenue par des outils partagés, une expertise mutualisée et une coopération entre les régions .
La Commission électrotechnique internationale a décrit les normes internationales comme formant le lien entre les couches normatives - traduisant les principes du droit international et du droit souple en outils pratiques, donnant aux gouvernements une base pour la réglementation nationale et à l'industrie un langage commun . Elle a également mis en évidence une contribution distincte que les organismes de normalisation peuvent apporter à l'efficacité énergétique de l'IA et à la résilience des infrastructures, notant que l'alimentation électrique fiable et l'infrastructure résiliente des centres de données sont des prérequis pour un déploiement d'IA digne de confiance. L'auteur principal du Rapport international sur la sécurité de l'IA a soutenu que les risques frontières - notamment l'utilisation abusive pour des armes biologiques, les systèmes agentiques défaillants et l'impact sociétal systémique - ne peuvent être rejetés comme spéculatifs et ne peuvent être indéfiniment différés, et que pour tous ces risques, les méthodes d'anticipation, de mesure et d'atténuation des préjudices restent embryonnaires .
Concordia AI a averti que l'essor de l'IA agentique est le récit déterminant du moment présent, et que parce que les agents d'IA peuvent agir directement sur le monde réel, leurs défaillances peuvent causer des préjudices graves avant qu'un humain puisse intervenir . Elle a établi une analogie avec les niveaux de sécurité de la conduite autonome, soutenant qu'à mesure que les agents d'IA deviennent de plus en plus autonomes, les normes de sécurité doivent se renforcer en conséquence . Elle a également noté que lorsque des systèmes autonomes échouent, les conséquences ne s'arrêtent pas aux frontières nationales - une défaillance dans un pays peut perturber des infrastructures partagées, des chaînes d'approvisionnement ou la sécurité publique ailleurs . Concordia AI a en outre observé que, par le biais de son initiative IA Plus, la Chine vise à déployer l'IA agentique dans des secteurs clés de l'économie au cours des cinq prochaines années, tout en faisant progresser simultanément des lignes directrices nationales de sécurité et des normes contraignantes à un rythme d'innovation soutenu.
L'Australie a appelé à s'appuyer sur les travaux internationaux existants plutôt qu'à créer des cadres à partir de zéro, notant qu'une approche universelle de la gouvernance de l'IA ne sera pas efficace, et que l'IA responsable n'est pas une tâche ponctuelle mais un processus continu de gouvernance, de surveillance, d'adaptation et d'amélioration . La Lituanie a soutenu que la confiance repose sur trois piliers : s'assurer que l'IA reste centrée sur l'humain et ancrée dans les valeurs démocratiques ; s'assurer que l'IA est sécurisée et résiliente par conception ; et assurer l'interopérabilité et la compatibilité des approches . La Lituanie a également mis en avant la Convention-cadre du Conseil de l'Europe sur l'intelligence artificielle, les droits de l'homme, la démocratie et l'État de droit - la Convention de Vilnius - comme une étape majeure dans l'établissement de normes contraignantes pour la gouvernance de l'IA.
Le Global Cities Hub a appelé à ce que les gouvernements locaux et régionaux soient reconnus comme un acteur de gouvernance distinct aux côtés des gouvernements nationaux, de l'industrie, du monde universitaire et de la société civile, soutenant que les villes et les régions représentent une couche de gouvernance encore manquante qui détient des responsabilités directes dans les secteurs où les impacts de l'IA sont les plus visibles - et sont vécus en premier et de manière la plus visible par les deux tiers de la population mondiale . Le représentant de Dubai Cable a soutenu qu'une fois qu'un agent d'IA est autorisé à agir, la frontière entre un document de politique et un incident de production devient très mince, et a posé trois questions qui s'appliquent dans tout contexte de gouvernance : que peut faire cet agent sans intervention humaine ; que se passe-t-il au moment où il fait quelque chose que nous n'avions pas anticipé ; et qui, par son nom et son rôle, est responsable du résultat . La responsabilité, a soutenu le représentant, doit être intégrée avant le déploiement, avec des autorisations, une surveillance et des pistes d'audit conçues dès le départ.
Le Bangladesh a appelé à un cadre de gouvernance complet combinant des obligations juridiques contraignantes et des normes éthiques ; une gouvernance mondiale de l'IA inclusive et représentative ; le maintien des humains dans la boucle pour les décisions à fort impact ; des approches réglementaires fondées sur les risques et favorables à l'innovation, notamment des bacs à sable réglementaires ; et la poursuite de ce dialogue pour rassembler les parties autour de la table. L'Éthiopie a noté que l'Union africaine a désigné le Premier ministre Dr Abiy Ahmed comme champion de l'IA et de la santé numérique, reflétant l'engagement du continent à façonner la gouvernance de l'IA de l'intérieur. Le Bureau du Coordonnateur résident de l'ONU a attiré l'attention sur les demandes croissantes de l'IA en énergie et en eau, soutenant que ces implications en termes de ressources devraient éclairer les discussions lors de la COP31 et du Sommet mondial de l'eau de l'ONU en 2026.
#
Synthèses de clôture
La synthèse de clôture de Rebecca Finlay a identifié cinq points clés issus de la discussion . Premièrement, les cadres de sécurité sont trop souvent développés sans les preuves nécessaires pour les façonner, rendant les travaux du panel scientifique et d'autres efforts visant à renforcer le consensus scientifique d'une importance critique . Deuxièmement, une base minimale commune s'appuyant sur les cadres mondiaux existants est nécessaire - pas suffisante en elle-même, mais une fondation nécessaire, et dans une large mesure elle existe déjà à travers les engagements mondiaux, le droit international, le dialogue, le processus d'Hiroshima et les engagements des sommets sur l'IA . Troisièmement, l'interopérabilité est une condition nécessaire mais non suffisante pour la sécurité ; elle doit reposer sur des principes essentiels tels que les droits de l'homme, être ancrée dans de solides fondations scientifiques et refléter des cadres développés non seulement par quelques nations puissantes mais par la majorité du monde . Quatrièmement, l'inclusion et l'ouverture doivent être au cœur de l'approche, ce qui signifie des critères d'évaluation ouverts, la diversité linguistique et une infrastructure pour la science ouverte et les normes techniques qui reflètent les besoins mondiaux . Cinquièmement, la confiance doit être construite par la vérifiabilité, favorisée par des tests indépendants par des tiers, la divulgation tout au long de la chaîne de valeur de l'IA et le signalement des incidents .
Finlay a également souligné deux aspects critiques pour le succès du dialogue : la participation multi-parties prenantes n'est pas un luxe mais une nécessité pour la légitimité des efforts de gouvernance, nécessitant une participation significative, notamment en s'assurant que les processus de visa permettent aux personnes des communautés mondiales d'y assister ; et une plus grande continuité et action entre les dialogues est nécessaire afin que les progrès ne s'interrompent pas entre les sommets et ne repartent pas de zéro à chaque fois .
La synthèse de clôture de Paula Bogantes Zamora a condensé les conclusions pratiques de la session . Une gouvernance efficace de l'IA dépendra non pas de l'uniformité mais de la capacité à connecter différentes approches par des normes partagées, des preuves, des garanties et une coopération, tout en préservant le contexte national et en assurant une participation significative de tous les pays . Elle a souligné que la gouvernance de l'IA doit évoluer de règles statiques vers des systèmes adaptatifs capables de répondre à une IA de plus en plus autonome et multi-étapes ; que la fragmentation réglementaire crée des charges de conformité, des lacunes en matière de responsabilité et un arbitrage réglementaire, affectant de manière disproportionnée les pays à capacité institutionnelle limitée ; que des approches de gouvernance compatibles devraient connecter différents cadres par des normes techniques partagées sans imposer un seul modèle réglementaire ni porter atteinte à l'autonomie nationale ; que des bacs à sable réglementaires transfrontaliers peuvent tester des applications d'IA sous supervision conjointe avant un déploiement plus large ; que des définitions communes et une cartographie granulaire entre les exigences légales, les contrôles techniques et les preuves de conformité sont essentielles ; que des mécanismes partagés de signalement des incidents peuvent garantir que les leçons tirées des défaillances dans une juridiction préviennent la répétition des préjudices ailleurs ; qu'une IA digne de confiance nécessite une supervision humaine, la transparence, la responsabilité et une évaluation indépendante tout au long du cycle de vie du système ; que les cadres d'évaluation doivent refléter la diversité linguistique, culturelle et démographique ; que les normes ouvertes, la méthodologie partagée et les cadres de référence exécutables peuvent accélérer l'adoption et renforcer la coopération internationale lorsqu'ils répondent à de véritables défis de mise en œuvre ; et que l'intégrité de l'information, la provenance des contenus et les garanties contre les hypertrucages nécessitent des approches compatibles ancrées dans la vie privée et les droits de l'homme .
#
Évaluation globale
La session a démontré un niveau remarquablement élevé de consensus parmi une diversité de participants sur les grands paramètres d'une architecture de gouvernance de l'IA compatible - inclusive, fondée sur des preuves, proportionnée aux risques et construite sur des cadres existants. Sous cette surface de consensus, cependant, des tensions significatives subsistaient : entre les processus volontaires menés par le G7 et les appels à des normes multilatérales contraignantes sous l'égide de l'ONU ; entre l'intégration de la gouvernance dès le début du développement de l'IA et son application dynamique au moment de l'exécution ; entre les prétentions des processus existants à être inclusifs et les preuves que 118 pays restent largement exclus des principales discussions de gouvernance ; et entre l'urgence de traiter l'intégrité de l'information comme une question fondamentale de sécurité et son traitement comme une préoccupation parmi d'autres. L'insight structurel le plus conséquent à émerger - que la concentration computationnelle crée une concentration épistémique, déterminant qui définit la sécurité pour le monde - a traversé comme un courant souterrain les interventions du Sud global, de la société civile et du panel scientifique, et a finalement façonné l'accent mis par les co-présidents sur une gouvernance inclusive, ouverte et vérifiée de manière indépendante comme conditions non négociables d'une IA digne de confiance .
L'interopérabilité comme alternative essentielle à l'harmonisation - La gouvernance de l'IA n'a pas besoin d'être uniforme, mais les différents cadres nationaux doivent pouvoir communiquer et fonctionner ensemble au-delà des frontières
Arg. 1Le facilitateur soutient que, tout comme les différents systèmes électriques dans le monde sont rendus compatibles grâce à des adaptateurs et des normes communes plutôt que par l'uniformité, la gouvernance de l'IA fait face au même défi. Les pays continueront à développer des lois et des traditions réglementaires différentes, rendant une harmonisation complète ni réaliste ni nécessaire. Cependant, l'interopérabilité — permettre à différentes approches de communiquer et de fonctionner ensemble — est essentielle.
Le facilitateur a utilisé l'analogie des différents systèmes électriques, formes de prises et tensions selon les pays, en soulignant que les ordinateurs portables et les téléphones fonctionnent toujours en toute sécurité lors des déplacements, non pas parce que chaque pays utilise le même système, mais parce que des adaptateurs, des normes communes et des interfaces de confiance ont été développés . Le facilitateur a explicitement déclaré que l'harmonisation n'est ni réaliste ni entièrement nécessaire, mais que l'interopérabilité est essentielle, et que sans elle, les cadres de gouvernance se fragmentent, la mise en œuvre devient plus complexe et coûteuse, la confiance est plus difficile à établir et les bénéfices de l'IA deviennent plus difficiles à concrétiser .
on: L'interopérabilité, et non l'harmonisation, est l'objectif approprié pour la gouvernance de l'IA
L'interopérabilité comme défi pratique de mise en œuvre — le véritable défi n'est pas de savoir si les cadres peuvent coexister sur le papier, mais si la sécurité, la responsabilité et la confiance peuvent être démontrées au-delà des frontières
Arg. 1Paula Bogantes Zamora soutient que le monde n'a pas besoin de davantage de principes sur l'IA, mais d'une manière commune de prouver qu'ils sont mis en œuvre. Le véritable défi de l'interopérabilité consiste à démontrer concrètement la sécurité, la responsabilité et la confiance au-delà des frontières, et non simplement à disposer de cadres qui coexistent théoriquement.
Elle a déclaré sans détour que « le monde n'a pas besoin de davantage de principes sur l'IA. Il a besoin d'une manière commune de prouver qu'ils sont mis en œuvre » et a formulé le défi comme étant « non pas de savoir si les cadres peuvent coexister sur le papier, mais si la sécurité, la responsabilité et la confiance peuvent être démontrées au-delà des frontières » .
on: L'interopérabilité, et non l'harmonisation, est l'objectif approprié pour la gouvernance de l'IA
La concentration des infrastructures d'IA entraîne une concentration des preuves et une influence sur les risques mesurés et les critères d'évaluation acceptés
Arg. 2Bogantes Zamora soutient que la concentration extraordinaire du développement de l'IA dans un petit nombre de pays signifie que ceux disposant de la plus grande capacité de calcul exercent également une influence disproportionnée sur les normes mondiales de gouvernance de l'IA. Cela inclut la détermination des risques mesurés, des critères d'évaluation acceptés, des langues évaluées et des institutions reconnues comme compétentes pour certifier la sécurité.
Elle a cité qu'en 2025, les institutions des États-Unis ont produit 59 modèles d'IA notables et la Chine en a produit 35, tandis que le reste du monde n'en a produit que 13 . Les États-Unis détenaient environ 75 % de la puissance de calcul parmi les 500 plus grands clusters d'IA connus, la Chine en détenant 15 % supplémentaires . Elle a conclu que « la concentration des infrastructures devient une concentration des preuves » .
118 pays, principalement issus du Sud global, ne participent pas de manière significative aux principales discussions internationales sur la gouvernance de l'IA
Arg. 3Bogantes Zamora souligne le manque grave de participation de la majorité des pays du monde aux discussions internationales sur la gouvernance de l'IA. Cette exclusion est aggravée par le fait que moins de 1 % des clusters d'IA mondiaux sont situés en dehors des pays dominants, et qu'un tiers des pays en développement ne disposent pas de stratégies nationales en matière d'IA.
Elle a cité une évaluation scientifique préliminaire indiquant que 118 pays, principalement issus du Sud global, ne participent pas de manière significative aux principales discussions internationales sur la gouvernance de l'IA, tandis que moins de 1 % des clusters d'IA mondiaux et un tiers des pays en développement disposent de stratégies nationales en matière d'IA .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
on: La question de savoir si les normes de sécurité doivent être élaborées par des organismes existants tels que l'OCDE et le G7 ou par de nouveaux processus multilatéraux inclusifs menés par l'ONU
L'interopérabilité doit relier non seulement les systèmes, mais aussi les identités, les mandats et les chaînes de responsabilité, en particulier pour l'IA agentique
Arg. 4Bogantes Zamora soutient qu'à mesure que les systèmes d'IA deviennent plus agentiques — agissant au nom de personnes ou d'institutions sur plusieurs plateformes — l'interopérabilité doit aller au-delà de la compatibilité technique des systèmes pour inclure une identité d'agent vérifiable, une délégation traçable, des autorisations lisibles par machine et une révocation efficace. L'interopérabilité future doit relier non seulement les systèmes et les règles, mais aussi les identités, les mandats et les chaînes de responsabilité.
Elle a cité l'initiative Arawite de l'Estonie comme exemple de cette frontière émergente, notant qu'elle développe des cadres d'identité et de registre, des normes d'interopérabilité, des recommandations juridiques et un projet pilote dans le secteur public afin que les États puissent interagir avec les agents d'IA de manière fiable et responsable . Elle a précisé que l'interopérabilité de l'IA agentique doit inclure une identité d'agent vérifiable, une délégation traçable, des autorisations lisibles par machine, un échange de données sécurisé, des actions auditables et une révocation efficace .
on: L'IA agentique représente une nouvelle frontière de gouvernance urgente, nécessitant des cadres spécifiques en matière d'identité, de responsabilité et de responsabilité transfrontalière
Un point de départ pratique d'interopérabilité minimale viable devrait permettre de faire progresser, avant 2027, une terminologie commune, des classifications de risques comparables, une documentation cohérente, des rapports d'incidents interopérables et des méthodes d'évaluation multilingues
Arg. 5Bogantes Zamora propose un point de départ concret et réalisable qu'elle appelle « interopérabilité minimale viable », axé sur l'avancement d'éléments pratiques spécifiques avant le dialogue de 2027. Cette approche privilégie une terminologie commune, des classifications de risques comparables, une documentation cohérente, des mécanismes interopérables de signalement des incidents et des méthodes d'évaluation multilingues, tout en ouvrant des voies vers la reconnaissance mutuelle des tests, des audits et des certifications.
Elle a explicitement proposé qu'avant le dialogue de 2027, des progrès soient accomplis en matière de terminologie commune, de classifications de risques comparables, de documentation cohérente, de signalement interopérable des incidents et de méthodes d'évaluation multilingues, tout en établissant des voies vers la reconnaissance mutuelle des tests, des audits et des certifications .
on: Des mécanismes communs de signalement des incidents sont essentiels pour garantir que les enseignements tirés des défaillances de l'IA dans une juridiction permettent d'éviter que des préjudices similaires se reproduisent ailleurs
on: La question de savoir si l'interopérabilité doit viser une compatibilité totale ou uniquement une compatibilité sélective et délibérée des composantes les plus critiques
L'entraînement et l'évaluation de l'IA ne couvrent qu'une fraction des 7 000 langues du monde ; les modèles fonctionnent souvent de manière moins sûre dans les langues disposant de peu de données numériques
Arg. 6Bogantes Zamora identifie la langue comme un test décisif pour l'interopérabilité, soulignant que la grande majorité des langues du monde sont exclues de l'entraînement et de l'évaluation des systèmes d'IA. Cela crée des risques pour la sécurité, car les modèles sont moins fiables dans les langues sous-représentées, et signifie que les langues d'Amérique latine et d'autres régions ne peuvent pas rester en dehors des cadres d'évaluation mondiaux.
Elle a noté que le monde compte plus de 7 000 langues, mais que l'entraînement et l'évaluation des systèmes d'IA n'en couvrent qu'une infime partie, et que les modèles se comportent souvent de manière moins sûre dans les langues disposant de peu de données numériques . Elle a mentionné spécifiquement que les variantes de l'espagnol, le portugais, les langues autochtones et les langues créoles de sa région ne peuvent pas rester en dehors des cadres d'évaluation mondiaux .
on: La diversité linguistique et culturelle doit être prise en compte dans les cadres et les référentiels d'évaluation de l'IA
Les cadres d'évaluation doivent refléter la diversité linguistique, culturelle et démographique, y compris les communautés sous-représentées dans les critères d'évaluation mondiaux actuels
Arg. 7Bogantes Zamora soutient que, pour que l'interopérabilité de la gouvernance de l'IA soit véritablement significative, les cadres d'évaluation doivent être conçus pour refléter la pleine diversité des langues, des cultures et des données démographiques mondiales. Cela est particulièrement important pour les applications d'IA à haut risque dans les domaines de la santé, de la justice et de l'administration publique, qui ne peuvent être transférées ou déployées à grande échelle de manière responsable si les pays utilisent des définitions et des exigences de documentation incompatibles.
Elle a souligné qu'un système de santé, un outil judiciaire ou un algorithme du secteur public ne peut être transféré, évalué ou déployé à grande échelle de manière responsable si les pays utilisent des définitions des risques, des exigences de documentation ou des résultats d'audit incompatibles . Elle a proposé qu'avant 2027, des méthodes d'évaluation multilingues soient développées dans le cadre de l'interopérabilité minimale viable .
on: La diversité linguistique et culturelle doit être prise en compte dans les cadres et les référentiels d'évaluation de l'IA
Une IA digne de confiance requiert une supervision humaine, la transparence, la responsabilité et une évaluation indépendante tout au long du cycle de vie du système
Arg. 8Bogantes Zamora soutient que la confiance dans l'IA ne peut pas être proclamée par de simples principes, mais doit être construite à travers des preuves, des garanties, une coopération institutionnelle et des cadres de gouvernance capables de fonctionner au-delà des frontières. Elle souligne que l'adoption progresse à la vitesse de la confiance, et que cette confiance doit être démontrée par une vérifiabilité concrète.
Elle a rappelé le propos de sa co-présidente Rebecca Finlay selon lequel « l'adoption progresse à la vitesse de la confiance » , et a soutenu que la confiance ne peut pas être proclamée par de simples principes, mais doit être construite à travers des preuves, des garanties, une coopération institutionnelle et des cadres de gouvernance capables de fonctionner au-delà des frontières .
on: La supervision humaine et la responsabilité doivent être intégrées dès la conception des systèmes d'IA, et non ajoutées après la survenue d'incidents
on: La question de savoir si la gouvernance de l'IA doit être intégrée dès le départ dans les cas d'usage de l'IA ou maintenue séparée et appliquée de manière dynamique au moment de l'exécution
La fragmentation comme antonyme de l'interopérabilité - la fragmentation mondiale crée des opportunités d'arbitrage réglementaire, des lacunes en matière de responsabilité, des charges de conformité accrues et aggrave les inégalités de capacité de gouvernance
Arg. 1Singh-Gill présente la fragmentation comme l'opposé de l'interopérabilité et identifie quatre défis structurels qu'elle engendre. Ceux-ci comprennent l'arbitrage réglementaire, où les développeurs s'installent dans des juridictions à la supervision plus faible, des lacunes en matière de responsabilité dues aux chaînes de valeur mondiales, des charges de conformité accrues notamment pour les PME et les développeurs des pays à faible revenu, ainsi qu'une inégalité croissante des capacités de gouvernance contraignant les États moins dotés à s'aligner sur les cadres dominants ou à risquer l'exclusion.
Il a décrit quatre défis structurels spécifiques liés à la fragmentation : l'arbitrage réglementaire, les développeurs se déplaçant vers des juridictions à la supervision plus faible ; les lacunes en matière de responsabilité, les systèmes d'IA opérant à travers des chaînes de valeur mondiales rendant difficile l'attribution des responsabilités ; les charges de conformité accrues, notamment pour les PME, les chercheurs et les développeurs des pays à faible revenu ; et la fragmentation aggravant les inégalités de capacité de gouvernance et les phénomènes de dépendance .
on: L'interopérabilité, et non l'harmonisation, est l'objectif approprié pour la gouvernance de l'IA
La gouvernance doit évoluer d'une supervision statique des modèles vers une gouvernance dynamique des systèmes, à mesure que les systèmes d'IA agentiques deviennent plus autonomes, capables d'utiliser des outils et d'exécuter des processus en plusieurs étapes
Arg. 2Singh-Gill souligne que le rapport du panel scientifique a mis en avant un passage d'une gouvernance statique à une gouvernance dynamique des systèmes, ce que corroborent également les travaux de l'AI Governance for Humanity Lab. À mesure que les systèmes d'IA agentiques gagnent en autonomie et en complexité, les pratiques de gouvernance existantes risquent d'être dépassées, nécessitant des mécanismes plus adaptatifs et anticipatoires.
Il a fait référence au rapport du panel scientifique présenté la veille, qui soulignait le passage d'une gouvernance statique à une gouvernance dynamique des systèmes , et a noté que les travaux menés par l'AI Governance for Humanity Lab à Valence avaient également mis en évidence cette évolution . Il a précisé que la gouvernance efficace nécessitera des mécanismes tels que des taxonomies de risques évolutives, des environnements de test des contrôles et un déploiement par étapes .
on: L'IA agentique représente une nouvelle frontière de gouvernance urgente nécessitant des cadres spécifiques en matière d'identité, de responsabilité et de responsabilité transfrontalière
on: La question de savoir si la gouvernance de l'IA doit être intégrée dès le départ dans les cas d'usage de l'IA ou maintenue séparée et appliquée de manière dynamique au moment de l'exécution
Les bacs à sable réglementaires reliant différents environnements permettent de tester des applications d'IA sous supervision conjointe avant un déploiement à plus grande échelle, favorisant ainsi des projets pilotes transfrontaliers et le partage de données probantes
Arg. 3Singh-Gill propose des bacs à sable réglementaires transfrontaliers comme voie concrète pour renforcer l'interopérabilité. En connectant des bacs à sable réglementaires issus de différents environnements, les pays peuvent tester des applications d'IA sous supervision réglementaire avant un déploiement à grande échelle, permettant ainsi des projets pilotes transfrontaliers, des évaluations de modèles et le partage de données probantes sans imposer un modèle de gouvernance unique.
Il a décrit cette approche comme l'une des plusieurs « voies » pour renforcer l'interopérabilité, délibérément ainsi nommées car elles ne constituent pas des recommandations prescriptives mais des repères pratiques pour la coopération . Il a spécifiquement proposé d'établir des connexions entre les bacs à sable réglementaires afin de permettre des projets pilotes transfrontaliers, des évaluations de modèles et le partage de données probantes .
La bonne gouvernance comme fondement de l'interopérabilité - l'interopérabilité peut s'inscrire dans la phase de mise en œuvre et doit être ancrée dans la garantie que l'IA répond fonctionnellement aux besoins, et non dans la simple conformité
Arg. 1Le représentant d'EY soutient que l'interopérabilité n'exige pas que tous les pays réglementent l'IA de manière identique, mais qu'elle peut être atteinte au stade de la mise en œuvre grâce à des normes techniques communes et à une attention portée aux résultats fonctionnels. La bonne gouvernance ne consiste pas à assurer la conformité, mais à garantir que les systèmes d'IA fonctionnent comme prévu, ce qui constitue un intérêt partagé par les entreprises et la société.
Le représentant a souligné qu'en tant que cabinet mondial opérant dans pratiquement tous les pays et accompagnant à la fois l'adoption de l'IA et les missions d'audit, EY constate une forte demande d'interopérabilité entre les différentes approches de gouvernance . Le représentant a fait valoir que la bonne gouvernance ne consiste pas à assurer la conformité, mais à veiller à ce que les systèmes d'IA soient réellement utilisés de manière appropriée, et que cela peut constituer un fondement essentiel de l'interopérabilité .
on: L'interopérabilité, et non l'harmonisation, est l'objectif approprié pour la gouvernance de l'IA
La compatibilité sélective et délibérée des composantes les plus critiques est un objectif plus réaliste que la compatibilité totale
Arg. 1Al Hameli soutient que la compatibilité totale en matière d'interopérabilité n'a pas besoin d'être l'objectif visé, et qu'une approche plus réaliste et efficace consiste à se concentrer sur la compatibilité sélective et délibérée des composantes qui importent le plus pour la majorité des nations. Elle fonde cette position sur trois principes appliqués par les EAU : la confiance entre nations partenaires comme condition préalable, la crédibilité assurée par une responsabilisation vérifiable, et la souveraineté respectant les différents points de départ.
Elle a déclaré que « la compatibilité totale dans notre interopérabilité... n'a pas besoin d'être l'objectif » et a proposé de travailler sur « la compatibilité sélective et délibérée des composantes qui importent le plus pour la majorité des nations » comme point de départ pertinent . Elle a exposé trois principes des EAU : la confiance entre nations partenaires comme condition préalable à tout cadre commun , la crédibilité garantie par une responsabilisation vérifiable , et la souveraineté reconnaissant que les États ont des points de départ et des trajectoires différents .
on: L'interopérabilité, et non l'harmonisation, est l'objectif approprié pour la gouvernance de l'IA
on: La question de savoir si l'interopérabilité doit viser une compatibilité totale ou uniquement une compatibilité sélective et délibérée des composantes les plus critiques
Des mécanismes partagés de signalement des incidents peuvent garantir que les enseignements tirés des défaillances dans une juridiction empêchent la répétition de préjudices ailleurs ; il n'existe actuellement aucune obligation légale de signalement ni de reconnaissance mutuelle entre les dispositifs de surveillance des incidents
Arg. 2Al Hameli identifie l'absence d'infrastructure partagée de signalement des incidents comme une lacune critique dans la gouvernance actuelle de l'IA. Les différents dispositifs de surveillance des incidents suivent les défaillances de manière indépendante et volontaire, sans obligation légale de signalement ni reconnaissance mutuelle, ce qui signifie que les défaillances de sécurité survenant dans un pays n'ont aucune voie garantie pour parvenir aux régulateurs d'autres pays avant que la même défaillance ne se reproduise.
Elle a fait observer que les cadres de gouvernance se multiplient plus vite que la base de données probantes qui les sous-tend, et qu'il n'existe pas d'infrastructure partagée de signalement des incidents, les différents dispositifs de surveillance suivant les défaillances de manière indépendante et volontaire . Elle a souligné que si une défaillance de sécurité survient dans un pays, rien ne garantit que cet enseignement parviendra aux régulateurs d'autres pays avant que la même défaillance ne se reproduise ailleurs .
on: Des mécanismes partagés de signalement des incidents sont essentiels pour garantir que les enseignements tirés des défaillances de l'IA dans une juridiction empêchent la répétition de préjudices ailleurs
Les normes ISO telles que l'ISO 22982 et les bases de données d'échange de normes IA existantes peuvent servir de points de départ, mais la mise en correspondance doit aller plusieurs niveaux en profondeur pour aligner les contrôles individuels, et pas seulement les intentions de haut niveau.
Arg. 1Syed Ahmed soutient que si les normes existantes telles que l'ISO 22982 ou l'AI Act de l'UE peuvent servir de points de départ pour l'interopérabilité, le véritable défi réside dans la construction d'adaptateurs couvrant l'ensemble du spectre des réglementations. Les intentions de haut niveau peuvent être similaires d'un cadre à l'autre, mais les contrôles spécifiques requis diffèrent considérablement, nécessitant une mise en correspondance deux à trois niveaux en dessous de l'alignement de surface.
Il a utilisé l'exemple de la « transparence » pour illustrer ce défi : dans l'ISO, la transparence signifie qu'un modèle doit être explicable, tandis que dans l'AI Act de l'UE, elle implique de fournir des preuves suffisantes et des journaux système - une même intention, mais sans correspondance directe . Il a décrit la tentative d'Infosys d'utiliser l'IA pour construire un adaptateur de mise en correspondance des normes, qui a échoué parce que la cartographie devait descendre deux à trois niveaux pour aligner les contrôles individuels .
La séparation de la gouvernance de l'IA des cas d'usage de l'IA est nécessaire, car la gouvernance doit être dynamique et ne peut pas être statique.
Arg. 2Syed Ahmed s'oppose à l'intégration de la gouvernance de l'IA dans les cas d'usage de l'IA dès le départ, car la gouvernance doit être dynamique et ne peut supposer que les mêmes règles resteront valables dans le temps. Il propose plutôt une séparation de la gouvernance de l'IA des cas d'usage de l'IA, avec un référentiel central de politiques pouvant être appliquées et mises en œuvre au moment de l'exécution.
Il a soutenu que la gouvernance est devenue plus dynamique et ne peut pas être statique, et que les règles établies au début d'un cas d'usage ne peuvent être supposées valables même un mois plus tard, compte tenu de la rapidité des évolutions . Il a proposé de construire un référentiel central de politiques pouvant être appliquées et mises en œuvre au moment de l'exécution, séparant ainsi efficacement la gouvernance de l'IA des cas d'usage de l'IA .
on: La question de savoir si la gouvernance de l'IA doit être intégrée aux cas d'usage de l'IA dès le départ ou maintenue séparée et appliquée de manière dynamique au moment de l'exécution
Des définitions communes et une cartographie granulaire entre les exigences légales, les contrôles techniques et les preuves de conformité sont essentielles ; la mise en correspondance doit aller deux à trois niveaux en profondeur au-delà des intentions de haut niveau.
Arg. 3Ahmed soutient qu'une taxonomie commune est insuffisante pour assurer l'interopérabilité et que ce dont on a besoin est un méta-modèle de mise en correspondance des contrôles au niveau le plus bas, intégré dans un graphe de connaissances pouvant servir de fondation aux modèles d'interopérabilité. La charge de conformité pesant sur les entreprises opérant à l'échelle mondiale est immense, car les réglementations interagissent non seulement entre elles, mais aussi avec d'autres réglementations technologiques à travers les différentes zones géographiques.
Il a décrit la charge de conformité pesant sur une entreprise comme Infosys qui opère à l'échelle mondiale, soulignant que les réglementations sur l'IA doivent être interopérables avec d'autres réglementations technologiques telles que le RGPD et DORA dans de multiples zones géographiques . Il a proposé que le comité investisse dans la construction d'un méta-modèle de mise en correspondance des contrôles au niveau le plus bas et d'un graphe de connaissances pouvant servir de fondation aux modèles d'interopérabilité .
on: La question de savoir si l'évaluation de l'IA doit porter uniquement sur les modèles ou sur l'ensemble des systèmes, y compris les outils, les environnements et les utilisateurs
Le panel scientifique et le dialogue sont deux composantes d'une mission commune : le panel fournit les preuves et le dialogue indique la direction
Arg. 1Finlay soutient que le panel scientifique indépendant et le dialogue mondial sont complémentaires et conçus pour fonctionner ensemble dès le départ. Le panel fournit la base de données probantes tandis que le dialogue indique la direction, et ensemble ils forment une mission commune pour une IA sûre, sécurisée et digne de confiance.
Elle a fait référence à l'accent mis par le Secrétaire général Guterres sur les référentiels communs pour les systèmes de pointe et les méthodes communes pour les vérifier , ainsi qu'à l'ancrage du discours de Maria Ressa dans des exemples concrets positionnant les données scientifiques comme l'antidote à la fois au catastrophisme et à l'utopisme technologique . Elle a clairement affirmé que « le panel fournit les preuves. Le dialogue indique la direction. Des données probantes et une délibération conçues pour fonctionner ensemble dès le départ » .
on: Une base de données scientifiques commune et indépendante est essentielle pour une gouvernance de l'IA digne de confiance
Une base de données probantes indépendante doit être renforcée, la divulgation par les entreprises privées doit être améliorée, et les divulgations individuelles doivent être transformées en une base de données probantes à l'échelle du secteur grâce à des référentiels, des normes et une évaluation par des tiers
Arg. 2Finlay propose trois actions concrètes : renforcer la base de données scientifiques indépendante, ouvrir la science par la transparence, et faire progresser les avancées dans l'intérêt public. Elle soutient que la transparence ne ralentit pas le progrès mais le rend vérifiable et crédible, et que la divulgation seule est insuffisante sans un système de référentiels, de normes et d'évaluation par des tiers pour lui donner du sens.
Elle a recommandé d'investir dans les travaux du panel scientifique et de les mettre en réseau, de favoriser la cohérence en établissant des liens avec d'autres rapports sur l'état de la sécurité, notamment ceux du Royaume-Uni, du consensus de Singapour et du prochain rapport sur la sécurité dans le Sud global . Elle a soutenu que la divulgation seule ne suffit pas et que sans référentiels, normes, évaluation par des tiers et vérification, les divulgations individuelles ne peuvent pas être transformées en une base de données probantes à l'échelle du secteur qui soit digne de confiance .
on: Une base de données scientifiques commune et indépendante est essentielle pour une gouvernance de l'IA digne de confiance
Les systèmes d'IA doivent être conçus de manière inclusive, gouvernés de façon responsable, et exploités équitablement, de manière transparente, fiable et sécurisée, en se demandant qui un système sert et qui est responsable en cas de défaillance
Arg. 3Finlay soutient que combler le fossé entre innovation et responsabilité exige de poser des questions fondamentalement différentes de celles qui animent actuellement le secteur. Plutôt que de demander à quelle vitesse un système peut être déployé ou quelle est sa puissance, l'accent devrait être mis sur qui il sert, qui est responsable en cas de défaillance, et dans quelle mesure sa sécurité est vérifiable.
Elle a proposé de reformuler les questions qui orientent le secteur : au lieu de « à quelle vitesse pouvons-nous déployer ceci », se demander « qui cela sert-il, qui est responsable en cas de défaillance, et comment le savons-nous ? » ; et au lieu de « quelle est la puissance de ce système », se demander « dans quelle mesure la sécurité de ce système est-elle vérifiable et sur la base de quelles données probantes ? » . Elle a déclaré que « les systèmes d'IA doivent être conçus de manière inclusive, gouvernés de façon responsable, et exploités équitablement, de manière transparente, fiable et sécurisée » .
Un socle minimum commun, s'appuyant sur les cadres mondiaux existants, le droit international et les engagements du dialogue en vigueur, doit être consolidé, partagé et rendu applicable et adaptable aux contextes régionaux
Arg. 4Finlay soutient qu'un socle minimum commun existe déjà dans une large mesure à travers les engagements mondiaux, le droit international, le dialogue, le processus d'Hiroshima, le G7 et les engagements pris lors des sommets sur l'IA. Ce qui est nécessaire désormais, c'est de consolider, partager et développer davantage ces éléments afin qu'ils soient applicables et adaptables aux contextes régionaux.
Elle a déclaré que « nous avons des engagements mondiaux. Nous avons le droit international. Nous avons ce dialogue, le processus d'Hiroshima, le G7, et l'ensemble des engagements pris lors des sommets sur l'IA à ce jour » . Elle a soutenu que ce qui est nécessaire, c'est de les consolider, les partager et les développer davantage afin qu'ils soient applicables et adaptables aux contextes régionaux .
on: Les cadres internationaux existants doivent servir de fondations à l'interopérabilité de la gouvernance de l'IA plutôt que d'être remplacés par de nouveaux cadres
La participation multipartite n'est pas un atout facultatif mais une nécessité pour la légitimité des efforts de gouvernance ; une participation significative doit notamment garantir que les procédures de visa permettent aux personnes issues des communautés mondiales d'y prendre part
Arg. 5Finlay soutient que la participation multipartite est essentielle à la légitimité et au succès des efforts de gouvernance de l'IA, et non pas simplement un atout souhaitable. Elle souligne que cette participation significative doit être maintenue et davantage soutenue, notamment en levant les obstacles pratiques tels que les procédures de visa qui empêchent des personnes issues de communautés mondiales d'y prendre part.
Elle a déclaré que « la participation multipartite n'est pas un luxe. Elle est une nécessité pour la légitimité de nos efforts et la réussite de nos objectifs » . Elle a notamment souligné l'importance de garantir des procédures de visa permettant aux individus de participer depuis leurs communautés à travers le monde , faisant référence au point soulevé précédemment par le représentant du Center for Responsible AI au sujet d'un collègue n'ayant pu assister à la réunion en raison de difficultés liées au visa.
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA
Le Global AI Progress Hub offre une plateforme publique où les organisations peuvent partager leurs avancées dans un cadre clair servant l'intérêt public, contribuant ainsi à combler le fossé entre innovation et responsabilité
Arg. 6Finlay présente le Global AI Progress Hub comme une initiative concrète du Partnership on AI visant à faire progresser l'intérêt public. Cette plateforme publique permet aux organisations de l'écosystème de l'IA responsable de partager leurs avancées dans un cadre clair, contribuant ainsi à combler le fossé entre innovation et responsabilité.
Elle a annoncé que le Partnership on AI avait lancé le Global AI Progress Hub cette semaine-là, le décrivant comme « une plateforme publique où les organisations de l'écosystème de l'IA responsable peuvent partager leurs progrès dans un cadre très clair qui sert l'intérêt public » . Elle a soutenu qu'aucun pays, gouvernement, organisation à but non lucratif ou institution de recherche ne peut déterminer seul à quoi ressemble une IA sûre, sécurisée et digne de confiance .
Les principes de l'OCDE sur l'IA et le processus d'IA d'Hiroshima en tant qu'instruments fondateurs d'interopérabilité, fournissant un cadre multipartite volontaire pour l'évaluation, l'atténuation et la divulgation des risques
Arg. 1Iida soutient que les principes de l'OCDE sur l'IA constituent un instrument fondateur d'interopérabilité, car ce sont des principes de haut niveau fondés sur des valeurs qui ont déjà servi de base aux lignes directrices nationales et à la législation nationale sur l'IA au Japon. Le processus d'IA d'Hiroshima s'appuie sur ces principes pour fournir un cadre volontaire permettant aux organisations d'IA d'évaluer et d'atténuer les risques et de divulguer les informations pertinentes.
Il a noté que le Japon a formulé ses lignes directrices nationales et sa législation nationale sur l'IA sur la base des principes de l'OCDE sur l'IA , et que le processus d'IA d'Hiroshima fournit un code de conduite pour les organisations d'IA, y compris les développeurs, offrant un cadre volontaire pour l'évaluation, l'atténuation et la divulgation des risques . Il a décrit ces cadres comme « une approche multipartite très ambitieuse pour une gouvernance collaborative » et une « approche ascendante de la gouvernance » .
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA
on: La question de savoir si les normes de sécurité doivent être élaborées par des organismes existants tels que l'OCDE et le G7 ou par de nouveaux processus multilatéraux inclusifs menés par l'ONU
La mise en correspondance croisée entre les cadres nationaux et régionaux, tels que le cadre HITE et le cadre ASEAN, révèle davantage de points communs que d'écarts, les différences s'expliquant souvent par la diversité culturelle
Arg. 2Iida rend compte de travaux pratiques de mise en correspondance croisée entre le cadre HITE du Japon et le cadre ASEAN pour les modèles d'IA avancés, qui ont révélé davantage de points communs que d'écarts. Lorsque des écarts ont été constatés, beaucoup pouvaient s'expliquer par des différences d'ordre social ou culturel entre les différentes juridictions, ce qui laisse entendre qu'un travail similaire de mise en correspondance croisée pourrait être appliqué à d'autres combinaisons de cadres nationaux ou régionaux.
Il a décrit les travaux en cours avec Singapour et les pays de l'ASEAN sur la mise en correspondance croisée entre le cadre HITE et le cadre ASEAN pour les modèles d'IA avancés . La mise en correspondance croisée a révélé quelques écarts, mais un nombre bien plus important de points communs, et dans la plupart des cas où des écarts ont été constatés, beaucoup pouvaient s'expliquer par des différences d'ordre social ou culturel propres à chaque juridiction .
Les preuves scientifiques solides ne peuvent pas suivre le rythme du progrès rapide de l'IA, et les modèles de gouvernance sont testés, si tant est qu'ils le soient, par les entreprises qui développent elles-mêmes ces systèmes
Arg. 1Demirkoz identifie un « dilemme de la preuve » selon lequel les preuves scientifiques ne peuvent pas rattraper le rythme du progrès rapide de l'IA, dont les capacités doublent tous les quelques mois. Le temps que les preuves de préjudices réels ou de capacités soient rassemblées, la technologie a déjà dépassé les modèles de gouvernance actuels. Par ailleurs, les 40 modèles de gouvernance et lignes directrices éthiques recensés sont très fragmentés et rarement testés, et lorsqu'ils le sont, c'est par les entreprises qui développent elles-mêmes ces systèmes.
Elle a déclaré que « les preuves scientifiques solides ne peuvent pas rattraper la vitesse à laquelle l'IA progresse, car ses capacités doublent tous les quelques mois, et le temps que nous disposions de preuves, que les préjudices réels ou les capacités soient compilés, la technologie a déjà dépassé les modèles de gouvernance actuels » . Elle a noté que le panel a recensé 40 modèles de gouvernance et lignes directrices éthiques différents, les jugeant très fragmentés et rarement testés, et lorsqu'ils le sont, testés par les entreprises qui les développent elles-mêmes .
on: Une base de preuves scientifiques commune et indépendante est essentielle pour une gouvernance fiable de l'IA
Les cadres d'évaluation doivent évoluer pour ne plus se limiter à l'évaluation des modèles seuls, mais pour englober l'ensemble des systèmes, y compris les outils, les environnements et les utilisateurs
Arg. 2Demirkoz soutient que l'évaluation de l'IA ne doit pas se concentrer uniquement sur les modèles, mais doit adopter une approche plus large tenant compte de l'interopérabilité des outils, des environnements et des utilisateurs. L'absence de preuves indépendantes et unifiées en dehors des entreprises qui développent ces modèles nuit à la confiance du public et à la responsabilité objective.
Elle a déclaré que « nous devrions passer de l'évaluation des seuls modèles à l'évaluation des systèmes » et que l'absence de preuves indépendantes et unifiées en dehors des entreprises qui développent ces modèles nuit à la confiance du public et à la responsabilité objective .
on: La question de savoir si l'évaluation de l'IA doit porter uniquement sur les modèles ou sur l'ensemble des systèmes, y compris les outils, les environnements et les utilisateurs
Les pays en développement subissent les coûts les plus élevés de la fragmentation, car les modèles de pointe et la puissance de calcul sont concentrés dans seulement deux pays
Arg. 3Demirkoz soutient que les pays en développement supportent le coût le plus élevé de la fragmentation de la gouvernance de l'IA, car les modèles de pointe et la puissance de calcul sont concentrés dans seulement deux pays. Le Sud global risque d'être totalement exclu en raison de l'absence d'infrastructures localisées et d'une base de preuves mondiale commune.
Elle a déclaré que « les pays en développement supportent le coût le plus élevé de cette fragmentation, car les modèles de pointe sont hébergés et la puissance de calcul est concentrée dans seulement deux pays dans le monde » . Elle a noté que le Sud global risque d'être totalement exclu en raison de l'absence d'infrastructures localisées et d'une base de preuves mondiale commune .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
Le Sud global risque d'être exclu parce qu'il manque d'infrastructures localisées et ne peut pas inspecter, auditer ou adapter culturellement les modèles à ses propres besoins
Arg. 4Demirkoz soutient que les régions du Sud global dépendent de technologies pour lesquelles elles ne disposent pas de capacités nationales, ce qui signifie qu'elles ne peuvent pas inspecter, auditer ou adapter culturellement les modèles d'IA à leurs propres besoins. Cette dépendance crée un défi fondamental en matière de gouvernance, car ces régions ne peuvent pas participer de manière significative à l'élaboration des systèmes d'IA qui les affectent.
Elle a déclaré que ces régions « dépendent de technologies pour lesquelles elles ne disposent pas de capacités nationales, de sorte qu'elles ne peuvent pas inspecter, auditer ou adapter culturellement ces modèles à leurs propres besoins » . Elle a également souligné que des populations vulnérables telles que les enfants et les femmes, ainsi que la société civile et les cadres démocratiques, sont affectés par les préjudices liés à l'IA, notamment les abus sexuels sur enfants générés par l'IA, les violences sexuelles facilitées par les deepfakes et la désinformation automatisée .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
La société civile et les cadres démocratiques sont fragilisés par l'érosion d'une réalité partagée et la remise en cause de la légitimité démocratique à travers la désinformation automatisée et les contenus générés par l'IA
Arg. 5Demirkoz souligne qu'au-delà des préjudices individuels, l'IA cause des dommages systémiques à la société civile et aux cadres démocratiques en érodant la réalité partagée et en sapant la légitimité démocratique. La désinformation automatisée et les contenus générés par l'IA sont les principaux facteurs de ces dommages.
Elle a déclaré que « la société civile et les démocraties, les cadres démocratiques, subissent également des préjudices. On observe une érosion de la réalité partagée ainsi qu'une atteinte à la légitimité démocratique due à la désinformation automatisée et aux contenus générés par l'IA » . Elle a également fait référence au point soulevé par le Secrétaire général concernant les impacts sur la santé mentale liés aux comportements complaisants des chatbots .
on: L'intégrité de l'information et l'érosion de la réalité partagée par les contenus générés par l'IA constituent un risque systémique pour la sécurité, nécessitant des réponses de gouvernance interopérables
Plus le risque est élevé, plus les exigences en matière de soin et de supervision sont importantes ; l'IA doit toujours être utilisée avec précaution et ne jamais être laissée sans surveillance, à l'instar des règles régissant l'usage du feu
Arg. 1Cervera Narvas soutient que la gouvernance de l'IA devrait suivre une approche du risque fondée sur des principes, selon laquelle un risque plus élevé exige davantage de soin et de supervision. Il utilise l'analogie du feu — première technologie transformatrice de l'humanité — pour illustrer que même les technologies les plus puissantes peuvent être gouvernées de manière sûre grâce à des règles simples mais appliquées de façon cohérente.
Il a utilisé l'analogie du feu maîtrisé en tant que première technologie transformatrice de l'humanité, soulignant que nos ancêtres avaient élaboré deux règles simples : toujours utiliser le feu avec précaution, et ne jamais le laisser sans surveillance . Il a soutenu que ces mêmes règles devraient s'appliquer à l'IA, et que la loi européenne sur l'IA a établi un principe selon lequel « plus le risque est élevé, plus les exigences de soin et de supervision sont importantes » .
on: La supervision humaine et la responsabilité doivent être intégrées dans les systèmes d'IA dès leur conception, et non ajoutées après la survenance d'incidents
on: Si l'interopérabilité devrait viser une compatibilité totale ou uniquement une compatibilité sélective et délibérée des composants les plus critiques
Les décisions automatisées à fort impact doivent rester soumises à une responsabilité humaine claire et être traçables et contestables, car aucune garantie scientifique n'existe que les agents autonomes suivront leurs instructions.
Arg. 1Le représentant de l'UPU soutient que dans la chaîne d'approvisionnement postale, la décision automatisée d'un acteur affecte immédiatement les autres maillons de la chaîne, ce qui rend la responsabilité et la supervision essentielles. La mise en garde du panel scientifique selon laquelle rien ne garantit que les agents autonomes suivront leurs instructions signifie que la responsabilité et la supervision doivent être intégrées dès la conception, et non reconstituées après un échec.
Le représentant a noté que dans la chaîne d'approvisionnement postale, « la décision automatisée d'un acteur - un signalement douanier, un choix de routine, un score de risque - affecte immédiatement les autres maillons de la chaîne » et que ce que le rapport décrit comme un risque systémique constitue « une réalité opérationnelle quotidienne » pour l'UPU . Le représentant a cité la mise en garde du panel selon laquelle « aucune garantie scientifique n'existe que les agents autonomes suivront leurs instructions et que des preuves de déviations s'accumulent déjà » .
on: L'IA agentique représente une nouvelle frontière de gouvernance urgente nécessitant des cadres spécifiques en matière d'identité, de responsabilité et de responsabilité transfrontalière.
L'écart entre les langues dominantes et les langues sous-représentées dans les principaux modèles d'IA se creuse, au lieu de se réduire, ce qui appauvrit le patrimoine culturel et engendre un coût plus élevé en tokens pour les utilisateurs de langues minoritaires
Arg. 1Le représentant de la Lettonie soutient que l'écart entre les langues dominantes et les langues sous-représentées dans les modèles d'IA se creuse plutôt qu'il ne se réduit, ce qui entraîne des conséquences à la fois culturelles et pratiques. Pour les utilisateurs de langues minoritaires, l'IA coûte plusieurs fois plus de tokens, créant un désavantage économique qui s'ajoute à la perte culturelle.
Le représentant a déclaré que « les données confirment que l'écart entre les langues dominantes et les langues sous-représentées dans les principaux modèles d'IA se creuse, au lieu de se réduire » et que cela « appauvrit le patrimoine et le contexte culturels, mais entraîne également un coût plusieurs fois plus élevé en tokens lors de l'utilisation de l'IA dans des langues minoritaires » . À titre d'exemple positif, le représentant a cité un modèle à poids ouverts soutenu par l'UE ayant atteint l'égalité entre plus de 30 langues de l'UE .
on: La diversité linguistique et culturelle doit être reflétée dans les cadres d'évaluation et les référentiels de l'IA
Des référentiels d'évaluation ouverts reflétant la diversité linguistique et culturelle, ainsi que le renforcement des capacités afin que chaque pays puisse participer en tant que partenaire égal à l'évaluation, constituent des priorités essentielles
Arg. 2Le représentant de la Lettonie propose trois priorités : des méthodes d'évaluation communes et des référentiels ouverts reflétant la diversité linguistique et culturelle ; une compatibilité minimale concernant l'origine des données et le signalement des incidents, y compris les incidents liés à l'intégrité des données ; et le renforcement des capacités afin que chaque pays puisse participer à l'évaluation en tant que partenaire égal.
Le représentant a proposé trois priorités spécifiques : des méthodes d'évaluation communes et des référentiels ouverts reflétant la diversité linguistique et culturelle ; une compatibilité minimale concernant l'origine des données et le signalement des incidents, y compris les incidents liés à l'intégrité des données ; et le renforcement des capacités afin que chaque pays puisse participer à l'évaluation en tant que partenaire égal .
on: La diversité linguistique et culturelle doit être reflétée dans les cadres d'évaluation et les référentiels de l'IA
Les données d'entraînement empoisonnées faussent silencieusement les faits et les visions du monde, pourtant il n'existe aucune norme commune concernant l'origine des données d'entraînement ni aucun mécanisme permettant d'alerter les autres parties
Arg. 3Le représentant de la Lettonie souligne la menace que représentent les données d'entraînement empoisonnées comme défi concret en matière d'intégrité de l'information, notant que des réseaux de désinformation coordonnés peuvent s'infiltrer dans les modèles d'IA mondiaux via les données d'entraînement. Malgré ce risque, il n'existe actuellement aucune norme commune concernant l'origine des données d'entraînement ni aucun mécanisme permettant d'alerter les autres lorsqu'une telle contamination est découverte.
Le représentant a décrit la collecte de données pour un modèle d'IA multilingue ouvert de l'UE et la nécessité de filtrer des millions d'articles provenant d'un réseau de désinformation coordonné s'infiltrant dans les modèles d'IA mondiaux . Le représentant a noté que « les données d'entraînement empoisonnées faussent silencieusement des faits essentiels, et en aval, la vision du monde qui se construit sur eux. Pourtant, il n'existe aucune norme commune concernant l'origine des données d'entraînement, ni aucun mécanisme permettant d'alerter les autres » .
on: L'intégrité de l'information et l'érosion de la réalité partagée par les contenus générés par l'IA constituent un risque systémique pour la sécurité, nécessitant des réponses de gouvernance interopérables
L'IA érode le sens partagé de la réalité à travers des clones synthétiques, des scènes de conflits falsifiées, des images sexuelles non consenties, et le « dividende du menteur » où des événements réels sont rejetés comme étant générés par l'IA
Arg. 1Sam Gregory soutient que l'IA cause déjà des préjudices généralisés en érodant le sens partagé de la réalité, qu'il identifie comme un risque systémique pour la sécurité plutôt que comme une simple question d'éthique. À travers le travail de Witness avec la société civile de première ligne et les médias, il observe des clones synthétiques usurpant l'identité de personnalités publiques, des scènes falsifiées de zones de conflit, des images sexuelles non consenties ciblant les femmes et les filles, ainsi que le « dividende du menteur », où des événements réels sont rejetés comme étant générés par l'IA.
Il a décrit la force d'intervention rapide mondiale de Witness contre les deepfakes ainsi que son travail avec des défenseurs des droits humains et des journalistes à travers le monde, observant « des clones synthétiques usurpant l'identité de personnalités publiques, des scènes falsifiées de zones de conflit et des images sexuelles non consenties incessantes ciblant les femmes et les filles » ainsi que « le dividende du menteur, où le panel nomme des événements réels balayés d'un revers de main par la simple affirmation qu'il s'agit d'IA » . Il a cité la conclusion du panel scientifique indépendant selon laquelle « l'IA érode notre sens partagé de la réalité » .
on: L'intégrité de l'information et l'érosion de la réalité partagée par les contenus générés par l'IA constituent un risque systémique pour la sécurité, nécessitant des réponses de gouvernance interopérables
Une IA digne de confiance est impossible sans un environnement informationnel fiable ; l'érosion de l'intégrité de l'information constitue un risque systémique pour la sécurité, et non simplement une question d'éthique
Arg. 2Gregory soutient que l'intégrité de l'information doit être traitée comme un risque systémique transfrontalier et un axe central de l'interopérabilité, et non comme une simple préoccupation éthique. Lorsque les individus ne sont plus en mesure de distinguer le réel du faux, chaque autre dispositif de protection repose sur du sable, faisant d'un environnement informationnel fiable un prérequis à une IA digne de confiance.
Il a déclaré qu'« une IA digne de confiance est impossible sans un environnement informationnel fiable, et que cette érosion constitue un risque systémique pour la sécurité, et non simplement une question d'éthique » . Il a soutenu que « lorsque les individus ne peuvent plus distinguer le réel du faux, chaque dispositif de protection que nous construisons repose sur du sable » et que cela mérite d'être traité comme le risque systémique transfrontalier qu'il représente .
on: L'intégrité de l'information et l'érosion de la réalité partagée par les contenus générés par l'IA constituent un risque systémique pour la sécurité, nécessitant des réponses de gouvernance interopérables
Une infrastructure d'authenticité interopérable et des normes de provenance des contenus telles que C2PA doivent être élaborées en plaçant la vie privée et les droits humains en leur centre, afin qu'elles ne puissent pas devenir des infrastructures de surveillance
Arg. 3Gregory soutient qu'une infrastructure d'authenticité significative et interopérable ainsi que des normes de provenance des contenus sont nécessaires pour que les individus puissent comprendre la composition des contenus qu'ils consomment. Cependant, des normes telles que la spécification C2PA doivent être élaborées en plaçant la vie privée et les droits humains en leur centre, afin d'éviter qu'elles ne deviennent des infrastructures de surveillance.
Il a appelé à « une infrastructure d'authenticité significative et interopérable et une provenance constante des contenus, afin que nous puissions tous lire la composition des contenus et des communications que nous consommons » . Il a spécifiquement souligné que « les normes telles que la spécification C2PA doivent être élaborées en plaçant la vie privée et les droits humains en leur centre, afin qu'elles ne puissent pas devenir des infrastructures de surveillance » .
Les cadres existants, notamment la Convention du Conseil de l'Europe, le Processus d'Hiroshima, l'AI Act de l'UE et les organes des Nations Unies, doivent être consolidés et rendus véritablement interopérables
Arg. 4Gregory soutient que plutôt que de créer de nouveaux cadres, l'effort devrait porter sur la mise en interopérabilité effective des cadres existants. Il appelle à une convergence autour des conventions existantes en matière de droits humains, des cadres internationaux et des législations nationales et régionales, une dynamique existant déjà dans plusieurs juridictions et au sein des organes des Nations Unies.
Il a appelé à « une convergence autour des conventions existantes en matière de droits humains, notamment le Conseil de l'Europe, des cadres internationaux, notamment le Processus d'Hiroshima, et des législations nationales et régionales, notamment l'AI Act de l'UE » . Il a noté que « la dynamique en faveur de ces mesures visant à protéger notre compréhension commune de la réalité à l'ère de l'IA existe déjà dans plusieurs juridictions et au sein des organes des Nations Unies, notamment l'ITU » et que « la tâche consiste à la rendre véritablement interopérable » .
on: Les cadres internationaux existants devraient servir de socles à l'interopérabilité de la gouvernance de l'IA plutôt que d'être remplacés par de nouveaux cadres
Les capacités de détection de l'IA trompeuse fonctionnent actuellement le moins bien pour les populations les plus exposées aux risques, en particulier dans la majorité mondiale
Arg. 5Gregory souligne que les capacités de détection de l'IA trompeuse ne sont pas équitablement réparties, la technologie fonctionnant le moins bien pour les populations les plus exposées aux risques. Cela crée une vulnérabilité cumulée dans laquelle les populations les plus ciblées par les préjudices générés par l'IA sont également les moins protégées par les outils de détection.
Il a cité le rapport de référence de Witness montrant que « la détection fonctionne actuellement le moins bien pour les personnes les plus à risque, en particulier dans la majorité mondiale » . Il a appelé à des capacités de détection des IA trompeuses opérationnelles à l'échelle mondiale, accompagnées d'une infrastructure d'authenticité interopérable .
on: La diversité linguistique et culturelle doit être reflétée dans les cadres d'évaluation et les référentiels de l'IA
L'ONU joue un rôle central pour aider à éviter la fragmentation, identifier les convergences et garantir que les pays en développement participent en tant que co-architectes des règles
Arg. 1Le représentant du Brésil soutient que les Nations Unies ont un rôle central dans la gouvernance de l'IA qui va au-delà de la facilitation du dialogue. L'ONU peut aider à éviter la fragmentation, identifier les convergences, relier les initiatives existantes et, surtout, garantir que les pays en développement participent non pas simplement en tant que destinataires des règles, mais en tant que co-participants à part entière dans l'élaboration des règles de gouvernance de l'IA.
Le représentant a déclaré que « les Nations Unies ont un rôle central dans cet effort. Elles peuvent aider à éviter la fragmentation, identifier les convergences, relier les initiatives existantes et garantir que les pays en développement participent non pas simplement en tant que destinataires des règles, mais en tant que co-participants à part entière dans l'élaboration des règles de gouvernance de l'IA » . Le représentant a également souligné que la souveraineté numérique ne signifie pas l'isolement numérique, mais la capacité des États à participer à l'économie numérique mondiale tout en préservant leur autonomie réglementaire .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent être des participants actifs dans l'élaboration des cadres de gouvernance
on: Si les normes de sécurité doivent être élaborées par des organes existants tels que l'OCDE et le G7 ou par de nouveaux processus multilatéraux inclusifs menés par l'ONU
Les normes internationales traduisent les principes du droit international en outils pratiques et fournissent aux gouvernements une base pour la réglementation nationale ainsi qu'un langage commun à l'industrie.
Arg. 1Le représentant de l'IEC soutient que les normes internationales jouent un rôle distinct et essentiel dans la gouvernance de l'IA en assurant le lien entre les différentes couches normatives. Elles traduisent les principes énoncés dans le droit international et le droit souple en outils pratiques, offrent aux gouvernements une base pour la réglementation nationale et donnent à l'industrie un langage commun pour développer des produits sûrs et interopérables.
Le représentant a décrit cinq couches normatives de la gouvernance de l'IA : le droit international, le droit international souple, le droit national, les normes internationales et le pouvoir normatif de ce qui est techniquement réalisable . Il a affirmé que les normes internationales « forment le lien entre ces couches. Elles traduisent les principes énoncés dans le droit international et le droit souple en outils pratiques. Elles offrent aux gouvernements une base pour la réglementation nationale et donnent à l'industrie un langage commun pour développer des produits sûrs et interprétables » .
on: Les cadres internationaux existants devraient servir de fondements à l'interopérabilité de la gouvernance de l'IA plutôt que d'être remplacés par de nouveaux cadres.
Les normes de sécurité sont établies par un petit nombre d'États et d'entreprises, à travers des processus dans lesquels la majeure partie du monde n'a pas voix au chapitre ; la sécurité est contextuelle et façonnée par la langue, la culture et les réalités locales
Arg. 1Le délégué du Pakistan soutient que la sécurité doit être définie de manière inclusive, car les normes et critères actuels pour une IA digne de confiance sont établis par un petit nombre d'États et d'entreprises, à travers des instituts nationaux de sécurité et des cadres réglementaires dans lesquels la majeure partie du monde n'a pas voix au chapitre. La sécurité n'est pas une question purement technique, mais est contextuelle, façonnée par la langue, la culture et les réalités locales.
Le délégué a déclaré que « trop souvent, les normes et critères pour une IA digne de confiance sont établis par un petit nombre d'États et d'entreprises, à travers des instituts nationaux de sécurité et des cadres dans lesquels la majeure partie du monde n'a pas voix au chapitre » . Le délégué a soutenu que « la sécurité n'est pas une question purement technique, elle est contextuelle, façonnée par la langue, la culture et les réalités locales » et a appelé à l'élaboration de normes de sécurité dans le cadre de processus multilatéraux inclusifs sous l'égide des Nations Unies .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
on: La question de savoir si les normes de sécurité doivent être élaborées par des organes existants tels que l'OCDE et le G7, ou par de nouveaux processus multilatéraux inclusifs sous la conduite de l'ONU
Les pays disposant de moins de ressources doivent être des acteurs actifs de l'infrastructure de gouvernance mondiale, et non de simples preneurs de règles ; la capacité à tester, évaluer et certifier les systèmes d'IA doit être considérée comme partie intégrante de la sécurité elle-même
Arg. 2Le délégué du Pakistan soutient que la confiance exige la capacité de vérifier, et qu'une nation ne peut pas faire confiance à ce qu'elle ne peut pas évaluer. La capacité à tester, évaluer et certifier les systèmes d'IA demeure concentrée là où la technologie est développée, et sans effort délibéré, les pays en développement seront invités à accepter des garanties de sécurité qu'ils n'ont aucun moyen de vérifier.
Le délégué a déclaré qu'« une nation ne peut pas faire confiance à ce qu'elle ne peut pas évaluer. Or, la capacité à tester, évaluer et certifier les systèmes d'IA reste concentrée là où la technologie est développée » . Le délégué a appelé à traiter « la capacité à évaluer et à gouverner l'IA comme partie intégrante du développement de l'IA pour la sécurité elle-même, soutenue par des outils partagés, une expertise mutualisée et une coopération entre les régions » .
Même la participation aux forums de gouvernance est inégale, car les obstacles liés aux visas empêchent les représentants des pays en développement d'y assister
Arg. 1La représentante du Center for Responsible AI met en lumière un obstacle concret et immédiat à une participation inclusive à la gouvernance de l'IA : les procédures de visa qui empêchent les représentants des pays en développement d'assister aux forums internationaux. Cela est illustré par le fait que la collègue de la représentante, venue d'Inde, n'a pas pu participer en raison de l'impossibilité d'obtenir un visa dans les délais impartis.
La représentante a souligné que « le simple fait que ce soit moi qui présente et non Geeta démontre une fois de plus la difficulté pour les personnes du tiers-monde d'accéder à des forums tels que celui-ci. Elle n'a pas pu obtenir de visa dans les délais très courts qui lui ont été accordés pour venir. C'est donc un défi, même pour les personnes du tiers-monde, de participer à ces discussions » .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
Un cadre structuré de signalement des incidents liés à l'IA doit être démocratisé à la base, établir des responsabilités partagées tout au long de la chaîne de valeur de l'IA, et permettre une gouvernance proactive axée sur l'apprentissage
Arg. 2Le Center for Responsible AI plaide en faveur d'un cadre structuré de signalement des incidents liés à l'IA en tant que pilier central de la gouvernance mondiale de l'IA. Ce cadre doit être démocratisé à la base, veiller à ce qu'aucun individu ni aucune communauté ne soit laissé pour compte, établir des responsabilités partagées tout au long de la chaîne de valeur de l'IA, et produire des données probantes sur les préjudices réels afin de permettre une gouvernance proactive plutôt que réactive.
La représentante a décrit les travaux du Center sur l'élaboration d'un cadre de signalement des incidents liés à l'IA permettant « la collecte systématique, la classification, l'analyse, la réponse et, dans la mesure du possible, la résolution des préjudices réels, assortie de responsabilités institutionnelles clairement définies » . Elle a soutenu qu'un tel cadre « constitue une base solide pour le développement de l'IA et génère des données probantes sur les préjudices réels, permettant à l'industrie de l'IA et aux gouvernements de développer des boucles de rétroaction pour une meilleure conception des systèmes » et favorise « des approches proactives axées sur l'apprentissage, capables de suivre le rythme de l'évolution rapide des technologies d'IA » .
on: Des mécanismes partagés de signalement des incidents sont essentiels pour garantir que les enseignements tirés des défaillances de l'IA dans une juridiction permettent d'éviter que des préjudices similaires se reproduisent ailleurs
Les cadres de gouvernance doivent être inclusifs dans leur conception, équitables dans leur application, et favorables au transfert de technologie et au renforcement des capacités
Arg. 1Le représentant de l'Afrique du Sud soutient que les cadres mondiaux de gouvernance de l'IA doivent refléter non seulement les priorités des économies avancées, mais aussi les réalités et les besoins des pays en développement. Cela exige que les cadres soient inclusifs dans leur conception, équitables dans leur application, et favorables au transfert de technologie et au renforcement des capacités, faute de quoi la gouvernance risque de renforcer les inégalités existantes.
Le représentant a déclaré que « les cadres mondiaux reflètent non seulement les priorités des économies avancées, mais aussi les réalités et les besoins des pays en développement » et que pour y parvenir, « les cadres mondiaux de gouvernance doivent être inclusifs dans leur conception, équitables dans leur application, et favorables au transfert de technologie et au renforcement des capacités » . Le représentant a averti qu'à défaut, « la gouvernance renforcerait les inégalités existantes » .
on: Les pays en développement et le Sud mondial supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
Parce que les agents IA peuvent agir directement sur le monde réel, leurs défaillances peuvent causer des préjudices graves avant qu'un humain puisse intervenir ; les normes de sécurité doivent se renforcer à mesure que l'autonomie augmente
Arg. 1Le représentant de Concordia soutient que l'essor de l'IA agentique représente un changement fondamental dans les défis de gouvernance, les agents IA étant désormais capables d'agir directement sur le monde réel, tant virtuellement que physiquement. Leurs défaillances pouvant causer des préjudices graves avant qu'un humain puisse intervenir, les normes de sécurité doivent se renforcer à mesure que l'autonomie augmente, à l'instar des normes pour la conduite autonome qui progressent du niveau 0 au niveau 5.
Le représentant a déclaré que « les agents IA pouvant agir directement sur le monde réel, virtuellement et de plus en plus dans le monde physique, leurs défaillances peuvent potentiellement causer des préjudices graves avant même qu'un humain puisse intervenir » . Le représentant a établi une analogie avec les normes de conduite autonome allant du niveau 0 au niveau 5, affirmant que « plus les agents IA deviennent autonomes dans les années à venir, plus les normes de sécurité devront être strictes » .
on: L'IA agentique représente une nouvelle frontière de gouvernance urgente nécessitant des cadres spécifiques en matière d'identité, de responsabilité et de responsabilité transfrontalière
Lorsque des systèmes autonomes tombent en panne, les conséquences ne s'arrêtent pas aux frontières nationales ; un dysfonctionnement dans un pays peut perturber des infrastructures partagées, des chaînes d'approvisionnement ou la sécurité publique ailleurs
Arg. 2Le représentant de Concordia soutient que la nature transfrontalière des défaillances de l'IA agentique rend urgente la coopération internationale sur les normes de sécurité. Un dysfonctionnement dans un pays peut perturber des infrastructures partagées, des chaînes d'approvisionnement ou la sécurité publique ailleurs, ce qui signifie qu'une véritable coopération internationale nécessite l'élaboration inclusive de normes de sécurité et de lignes rouges.
Le représentant a déclaré que « lorsque des systèmes autonomes tombent en panne, les conséquences ne s'arrêtent pas aux frontières nationales. Un dysfonctionnement dans un pays peut perturber des infrastructures partagées, des chaînes d'approvisionnement ou la sécurité publique ailleurs » . Le représentant a cité le Consensus de Singapour de mai, lors duquel 100 experts du monde entier ont identifié 10 principes fondamentaux pour gérer les risques liés à l'IA agentique .
on: L'IA agentique représente une nouvelle frontière de gouvernance urgente nécessitant des cadres spécifiques en matière d'identité, de responsabilité et de responsabilité transfrontalière
La responsabilité doit être intégrée avant le déploiement, avec des autorisations, une supervision et des pistes d'audit conçues dès le départ plutôt qu'ajoutées après un incident
Arg. 1Le représentant de Dubai Cable soutient que lorsque des agents IA sont autorisés à agir, la frontière entre un document de politique et un incident de production devient très mince. La responsabilité doit donc être intégrée avant le déploiement, avec des autorisations, une supervision et des pistes d'audit conçues dès le départ plutôt que rajoutées après la survenue d'un incident.
Le représentant a déclaré que « dès lors qu'un agent IA est autorisé à agir, la frontière entre un document de politique et l'incident de production devient très mince » . Le représentant a soutenu que « la responsabilité doit être intégrée avant le déploiement, avec les autorisations, la supervision et la piste d'audit devant être conçues pour bâtir une bonne stratégie de gouvernance. Une approche temporelle, et non ajoutée après un incident » .
on: L'IA agentique représente une nouvelle frontière de gouvernance urgente nécessitant des cadres spécifiques en matière d'identité, de responsabilité et de responsabilité transfrontalière
Le model context protocol démontre que des normes techniques open source orientées vers les points de friction concrets de la mise en œuvre peuvent connaître une adoption mondiale rapide et améliorer simultanément les standards de gouvernance
Arg. 2Le représentant de Concordia (attribué dans la liste des arguments à Ravin Thambapillai) soutient que l'adoption rapide du model context protocol démontre que des normes techniques open source conçues autour des points de friction concrets peuvent rapidement acquérir un statut mondial de facto. Cela montre que des normes de gouvernance peuvent être élaborées et adoptées rapidement lorsqu'elles répondent à trois critères : traiter les points de friction concrets de la mise en œuvre, être open source, et accélérer à la fois les bénéfices de l'IA et les cadres de gouvernance.
Le protocole de contexte de modèle démontre que des normes techniques open source orientées vers les points de friction concrets de la mise en œuvre peuvent connaître une adoption mondiale rapide et améliorer simultanément les standards de gouvernance
Arg. 1Thambapillai soutient que l'adoption rapide du protocole de contexte de modèle — passant d'une annonce à un standard mondial de facto en 18 mois — démontre que des normes techniques open source conçues autour des points de friction réels peuvent connaître une adoption mondiale rapide. Cela montre que des normes de gouvernance peuvent être élaborées et adoptées rapidement lorsqu'elles répondent à de véritables défis de mise en œuvre, sont open source, et accélèrent à la fois les bénéfices de l'IA et les cadres de gouvernance.
Il a décrit comment le protocole de contexte de modèle est passé d'une idée au standard mondial de facto adopté par tous les grands laboratoires de recherche en IA, toutes les entreprises et toutes les sociétés spécialisées en IA en seulement 18 mois . Il a noté que la spécification avait été « conçue autour des points de friction rencontrés par les personnes travaillant à la frontière de la mise en œuvre de ces systèmes » et qu'elle avait permis des avancées significatives en matière de défis liés à l'autorisation et à la supervision humaine dans les chaînes d'outils IA .
Les pays doivent s'accorder sur des principes communs de gestion des risques et partager les méthodes et résultats d'évaluation au-delà des frontières, y compris les données probantes post-déploiement issues d'une utilisation réelle
Arg. 1Qinghua Lu soutient que les pays doivent s'accorder sur un ensemble commun de principes de gestion des risques et partager les méthodes et résultats d'évaluation au-delà des frontières. Compte tenu du passage d'une gouvernance statique à une gouvernance dynamique, le benchmarking seul est insuffisant, et les données probantes post-déploiement issues d'une utilisation réelle sont essentielles, en particulier pour les systèmes agentiques qui reçoivent des instructions humaines au moment de l'exécution.
Elle a proposé que les pays s'accordent sur des principes communs de gestion des risques, tels que l'évaluation des systèmes d'IA tout au long de leur cycle de vie, l'exigence d'une participation indépendante de tiers à l'évaluation, et l'interdiction de déploiement si le risque dépasse les seuils fixés par les gouvernements . Elle a noté que « le benchmarking en lui-même peut fournir une compréhension initiale des performances du système d'IA dans une configuration représentative, mais il n'est pas suffisant », en particulier pour les systèmes agentiques qui reçoivent des instructions humaines au moment de l'exécution .
on: Une base de données scientifiques partagée et indépendante est essentielle pour une gouvernance fiable de l'IA
on: La question de savoir si l'évaluation de l'IA doit porter uniquement sur les modèles ou sur l'ensemble des systèmes, y compris les outils, les environnements et les utilisateurs
Une collaboration horizontale, par la cartographie des outils et normes existants, et une collaboration verticale, par des travaux techniques conjoints sur des défis spécifiques tels que les tests de capacités multilingues, sont toutes deux nécessaires
Arg. 2Lu propose deux approches complémentaires de la collaboration internationale en matière de gouvernance de l'IA. La collaboration horizontale vise à cartographier et à relier les outils et normes existants par le biais de plateformes communes et de groupes de travail dédiés. La collaboration verticale porte sur des travaux techniques conjoints relatifs à des défis spécifiques, dont un exemple concret est le test conjoint de capacités multilingues mené par le réseau international des instituts de sécurité de l'IA.
Elle a décrit la collaboration horizontale comme axée sur la cartographie ou la mise en relation des outils et normes existants via des plateformes communes, avec des groupes de travail dédiés élaborant des connecteurs tels que des correspondances entre différents cadres de gestion des risques ou des taxonomies d'incidents . Elle a décrit la collaboration verticale comme centrée sur des défis techniques spécifiques, citant l'exercice de test conjoint du réseau international des instituts de sécurité de l'IA sur les tests de capacités multilingues des grands modèles de langage à l'aide de méthodologies communes, chaque pays se concentrant sur différentes langues .
Les mesures trompeuses de succès doivent être évitées ; les critères de référence qui représentent moins de 5 % de la majorité mondiale produisent des normes en toc, et non des normes de référence véritables
Arg. 1Buolamwini soutient que les cadres d'évaluation de l'IA doivent éviter les mesures trompeuses de succès, en particulier les critères de référence qui ne représentent pas la majorité mondiale. S'appuyant sur ses recherches fondatrices en matière d'audit algorithmique, elle démontre que les normes de référence des grandes institutions ne représentaient souvent pas le Sud global ni les personnes à peau foncée, ce qui rendait les progrès apparents illusoires.
Elle a décrit ses recherches fondatrices sur l'audit algorithmique, en soulignant que les normes de référence d'institutions telles que le National Institute for Standards and Technology « ne représentaient souvent pas le Sud global, ne représentaient pas les personnes à peau foncée » . Elle a affirmé que « lorsque nous avons ensuite examiné les données sur lesquelles les normes elles-mêmes avaient été établies - des normes qui étaient censées être des références de qualité -, elles se sont révélées être du toc. Souvent, moins de 5 % d'un critère de référence peut représenter la majorité mondiale » .
on: La diversité linguistique et culturelle doit être reflétée dans les cadres d'évaluation et les critères de référence de l'IA
Le programme britannique « AI for Development » soutient des écosystèmes d'IA à pilotage local dans plus de 40 langues africaines et 13 laboratoires d'IA, reflétant le principe selon lequel l'IA doit être adaptée au contexte local
Arg. 1Malhotra soutient que l'IA doit être adaptée au contexte local et que les pays doivent être habilités à exploiter l'IA de manière à soutenir leurs propres objectifs de développement. Le programme britannique « AI for Development » illustre cette approche en développant des outils d'IA dans plus de 40 langues africaines et en soutenant des écosystèmes d'IA à pilotage local.
Elle a décrit le programme britannique « AI for Development » comme visant à développer des outils d'IA dans plus de 40 langues africaines, à soutenir 13 laboratoires d'IA et à aider les pays à développer des écosystèmes d'IA à pilotage local reflétant leurs propres priorités . Elle a également décrit l'Institut britannique de sécurité de l'IA comme contribuant à établir les fondements scientifiques d'une IA digne de confiance, grâce à des méthodologies d'évaluation, des tests, des mesures de protection et une évaluation des risques, et comme faisant partie d'un réseau croissant d'instituts de sûreté et de sécurité de l'IA collaborant sur des approches d'évaluation .
on: La diversité linguistique et culturelle doit être prise en compte dans les cadres d'évaluation et les référentiels de l'IA
Les 150 ans d'expérience de l'OMM dans l'échange de données transfrontalier grâce à des normes et à la confiance offrent des enseignements pour la gouvernance de l'IA, notamment l'importance de la vérification et de l'accès équitable
Arg. 1Saulo soutient que les 150 ans d'expérience de l'Organisation météorologique mondiale dans l'échange de données entre 193 pays, fondé sur des normes et la confiance, offre des leçons directement applicables à la gouvernance de l'IA. Les principaux enseignements portent sur l'importance de la vérification — confronter les prévisions à la réalité — et sur la centralité de l'accès équitable en tant que préoccupation principale des services météorologiques nationaux.
Elle a souligné que l'OMM échange des données transfrontalières depuis plus de 150 ans et que « pour échanger des données utilisables par différentes communautés à travers le monde, 193 pays en réalité, il faut des normes. Et il faut aussi de la confiance » . Elle a décrit les processus de vérification de l'OMM, dans lesquels les prévisions sont confrontées à la réalité afin d'établir des normes de qualité pour les systèmes pilotés par l'IA , et a cité une récente enquête auprès des membres de l'OMM dans laquelle l'« accès équitable » a été identifié comme leur principale préoccupation et opportunité en matière d'IA .
Les gouvernements locaux et régionaux devraient être reconnus comme un acteur de gouvernance distinct et systématiquement inclus dans les discussions sur l'interopérabilité, car ils exercent des responsabilités directes dans des secteurs où les impacts de l'IA sont les plus visibles
Arg. 1Le représentant du Global Cities Hub soutient que les villes et les régions ne sont pas de simples parties prenantes, mais des autorités publiques dotées de responsabilités importantes dans des secteurs où l'IA transforme déjà les sociétés, notamment la santé, l'éducation, la mobilité et l'administration publique. Ils représentent un niveau de gouvernance encore absent qui pourrait contribuer à la facilitation horizontale de la gouvernance de l'IA.
Le représentant a déclaré que « les villes et les régions ne sont pas de simples parties prenantes. Ce sont des autorités publiques dotées de responsabilités importantes dans de nombreux secteurs où l'IA transforme déjà nos sociétés » . Le représentant a souligné que « les impacts de l'IA sont ressentis en premier lieu et de manière la plus visible dans les villes par les deux tiers de la population mondiale » et que les gouvernements locaux et régionaux « représentent un niveau de gouvernance encore absent qui pourrait contribuer à la facilitation horizontale » .
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA
Les Coordonnateurs résidents des Nations Unies dans 162 pays sont prêts à accompagner les États membres dans la traduction des principes mondiaux de gouvernance de l'IA en actions nationales et dans le renforcement des institutions
Arg. 1Le représentant du Bureau du Coordonnateur résident des Nations Unies soutient que la gouvernance inclusive doit garantir que tous les pays disposent des capacités et de la voix nécessaires pour façonner la manière dont l'IA est développée, déployée et réglementée. Les Coordonnateurs résidents des Nations Unies, présents dans 162 pays et territoires, sont positionnés pour accompagner les États membres dans la traduction des principes mondiaux de gouvernance de l'IA en actions nationales.
Le représentant a pris la parole au nom de cinq coordonnateurs résidents servant l'Angola, l'Eswatini, le Costa Rica, le Monténégro et la Bosnie-Herzégovine , et a cité des exemples d'évaluations de l'état de préparation à l'IA au Monténégro, de dialogues nationaux en Eswatini et d'initiatives d'IA dans le secteur public en Bosnie-Herzégovine . Le représentant a déclaré que « les coordonnateurs résidents, conjointement avec les équipes de pays des Nations Unies, réunis dans 162 pays et territoires, sont prêts à accompagner les États membres dans l'élaboration d'un avenir inclusif en matière d'IA et dans la traduction de la gouvernance mondiale de l'IA » .
Un dialogue continu et inclusif dans le cadre des Nations Unies est essentiel pour instaurer la confiance, une compréhension commune et le consensus scientifique nécessaires à une interopérabilité significative
Arg. 1Le délégué de l'Éthiopie soutient que l'interopérabilité et la compatibilité des approches de gouvernance de l'IA ne peuvent être atteintes par des efforts nationaux isolés, mais nécessitent un dialogue continu, une confiance mutuelle et une coopération multilatérale solide. L'engagement de l'Éthiopie en faveur de cette vision repose sur une conviction de longue date dans le multilatéralisme et le dialogue inclusif au sein des Nations Unies.
Le délégué a déclaré que « les approches d'interopérabilité et de compatibilité ne peuvent être atteintes par des efforts nationaux isolés. Elles nécessitent un dialogue continu, une confiance mutuelle et une coopération multilatérale solide » . Le délégué a décrit les propres efforts de l'Éthiopie, notamment la création d'un institut d'intelligence artificielle et d'une université dédiée à l'IA en cours de planification , et a indiqué que l'Union africaine a désigné le Premier ministre éthiopien comme champion de l'IA et de la santé numérique .
on: Les pays en développement et le Sud global supportent les coûts les plus élevés de la fragmentation de la gouvernance de l'IA et doivent participer activement à l'élaboration des cadres de gouvernance
Le Processus IA d'Hiroshima au Japon, avec environ 70 pays dont ceux du Sud mondial en tant que membres du Groupe des Amis, représente un effort de gouvernance internationale inclusive et une bonne pratique pour ce dialogue
Arg. 1Le délégué du Japon soutient que le Processus IA d'Hiroshima constitue une bonne pratique précieuse pour une gouvernance internationale inclusive de l'IA, ayant fait progresser des initiatives concrètes, notamment des principes directeurs et un Code de conduite en tant que premières normes internationales pour l'IA générative. Avec environ 70 pays et régions, dont ceux du Sud mondial, comme membres du Groupe des Amis, il illustre comment une gouvernance inclusive peut être mise en œuvre.
Le délégué a déclaré que, grâce au Processus IA d'Hiroshima, « des efforts en faveur d'une gouvernance internationale inclusive de l'IA ont été menés à travers des initiatives concrètes telles que l'élaboration de principes directeurs et du Code de conduite, constituant les premières normes internationales pour l'IA générative » . Le délégué a noté qu'« environ 70 pays et régions, dont ceux du Sud mondial, ont approuvé ces principes en tant que membres du Groupe des Amis, et partagent leurs connaissances et expériences en matière de gouvernance et de politique de l'IA afin de parvenir à une IA digne de confiance » .
on: Les cadres internationaux existants devraient servir de fondements à l'interopérabilité de la gouvernance de l'IA plutôt que d'être remplacés par de nouveaux cadres
on: Si les normes de sécurité doivent être élaborées par des organismes existants tels que l'OCDE et le G7 ou par de nouveaux processus multilatéraux inclusifs sous l'égide de l'ONU
Les risques liés à l'IA de frontière, notamment les utilisations abusives, les dysfonctionnements et les impacts sociétaux systémiques, ne peuvent être écartés comme spéculatifs ni indéfiniment reportés
Arg. 1Le rédacteur principal du Rapport international sur la sécurité de l'IA soutient que les risques liés à l'IA de frontière, répartis en trois catégories — utilisations abusives, dysfonctionnements et impacts sociétaux systémiques — ont dépassé le stade des préoccupations spéculatives et sont étayés par un ensemble de preuves allant des études en laboratoire aux incidents réels. Ces risques ne peuvent être indéfiniment reportés alors que les capacités continuent de progresser rapidement.
Le rédacteur a déclaré que « ces risques liés à l'IA de frontière ne peuvent être écartés comme de simples préoccupations spéculatives. Nous disposons d'un ensemble de preuves, allant des études en laboratoire aux incidents réels, qui démontrent désormais que ces préoccupations sont fondées » . Le rédacteur a décrit trois catégories de risques : les utilisations abusives, notamment l'abaissement potentiel des obstacles aux attaques impliquant des armes biologiques ; les dysfonctionnements, à mesure que l'IA devient plus agentique et plus difficile à superviser ; et les impacts systémiques, notamment la manière dont l'IA affectera le travail, la collecte d'informations et la gouvernance .
on: Une base de données scientifiques commune et indépendante est essentielle à une gouvernance fiable de l'IA
Le principe de supervision humaine doit être préservé en tant que condition préalable à une innovation sûre et responsable, et non traité comme un obstacle
Arg. 1Le délégué de la Lituanie soutient que la confiance dans l'IA repose sur trois piliers, le premier étant que l'IA doit rester centrée sur l'humain et ancrée dans les valeurs démocratiques. Le principe de supervision humaine, qui exige une surveillance, une validation ou une intervention humaine aux points de décision critiques, doit être préservé en tant que condition préalable à une innovation sûre et responsable, plutôt que d'être traité comme un obstacle.
Le délégué a déclaré que « le principe de supervision humaine, qui exige une surveillance, une validation ou une intervention humaine aux points de décision critiques, doit être préservé et ne pas être traité comme un obstacle à l'innovation. Il constitue au contraire une condition préalable à une innovation sûre et responsable, contribuant à maximiser les avantages des nouvelles technologies tout en minimisant leurs risques » . Le délégué a également cité l'expérience de la Lituanie face aux cybermenaces persistantes, aux campagnes de désinformation et aux attaques hybrides comme preuve que « la résilience doit être intégrée dans la technologie dès le départ » .
on: La supervision humaine et la responsabilité doivent être intégrées dans les systèmes d'IA dès leur conception, et non ajoutées après la survenance d'incidents
on: La question de savoir si la gouvernance de l'IA doit être intégrée dans les cas d'usage de l'IA dès le départ ou maintenue séparément et appliquée de manière dynamique au moment de l'exécution
La gouvernance de l'IA doit être fondée sur les risques et favorable à l'innovation, notamment par la mise en place de bacs à sable réglementaires permettant aux innovateurs des pays en développement de créer une IA digne de confiance sans obstacles réglementaires excessifs
Arg. 1Le délégué du Bangladesh plaide pour un cadre de gouvernance global combinant des obligations juridiques contraignantes et des normes éthiques, tout en restant favorable à l'innovation. Les approches réglementaires doivent être fondées sur les risques et inclure des bacs à sable réglementaires afin de permettre aux startups et aux innovateurs des pays en développement de développer une IA digne de confiance sans contraintes réglementaires excessives.
Le délégué a appelé à ce que « les approches réglementaires soient fondées sur les risques et favorables à l'innovation, notamment par la mise en place de bacs à sable réglementaires permettant aux startups et aux innovateurs des pays en développement de créer une IA digne de confiance sans obstacles réglementaires excessifs » . Le délégué a également appelé à un cadre de gouvernance global qui défend les droits humains, la transparence, la responsabilité, la vie privée et l'équité, tout en traitant les biais algorithmiques, la mésinformation, la désinformation et les violences basées sur le genre facilitées par l'IA .
on: Des mécanismes partagés de signalement des incidents sont essentiels pour garantir que les enseignements tirés des défaillances de l'IA dans une juridiction permettent d'éviter que des préjudices similaires se reproduisent ailleurs
on: La question de savoir si les cadres de gouvernance de l'IA doivent être juridiquement contraignants ou volontaires et fondés sur des principes
La désinformation générée par l'IA menace l'intégrité des processus électoraux et la participation démocratique ; l'approche multipartite et l'intégration de la science constituent des réponses essentielles
Arg. 1Le représentant de la France soutient que l'intégrité des processus électoraux est menacée par des pratiques de désinformation qui font souvent appel à l'IA, ce qui en fait un enjeu majeur pour la gouvernance internationale. L'approche multipartite pour le dialogue mondial sur la gouvernance de l'IA et l'intégration de la science et de la recherche sont des réponses essentielles à ce défi.
Le représentant a déclaré que « la question est également cruciale en ce qui concerne l'intégrité des processus électoraux menacée par des pratiques de désinformation qui font souvent appel à l'IA » . Le représentant a noté que la France a abordé cette question lors du sommet du G7 et que 56 entreprises ont adhéré aux principes du Processus d'Hiroshima sur l'IA, visant à établir des principes et des pratiques communs pour la gouvernance des systèmes d'IA avancés .
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA
La Société mexicaine pour l'intelligence artificielle souligne qu'un nouvel instrument international doit accorder la priorité à l'interopérabilité avec des normes minimales obligatoires juridiquement contraignantes, véritablement applicables dans tous les pays et toutes les régions.
Arg. 1Le représentant fait valoir que naviguer dans le labyrinthe des lois, réglementations, normes et principes internationaux et locaux est une tâche complexe pour toute entreprise ou tout individu développant ou déployant des systèmes d'IA. Un nouvel instrument international sur la gouvernance de l'IA doit donc accorder la priorité à l'interopérabilité et établir des normes minimales obligatoires juridiquement contraignantes, véritablement applicables dans tous les pays de toutes les régions.
Le représentant a déclaré qu'« un nouvel instrument international sur la gouvernance de l'IA doit accorder la priorité à l'interopérabilité et à un ensemble de règles juridiquement contraignantes établissant les normes minimales obligatoires véritablement applicables dans tous les pays de toutes les régions » . Le représentant a également souligné la responsabilité des universitaires et d'autres acteurs de sensibiliser, d'éduquer et de plaider en faveur d'une IA conçue, développée, déployée et utilisée dans le respect de l'éthique .
on: La question de savoir si les cadres de gouvernance de l'IA doivent être juridiquement contraignants ou volontaires et fondés sur des principes
L'initiative Arawite de l'Estonie illustre la frontière émergente du développement de cadres d'identité et de registres ainsi que de normes d'interopérabilité, afin que les États puissent interagir avec des agents d'IA de manière fiable et responsable.
Arg. 1Virginia Dignum structure la discussion du panel autour de l'idée que l'IA est un ensemble de choix — techniques, institutionnels et politiques — et que l'interopérabilité en est l'un des exemples les plus manifestes. Elle souligne qu'en l'absence de normes probatoires communes et d'approches mutuellement reconnues, des régimes parallèles risquent de ne protéger ni les personnes ni de permettre à la responsabilité de suivre la technologie.
Elle a déclaré que « sans normes probatoires communes et approches mutuellement reconnues, nous risquons de voir se développer des régimes parallèles qui ne protègent ni les personnes ni ne permettent à la responsabilité de suivre la technologie » . Elle a noté que « nous avons déjà observé ce phénomène dans de nombreux domaines où la fragmentation crée des lacunes qui pénalisent en premier lieu les moins bien dotés en ressources » .
Les interventions des États membres et des parties prenantes doivent alterner afin de favoriser une participation large
Arg. 1L'organisateur de la conférence explique le cadre procédural régissant la gestion des interventions en séance, en précisant que les représentants des États membres et les représentants des autres parties prenantes doivent alterner dans l'ordre de prise de parole. Cette approche vise à garantir que les voix gouvernementales et non gouvernementales bénéficient d'une égale opportunité de contribuer aux débats.
L'organisateur de la conférence a indiqué que « dans un souci de favoriser une large participation des parties prenantes, nous procéderons en alternant un représentant des États membres et un représentant des autres parties prenantes » . Les intervenants devaient s'être inscrits à l'avance via le site du Dialogue mondial des Nations Unies sur l'IA, et un minuteur a été mis en place afin que tous les intervenants puissent s'exprimer dans le temps imparti .
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA
Les cadres internationaux existants et les initiatives régionales devraient servir de base plutôt que de créer de nouveaux cadres à partir de zéro, car une approche universelle ne sera pas efficace
Arg. 1La délégation australienne soutient que les nouveaux efforts de gouvernance de l'IA doivent s'appuyer sur des approches éprouvées déjà développées par des organisations telles que l'ISO, l'ITU, le HCDH et l'UNESCO, ainsi que par la série de Sommets sur l'IA, le Processus d'Hiroshima sur l'IA et le Partenariat mondial sur l'IA. Des initiatives régionales telles que l'Initiative IA de l'APEC, le Cadre de gouvernance de l'IA de l'ASEAN et la Stratégie continentale de l'IA de l'Union africaine illustrent comment des principes communs peuvent être adaptés à différents contextes.
La délégation a déclaré que « nous devrions nous appuyer sur les travaux internationaux existants plutôt que de créer des cadres à partir de zéro » et a cité les normes ISO sur l'IA, ainsi que les orientations de l'ITU, du HCDH et de l'UNESCO comme offrant des références communes . La délégation a également mentionné des initiatives régionales, notamment l'Initiative IA de l'APEC, le Cadre de gouvernance de l'IA de l'ASEAN et la Stratégie continentale de l'IA de l'Union africaine, comme exemples illustrant comment des principes communs peuvent être adaptés à différents contextes économiques, sociaux et réglementaires .
on: Les cadres internationaux existants devraient servir de blocs constitutifs pour l'interopérabilité de la gouvernance de l'IA plutôt que d'être remplacés par de nouveaux cadres
La gouvernance responsable de l'IA est un processus continu de surveillance, d'adaptation et d'amélioration à mesure que les technologies évoluent et que les risques émergent, et non une tâche ponctuelle
Arg. 2La délégation australienne soutient qu'une gouvernance efficace de l'IA requiert des principes communs pouvant être mis en œuvre de manière flexible selon les contextes, et que la gouvernance doit être comprise comme un processus continu plutôt que comme un résultat figé. Cela reflète la réalité selon laquelle les technologies d'IA et les risques associés sont en constante évolution.
La délégation a déclaré que « l'IA responsable n'est pas une tâche ponctuelle, mais un processus continu de gouvernance, de surveillance, d'adaptation et d'amélioration à mesure que les technologies évoluent et que les risques émergent » . La délégation a également souligné qu'« une approche universelle de la gouvernance de l'IA ne sera pas efficace », car les pays font face à des risques, des priorités, des niveaux de développement numérique et des environnements réglementaires différents .
Le Dialogue mondial de l'ONU a le potentiel de rassembler la communauté multipartite pour renforcer l'écosystème numérique et contribuer à un écosystème numérique stable, sûr, inclusif et innovant pour tous
Arg. 3La délégation australienne exprime son soutien au Dialogue mondial de l'ONU en tant que plateforme de collaboration multipartite sur les défis de la gouvernance de l'IA. En partageant leurs expériences, les participants peuvent renforcer l'écosystème numérique, améliorer la connectivité entre les économies et contribuer à des résultats bénéfiques pour tous les pays.
La délégation a déclaré qu'« l'Australie estime que le Dialogue mondial de l'ONU a le potentiel de rassembler la communauté multipartite pour relever les défis de la gouvernance de l'IA et y faire face collectivement » . La délégation a soutenu qu'« en partageant nos expériences, nous renforçons l'écosystème numérique, améliorons la connectivité entre nos économies et contribuons à un écosystème numérique stable, sûr, inclusif et innovant, et ce, pour tous » .
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA
La liste des intervenants doit être gérée par le biais d'une inscription préalable afin de garantir une participation ordonnée et large de la part des États membres et des autres parties prenantes.
Arg. 1Le Co-Président explique le cadre procédural régissant la gestion des interventions en séance, en soulignant que les déclarations seront prononcées selon une liste d'intervenants établie par inscription préalable sur le site du Dialogue mondial des Nations Unies sur l'IA. Ce système vise à permettre au plus grand nombre d'intervenants possible de prendre la parole dans le temps imparti.
Le Co-Président a indiqué que « les déclarations seront prononcées sur la base de la liste des intervenants établie par l'inscription rendue disponible sur le site du Dialogue mondial des Nations Unies sur l'IA » . Il a précisé que « la liste e-délégué est clôturée et que toute modification doit être communiquée au secrétariat », et que « les microphones seront automatiquement coupés à l'expiration du temps de parole » afin de favoriser une large participation .
on: La participation multipartite est essentielle à la légitimité et à l'efficacité de la gouvernance de l'IA.
Une activité de réseautage interactif invitant les participants à identifier une priorité clé en matière d'interopérabilité de l'IA sûre, sécurisée et digne de confiance peut permettre de faire émerger des perspectives diverses de l'ensemble des participants
Arg. 1Le Facilitator UNICC introduit un exercice de réseautage structuré conçu pour s'éloigner des présentations formelles et engager directement tous les participants dans l'identification de leur priorité la plus importante en matière d'interopérabilité de l'IA. L'exercice demande aux participants de s'entretenir avec une personne qu'ils ne connaissent pas encore, afin de favoriser le croisement des perspectives.
Le facilitateur a demandé aux participants de « se tourner à gauche, à droite, vers l'avant ou vers l'arrière, et surtout de trouver une personne qu'ils ne connaissent pas » et de discuter de « ce que serait, s'ils ne devaient en identifier qu'un, le point clé ou la priorité clé en matière d'interopérabilité et d'approches de compatibilité pour une IA sûre, sécurisée et digne de confiance » . Le facilitateur a insisté sur le fait que les participants ne devaient pas « tricher » en s'adressant à quelqu'un qu'ils connaissaient déjà, soulignant ainsi l'importance d'un échange diversifié .
Les activités avec des post-it peuvent recueillir les priorités des participants issues des discussions en réseau et les intégrer aux synthèses des coprésidents, garantissant ainsi que les contributions de terrain éclairent les résultats formels de la gouvernance
Arg. 2Le Facilitator UNICC introduit une deuxième activité interactive au cours de laquelle les participants notent leur priorité identifiée sur des post-it à remettre aux coprésidents à leur départ. Ce mécanisme est conçu pour garantir que les discussions informelles tenues lors de l'exercice de réseautage sont consignées et intégrées au rapport de synthèse formel des coprésidents.
Le facilitateur a demandé aux participants de « noter cet élément prioritaire » sur des post-it et a indiqué qu'« en partant, veuillez remettre ces post-it à la sortie de la salle, et les coprésidents en tiendront compte » . Le facilitateur a directement rattaché cette activité au processus de gouvernance formel en précisant que « les coprésidents tiendront compte de ces points » lors de la présentation d'un rapport de synthèse au dialogue des dialogues .
Le deuxième panel doit passer du « quoi » au « comment » de l'interopérabilité, en se concentrant sur ce qui doit réellement être partagé au-delà des frontières afin que l'IA sûre, sécurisée et digne de confiance puisse être gouvernée de manière compatible et inclusive
Arg. 1Rachel Adams présente la discussion du deuxième panel comme une progression par rapport à l'identification des principes et normes existants effectuée lors du premier panel, vers la question pratique de leur mise en œuvre. Elle identifie trois axes prioritaires : les fondements communs qui émergent déjà, les mesures concrètes pouvant être prises dès maintenant, et la manière dont les pays et les communautés disposant de moins de ressources peuvent participer activement à l'élaboration de l'infrastructure mondiale de gouvernance.
Elle a déclaré que « notre premier panel d'aujourd'hui a contribué à cadrer le paysage existant autour des principes, des normes et des bonnes pratiques. Et dans cette discussion, nous souhaitons passer du quoi au comment » . Elle a précisé que le panel examinerait « ce qui doit réellement être partagé au-delà des frontières - preuves, systèmes de mesure, méthodologies d'évaluation, outils de reporting, pratiques institutionnelles - afin que l'IA sûre, sécurisée et digne de confiance puisse être gouvernée de manière compatible et inclusive » .
L'interopérabilité ne doit pas simplement exporter les présupposés, les risques et les priorités des juridictions puissantes, mais doit permettre de tenir compte des contextes et des priorités nationaux différents
Arg. 2Rachel Adams soutient qu'un modèle d'interopérabilité qui se contenterait de reproduire les présupposés et les priorités des juridictions puissantes serait insuffisant et potentiellement préjudiciable. Une véritable interopérabilité doit être conçue pour s'adapter aux différents contextes et priorités nationaux, en veillant à ce que les pays moins puissants ne soient pas de simples récepteurs de cadres de gouvernance élaborés ailleurs.
Elle a déclaré qu'« il est tout aussi important d'éviter un modèle d'interopérabilité qui se contente d'exporter les présupposés, les risques et les priorités des juridictions puissantes. L'interopérabilité doit permettre de tenir compte des différents contextes et priorités nationaux » . Ce cadrage a défini l'ordre du jour de l'ensemble de la discussion du deuxième panel .
Ce qui est mesuré et ce qui ne l'est pas a de véritables conséquences sur les droits et les opportunités des personnes dans les systèmes d'évaluation de l'IA
Arg. 3Rachel Adams souligne l'importance cruciale des choix de mesure dans l'évaluation de l'IA, présentant cette question comme relevant des droits et des opportunités plutôt que d'un simple enjeu technique. Elle cite les travaux du Dr. Joy Buolamwini comme preuve que la conception des systèmes d'évaluation a des conséquences directes sur les expériences et les préjudices qui sont pris en compte.
Elle a déclaré que « Dr. Buolamwini, vos travaux ont démontré avec une grande force que ce qui est mesuré et ce qui ne l'est pas a de véritables conséquences sur les droits et les opportunités des personnes » . Elle a demandé ce qui devait être garanti dans les systèmes et normes d'évaluation partagés « afin que ces systèmes captent les biais et les discriminations plutôt que de simplement rendre l'IA » plus efficace .
Graphe de connaissances de la session
Intervenants · Sujets · Arguments · Relations
There was near-universal agreement that full regulatory harmonisation is neither realistic nor desirable, but that interoperability - enabling different governance approaches to communicate and work together - is essential. The Facilitator used the electrical systems analogy to illustrate that adapters and common standards, not uniformity, are the solution . Bogantes Zamora framed the challenge as demonstrating safety and accountability across borders in practice, not just on paper . Singh-Gill identified fragmentation as the antonym of interoperability and outlined its structural harms . The EY Representative argued interoperability can live at the implementation stage . Al Hameli proposed selective and deliberate compatibility rather than full compatibility . Brazil emphasised that interoperability must not restrict national regulatory autonomy . Australia called for building on existing frameworks rather than starting from scratch . Ethiopia stressed that interoperability does not mean a single global AI law . South Africa called for frameworks inclusive in design and equitable in application .
Interoperability as essential alternative to harmonisation - AI governance need not be uniform, but different national frameworks must be able to communicate and work together across borders
Interoperability as a practical implementation challenge - the real challenge is not whether frameworks can coexist on paper, but whether safety, accountability, and trust can be demonstrated across borders
Fragmentation as the antonym of interoperability - global fragmentation creates regulatory arbitrage, accountability gaps, increased compliance burdens, and deepens uneven governance capacity
Good governance as the foundation for interoperability - interoperability can live at the implementation stage and should be rooted in ensuring AI functionally delivers what is needed, not merely compliance
Selective and deliberate compatibility of the most critical components is a more realistic goal than full compatibility
The UN has a central role in helping avoid fragmentation, identifying convergence, and ensuring developing countries participate as co-shapers of rules
Existing international frameworks and regional initiatives should be built upon rather than creating new frameworks from scratch, as a one-size-fits-all approach will not be effective
Continuous and inclusive dialogue under the United Nations is essential to building the trust, shared understanding, and scientific consensus needed for meaningful interoperability
Governance frameworks must be inclusive in design, equitable in application, and supportive of technology transfer and capacity building
Multiple intervenants converged strongly on the view that the Global South and developing countries face disproportionate costs from AI governance fragmentation and must be included as co-shapers rather than rule-takers. Bogantes Zamora cited that 118 countries, mainly from the Global South, are not meaningfully engaged in principal international AI governance discussions . Demirkoz noted that developing nations face the steepest cost of fragmentation as frontier models and compute are concentrated in just two countries . Pakistan argued that safety norms are being set by a small number of states and firms in which most of the world has no voice . South Africa called for frameworks inclusive in design and equitable in application . Bangladesh called for global governance that is inclusive and representative . The Center for Responsible AI highlighted that even visa barriers prevent participation from developing countries . Brazil argued the UN must ensure developing countries participate as full co-participants . Ethiopia stressed the need for continuous inclusive dialogue under the UN .
118 countries, mainly from the Global South, are not meaningfully engaged in principal international AI governance discussions
Developing nations face the steepest costs of fragmentation as frontier models and compute are concentrated in just two countries
The global south risks being locked out because they lack localised infrastructure and cannot inspect, audit, or culturally tailor models to their own needs
Safety norms are being set by a small number of states and firms through processes in which most of the world has no voice; safety is contextual and shaped by language, culture, and local realities
Governance frameworks must be inclusive in design, equitable in application, and supportive of technology transfer and capacity building
Global AI governance must be inclusive and representative; standards and regulatory frameworks should not be developed by a few and applied to many
Even participation in governance forums is unequal, as visa barriers prevent representatives from developing countries from attending
The UN has a central role in helping avoid fragmentation, identifying convergence, and ensuring developing countries participate as co-shapers of rules
Continuous and inclusive dialogue under the United Nations is essential to building the trust, shared understanding, and scientific consensus needed for meaningful interoperability
There was strong consensus that AI governance must be grounded in a shared, independent scientific evidence base rather than relying on principles alone or on evidence produced by the companies developing the systems. Finlay argued that the panel provides evidence and the dialogue provides direction, designed to work together , and called for strengthening the independent evidence base and turning individual disclosures into a field-wide evidence base through benchmarks, standards, and third-party evaluation . Demirkoz identified an evidence dilemma where scientific evidence cannot keep pace with AI's rapid progress and governance models are rarely tested independently . Lu called for common risk management principles and shared evaluation methods across borders . The International AI Safety Rapport Lead Writer argued frontier risks cannot be dismissed as speculative . Buolamwini warned against misleading measures of success where benchmarks represent less than 5% of the global majority . Latvia called for open benchmarks reflecting linguistic and cultural diversity .
The scientific panel and the dialogue are two parts of a shared mission: the panel provides evidence and the dialogue provides direction
An independent evidence base must be strengthened, disclosure from private companies must be improved, and individual disclosures must be turned into a field-wide evidence base through benchmarks, standards, and third-party evaluation
Robust scientific evidence cannot keep pace with AI's rapid progress, and governance models are tested, if at all, by the same companies developing the systems
Countries need to agree on common risk management principles and share evaluation methods and results across borders, including post-deployment evidence from real-world use
Frontier AI risks, including misuse, malfunctions, and systemic societal impact, cannot be dismissed as speculative and cannot be deferred indefinitely
Misleading measures of success must be avoided; benchmarks that represent less than 5% of the global majority produce pyrite standards, not gold standards
Open benchmarks reflecting linguistic and cultural diversity and capacity building so every country can participate as an equal partner in evaluation are essential priorities
Intervenants across government, industry, civil society, and international organisations agreed that human oversight and accountability must be embedded in AI systems from the outset rather than retrofitted after failures. Bogantes Zamora argued that trustworthy AI requires human oversight, transparency, accountability, and independent evaluation throughout the entire system lifecycle . Singh-Gill highlighted the shift from static to dynamic governance as agentic AI becomes more autonomous . The UPU Representative cited the panel's caution that there is no scientific guarantee autonomous agents will follow their instructions . Cervera Narvas used the fire analogy to argue AI must always be used with care and never left unsupervised . Lithuania argued the human-in-the-loop principle is a prerequisite for safe innovation, not an obstacle . The Dubai Cable representative argued accountability must be engineered before deployment . Concordia argued that as AI agents become more autonomous, safety standards must strengthen .
Trustworthy AI requires human oversight, transparency, accountability, and independent evaluation throughout the entire system lifecycle
Governance must evolve from static model oversight to dynamic system governance as agentic AI systems become more autonomous, tool-using, and multi-step
High-impact automated decisions must remain under clear human accountability and be traceable and contestable, as there is no scientific guarantee that autonomous agents will follow their instructions
The higher the risk, the higher the care and supervision required; AI must always be used with care and never left unsupervised, analogous to the rules governing fire
The human-in-the-loop principle must be preserved as a prerequisite for safe and responsible innovation, not treated as an obstacle
Accountability must be engineered before deployment, with permissions, oversight, and audit trails designed in from the start rather than added after an incident
Because AI agents can act directly upon the real world, their failures can cause severe harm before a human can intervene; safety standards must strengthen as autonomy increases
There was broad consensus that current AI evaluation frameworks and benchmarks fail to reflect the world's linguistic and cultural diversity, creating both safety risks and equity problems. Bogantes Zamora noted that the world has more than 7,000 languages but AI training and evaluation cover only a fraction, and models often perform less safely in underrepresented languages . Latvia reported that the gap between dominant and underrepresented languages in AI models is widening, not narrowing, and that this costs several times more tokens for small-language users . Gregory highlighted that detection capabilities for deceptive AI work least well for those most at risk, particularly in the global majority . Buolamwini warned that benchmarks representing less than 5% of the global majority produce pyrite rather than gold standards . Malhotra described the UK's AI for Development Programme building tools in more than 40 African languages . Finlay called for open benchmarks and linguistic diversity as part of inclusion .
AI training and evaluation cover only a fraction of the world's 7,000 languages; models often perform less safely in languages with limited digital data
Evaluation frameworks must reflect linguistic, cultural, and demographic diversity, including communities underrepresented in current global benchmarks
The gap between dominant and underrepresented languages in leading AI models is widening, not narrowing, which strips away cultural heritage and costs more tokens for small-language users
Open benchmarks reflecting linguistic and cultural diversity and capacity building so every country can participate as an equal partner in evaluation are essential priorities
Detection capabilities for deceptive AI currently work least well for those most at risk, particularly in the global majority
Misleading measures of success must be avoided; benchmarks that represent less than 5% of the global majority produce pyrite standards, not gold standards
The UK's AI for Development Programme supports locally led AI ecosystems in over 40 African languages and 13 AI labs, reflecting the principle that AI must be tailored to local context
Inclusion and openness must be at the heart of our approach; it means open benchmarks, ensuring linguistic diversity, and infrastructure for open science and technical standards that reflect global needs
Multiple intervenants agreed that the priority should be making existing frameworks interoperable rather than creating new ones from scratch. Iida described the OECD AI Principles and Hiroshima AI Process as foundational instruments for interoperability . Gregory called for convergence around existing human rights conventions, the Hiroshima Process, and the EU AI Act . Australia argued for building on existing international work including ISO, ITU, OHCHR, and UNESCO guidance . France highlighted that 56 enterprises signed up to the Hiroshima Process principles . Finlay argued that global commitments, international law, the Hiroshima process, and AI summit pledges already exist and need to be consolidated and made implementable . The IEC Representative described international standards as forming the link between normative layers . Japan described the Hiroshima AI Process as a best practice with approximately 70 countries including the Global South .
OECD AI Principles and the Hiroshima AI Process as foundational instruments for interoperability, providing a voluntary multi-stakeholder framework for risk assessment, mitigation, and disclosure
Existing frameworks including the Council of Europe Convention, Hiroshima Process, EU AI Act, and UN bodies should be anchored and made genuinely interoperable
Existing international frameworks and regional initiatives should be built upon rather than creating new frameworks from scratch, as a one-size-fits-all approach will not be effective
AI-generated disinformation threatens the integrity of electoral processes and democratic participation; the multi-stakeholder approach and integration of science are essential responses
A shared minimum baseline building on existing global frameworks, international law, and existing dialogue commitments must be consolidated, shared, and made implementable and adaptable to regional contexts
International standards translate principles from international law into practical tools and give governments a basis for national regulation and industry a common language
Japan's Hiroshima AI Process, with approximately 70 countries including the Global South as Friends Group members, represents an inclusive international governance effort and a best practice for this dialogue
Several intervenants identified the absence of shared incident reporting infrastructure as a critical gap in current AI governance. Al Hameli noted that different incident monitors track failures independently and voluntarily with no legal duty to report, meaning safety failures in one country have no guaranteed path to reach regulators elsewhere before the same failure recurs . Bogantes Zamora included interoperable incident reporting as one of the five elements of minimal viable interoperability to be advanced before 2027 . The Center for Responsible AI called for a structured AI incident reporting framework democratised at the grassroots level that generates real-world evidence of harm and enables proactive governance . The UPU Representative highlighted that accountability and oversight must be built by design and not reconstructed from failure . Bangladesh called for a comprehensive governance framework addressing algorithmic bias and AI-enabled harms .
Shared incident reporting mechanisms can ensure that lessons from failures in one jurisdiction prevent repeated harms elsewhere; currently there is no legal duty to report or recognition between incident monitors
A practical starting point of minimal viable interoperability should advance shared terminology, comparable risk classifications, consistent documentation, interoperable incident reporting, and multilingual evaluation methods before 2027
A structured AI incident reporting framework must be democratised at the grassroots level, establish shared responsibilities throughout the AI value chain, and enable proactive learning-oriented governance
High-impact automated decisions must remain under clear human accountability and be traceable and contestable, as there is no scientific guarantee that autonomous agents will follow their instructions
AI governance must be risk-based and innovation-friendly, including regulatory sandboxes to enable innovators in developing countries to build trustworthy AI without undue regulatory hurdles
There was strong consensus that agentic AI - systems that act autonomously across multiple platforms and borders - represents a qualitatively new governance challenge requiring specific frameworks. Bogantes Zamora argued that agentic AI interoperability must include verifiable agent identity, traceable delegation, machine-readable permissions, secure data exchange, auditable actions, and effective revocation , and cited Estonia's Arawite initiative as an example . Singh-Gill highlighted the shift from static to dynamic system governance as agentic AI becomes more autonomous and multi-step . Concordia argued that because AI agents can act directly upon the real world, their failures can cause severe harm before a human can intervene , and that malfunctions do not stop at national borders . The Dubai Cable representative argued that once an AI agent is authorised to act, the line between a policy document and a production incident becomes very thin, requiring accountability to be engineered before deployment . The UPU Representative cited the panel's caution that there is no scientific guarantee autonomous agents will follow their instructions .
Interoperability must connect not only systems but identities, mandates, and chains of responsibility, especially for agentic AI
Governance must evolve from static model oversight to dynamic system governance as agentic AI systems become more autonomous, tool-using, and multi-step
Because AI agents can act directly upon the real world, their failures can cause severe harm before a human can intervene; safety standards must strengthen as autonomy increases
When autonomous systems fail, consequences do not stop at national borders; a malfunction in one country can disrupt shared infrastructure, supply chains, or public safety elsewhere
Accountability must be engineered before deployment, with permissions, oversight, and audit trails designed in from the start rather than added after an incident
High-impact automated decisions must remain under clear human accountability and be traceable and contestable, as there is no scientific guarantee that autonomous agents will follow their instructions
Several intervenants agreed that AI's erosion of shared reality and information integrity is a systemic safety risk that requires interoperable governance responses, not merely an ethical concern. Gregory argued that trustworthy AI is impossible without a trustworthy information environment and that when people can no longer tell what is real, every other safeguard rests on sand . Demirkoz noted that civil society and democratic frameworks are being damaged by erosion of shared reality and undermining of democratic legitimacy through automated disinformation . France highlighted that the integrity of electoral processes is threatened by AI-enabled disinformation . Latvia described the threat of poisoned training data silently distorting facts and worldviews, with no shared standard for training data origin and no channel to warn others .
AI is eroding the shared sense of reality through synthetic clones, faked conflict scenes, non-consensual sexual imagery, and the liar's dividend where real events are dismissed as AI-generated
Trustworthy AI is impossible without a trustworthy information environment; erosion of information integrity is a systemic safety risk, not merely an ethics issue
Civil society and democratic frameworks are being damaged by erosion of shared reality and undermining of democratic legitimacy through automated disinformation and AI-generated content
AI-generated disinformation threatens the integrity of electoral processes and democratic participation; the multi-stakeholder approach and integration of science are essential responses
Poisoned training data silently distorts facts and worldviews, yet there is no shared standard for training data origin and no channel to warn others
There was broad consensus that multi-stakeholder participation - including governments, industry, civil society, academia, and international organisations - is not optional but essential for the legitimacy and effectiveness of AI governance. Finlay stated explicitly that multi-stakeholder participation is not a nice-to-have but a necessity for the legitimacy of governance efforts . Iida described the Hiroshima AI Process as a bottom-up multi-stakeholder approach . France called for the multi-stakeholder approach as essential for the global AI governance dialogue . Australia expressed support for the UN Global Dialogue as a multi-stakeholder platform . The Global Cities Hub called for local and regional governments to be recognised as a distinct governance actor . The Conference Organizer and Co-Chair structured the session to alternate between member state and stakeholder interventions to promote broad participation .
Multi-stakeholder participation is not a nice-to-have but a necessity for the legitimacy of governance efforts; meaningful participation must include ensuring visa processes allow individuals from global communities to attend
OECD AI Principles and the Hiroshima AI Process as foundational instruments for interoperability, providing a voluntary multi-stakeholder framework for risk assessment, mitigation, and disclosure
AI-generated disinformation threatens the integrity of electoral processes and democratic participation; the multi-stakeholder approach and integration of science are essential responses
The UN Global Dialogue has the potential to bring together the multi-stakeholder community to strengthen the digital ecosystem and contribute to a stable, safe, inclusive, and innovative digital ecosystem for all
Local and regional governments should be recognised as a distinct governance actor and systematically included in discussions on interoperability, as they hold direct responsibilities in sectors where AI impacts are most visible
Interventions from member states and stakeholders should alternate to promote broad participation
The speaker list for interventions must be managed through advance inscription to ensure orderly and broad participation from both member states and other stakeholders
These intervenants shared a view that interoperability requires going beyond high-level principles to develop granular, practical tools for mapping between frameworks. Bogantes Zamora proposed minimal viable interoperability covering shared terminology, comparable risk classifications, consistent documentation, interoperable incident reporting, and multilingual evaluation methods . Singh-Gill identified fragmentation's structural harms and proposed cross-border regulatory sandboxes as practical pathways . Ahmed argued that mapping must go two to three levels deep beyond high-level intent, using the example of 'transparency' meaning different things in ISO versus the EU AI Act , and proposed building a meta-model for controls mapping at the lowest level . Lu called for common risk management principles and sharing evaluation methods and results across borders, noting that benchmarking alone is insufficient for agentic systems . These intervenants shared a strong viewpoint that the current AI governance landscape systematically excludes developing countries from shaping the rules that govern them, and that this must be corrected through inclusive multilateral processes. Demirkoz noted that developing nations face the steepest cost of fragmentation as frontier models and compute are concentrated in just two countries , and that regions in the Global South cannot inspect, audit, or culturally tailor AI models to their own needs . Pakistan argued that safety norms are being set by a small number of states and firms in which most of the world has no voice . Brazil called for the UN to ensure developing countries participate as full co-participants in shaping the rules . South Africa called for frameworks inclusive in design, equitable in application, and supportive of technology transfer . The Center for Responsible AI highlighted that even visa barriers prevent participation from developing countries . These intervenants shared a viewpoint that the current evidence base for AI governance is inadequate — either because it is produced by the companies developing the systems, because benchmarks fail to represent the global majority, or because evaluation focuses on models rather than entire systems. Finlay called for strengthening the independent scientific evidence base and turning individual disclosures into a field-wide evidence base through benchmarks, standards, and third-party evaluation . Buolamwini warned that benchmarks representing less than 5% of the global majority produce pyrite rather than gold standards . Lu called for common risk management principles and sharing evaluation methods across borders, noting that post-deployment evidence from real-world use is essential . Demirkoz identified that governance models are rarely tested independently and when tested, it is by the same companies developing them , and called for shifting from evaluating models to evaluating entire systems . These intervenants shared a viewpoint that agentic AI requires a fundamentally different governance approach — one that is dynamic, built in from the start, and addresses identity, accountability, and cross-border responsibility. Concordia argued that because AI agents can act directly upon the real world, their failures can cause severe harm before a human can intervene, and that safety standards must strengthen as autonomy increases . The Dubai Cable representative argued that once an AI agent is authorised to act, the line between a policy document and a production incident becomes very thin, requiring accountability to be engineered before deployment . Bogantes Zamora argued that agentic AI interoperability must include verifiable agent identity, traceable delegation, machine-readable permissions, and effective revocation . Singh-Gill highlighted the shift from static to dynamic system governance as agentic AI becomes more autonomous . These intervenants shared a viewpoint that practical, evidence-based international cooperation — drawing on existing experience and building on what already works — is the most effective path to AI governance interoperability. Saulo drew on WMO's 150 years of experience in exchanging data across 193 countries through standards and trust, emphasising verification and equitable access as key lessons . Lu proposed both horizontal collaboration through mapping existing tools and standards and vertical collaboration through joint technical work on specific challenges . Malhotra described the UK's AI Security Institute and AI for Development Programme as practical examples of building shared foundations while tailoring AI to local context . Iida described cross-mapping between the HITE and ASEAN frameworks, finding more commonalities than gaps . These intervenants shared a viewpoint that AI's impact on information integrity and shared reality is a systemic governance challenge that must be treated as a safety issue, not merely an ethical concern. Gregory argued that trustworthy AI is impossible without a trustworthy information environment and that the erosion of shared reality is a systemic safety risk . Demirkoz noted that civil society and democratic frameworks are being damaged by erosion of shared reality through automated disinformation . France highlighted that AI-enabled disinformation threatens the integrity of electoral processes . Latvia described the threat of poisoned training data silently distorting facts and worldviews, with no shared standard for training data origin .
It might have been expected that industry representatives would resist strong governance frameworks as obstacles to innovation, but instead there was notable consensus between industry and governance advocates that good governance actually accelerates adoption. The EY Representative argued that good governance is not about compliance but about making sure AI systems operate in the right way, and that this is a shared interest of both business and society . Thambapillai described how the model context protocol - a technical governance standard - went from announcement to global de facto standard in 18 months precisely because it addressed real implementation pain points , and argued that open-source governance standards accelerate both AI benefits and governance frameworks simultaneously . Ahmed, while noting the compliance burden on globally operating companies, proposed practical solutions rather than opposing governance . Finlay argued that transparency does not slow progress but makes it verifiable and credible . Cervera Narvas embraced AI's potential while arguing for proportionate risk-based governance . This convergence between industry and governance advocates on the value of good governance was a notable area of unexpected consensus.
Given the diversity of regulatory traditions, development levels, and geopolitical positions represented, it was somewhat unexpected that government representatives from Costa Rica, the UAE, Brazil, Pakistan, Australia, South Africa, and Ethiopia all converged on the view that interoperability does not require a single regulatory model. Bogantes Zamora proposed minimal viable interoperability as a practical starting point . Al Hameli argued for selective and deliberate compatibility rather than full compatibility . Brazil emphasised that interoperability must not restrict national regulatory autonomy . Pakistan called for safety norms developed through inclusive multilateral processes . Australia argued a one-size-fits-all approach will not be effective . South Africa called for frameworks inclusive in design and equitable in application . Ethiopia stressed that interoperability does not mean a single global AI law . This convergence across very different national contexts on a nuanced middle ground between harmonisation and fragmentation was notable.
It was somewhat unexpected to find strong convergence between scientific panel members and industry practitioners on the inadequacy of current evaluation methods. Demirkoz, speaking from the UN AI panel, noted that governance models are rarely tested independently and when tested, it is by the same companies developing them . Buolamwini, from an academic and civil society perspective, warned that benchmarks representing less than 5% of the global majority produce pyrite rather than gold standards . Ahmed, from an industry perspective at Infosys, described the failure of AI-based mapping attempts and the need for granular controls mapping . Thambapillai, as a CEO of an AI company, acknowledged that the model context protocol was not designed with the right authorisation frameworks from day one and that retrofitting was necessary . Lu, from a research perspective, called for post-deployment evidence from real-world use beyond benchmarking . This convergence across scientific, academic, civil society, and industry voices on the inadequacy of current evaluation methods was a notable area of unexpected consensus.
It was somewhat unexpected that intervenants from civil society (Witness), the UN scientific panel, a national government (France), a small EU member state (Latvia), and the International AI Safety Rapport all converged on framing information integrity as a systemic safety risk rather than merely an ethical concern. Gregory argued explicitly that the erosion of information integrity is a systemic safety risk, not just an ethics issue, and that when people can no longer tell what is real, every other safeguard rests on sand . Demirkoz noted that civil society and democratic frameworks are being damaged by erosion of shared reality . France highlighted the threat to electoral integrity . Latvia described the concrete threat of poisoned training data with no shared standard for data origin . The International AI Safety Rapport Lead Writer described deepfakes and AI-assisted cyber attacks as evidence that harms cannot be reliably prevented . This convergence on treating information integrity as a safety issue - rather than a separate ethical or political concern - was a notable area of unexpected consensus.
The discussion revealed a remarkably high level of consensus across a diverse range of intervenants — including government representatives from developed and developing countries, industry practitioners, civil society organisations, international organisations, and scientific panel members — on several core principles. The most fundamental area of agreement was that interoperability, not harmonisation, is the appropriate goal for AI governance: different national frameworks should be enabled to communicate and work together without requiring uniformity. There was also strong consensus that the Global South and developing countries bear disproportionate costs from AI governance fragmentation and must be co-shapers of governance frameworks rather than rule-takers. A shared, independent scientific evidence base was widely recognised as essential, with multiple intervenants noting that current evaluation methods are inadequate, biased towards powerful jurisdictions, and often produced by the companies developing the systems. Human oversight and accountability built into AI systems by design — not retrofitted after incidents — was another area of near-universal agreement. Linguistic and cultural diversity in AI evaluation frameworks was identified as both a safety and equity imperative. Agentic AI was recognised as a new and urgent governance frontier requiring specific frameworks. Information integrity was framed as a systemic safety risk rather than merely an ethical concern. The importance of building on existing frameworks rather than creating new ones from scratch was broadly shared. Multi-stakeholder participation was consistently described as essential for legitimacy. Practical, granular implementation tools — going beyond high-level principles — were identified as the priority need.
Syed Ahmed explicitly disagreed with the premise that AI governance should be built into AI use cases from the start, arguing instead for a separation of governance from use cases with a central repository of policies applied at runtime . He reasoned that because governance has become dynamic and rules cannot be assumed to hold even one month later , embedding governance at the start of use case development is impractical. By contrast, Amandeep Singh-Gill emphasised that effective governance needs to be adaptive and anticipatory with mechanisms such as living risk taxonomies and staged deployment , implying governance must be integrated throughout the lifecycle rather than separated. Paula Bogantes Zamora argued that trustworthy AI requires independent evaluation throughout the entire system lifecycle , suggesting continuous integration rather than separation. The Lithuania Delegate argued that the human-in-the-loop principle requiring human oversight at critical decision points must be preserved throughout , implying governance cannot simply be a separate runtime layer but must be embedded in design.
Separation of AI governance from AI use cases is necessary because governance must be dynamic and cannot be static
Governance must evolve from static model oversight to dynamic system governance as agentic AI systems become more autonomous, tool-using, and multi-step
Trustworthy AI requires human oversight, transparency, accountability, and independent evaluation throughout the entire system lifecycle
The human-in-the-loop principle must be preserved as a prerequisite for safe and responsible innovation, not treated as an obstacle
Nouf Al Hameli argued that full compatibility does not need to be the goal and proposed working on 'selective and deliberate compatibility of the components that matter the most for most nations' , warning that pushing too hard on one standard risks a lowest common denominator outcome that could cost the innovation system . Leonardo Cervera Narvas, by contrast, used the civil aviation analogy to argue that the same basic safety and ethical rules should apply everywhere in the world regardless of jurisdiction , implying a much higher degree of universal standardisation. The Mexican Society for Artificial Intelligence representative called for legally binding minimum mandatory standards that are 'truly applicable in all countries across all regions' , suggesting a more comprehensive and binding approach than Al Hameli's selective compatibility. Paula Bogantes Zamora proposed a middle ground of 'minimal viable interoperability' focused on specific practical elements before 2027 , which is more ambitious than Al Hameli's selective approach but less prescriptive than the Mexican representative's call for legally binding universal standards.
Selective and deliberate compatibility of the most critical components is a more realistic goal than full compatibility
The higher the risk, the higher the care and supervision required; AI must always be used with care and never left unsupervised, analogous to the rules governing fire
The Mexican Society for Artificial Intelligence emphasises that a new international instrument must prioritise interoperability with legally binding minimum mandatory standards truly applicable across all countries and regions
A practical starting point of minimal viable interoperability should advance shared terminology, comparable risk classifications, consistent documentation, interoperable incident reporting, and multilingual evaluation methods before 2027
Yoichi Iida championed the OECD AI Principles and Hiroshima AI Process as foundational instruments for interoperability, describing them as a 'voluntary framework' for organisations to assess and mitigate risks and a 'bottom-up approach for the governance' . The Mexican Society for Artificial Intelligence representative directly called for 'legally binded rules that establishes the minimum mandatory standards that are truly applicable in all countries across all regions' , explicitly rejecting the sufficiency of voluntary approaches. The Bangladesh Delegate called for 'a comprehensive governance framework should combine binding legal obligations with ethical standards' , supporting a hybrid approach. The Pakistan Delegate, while calling for inclusive multilateral processes, emphasised that interoperability 'must be a bridge between systems, not a mechanism through which the rules of a few become binding on the many' , expressing concern about binding standards that could entrench existing power imbalances.
OECD AI Principles and the Hiroshima AI Process as foundational instruments for interoperability, providing a voluntary multi-stakeholder framework for risk assessment, mitigation, and disclosure
The Mexican Society for Artificial Intelligence emphasises that a new international instrument must prioritise interoperability with legally binding minimum mandatory standards truly applicable across all countries and regions
AI governance must be risk-based and innovation-friendly, including regulatory sandboxes to enable innovators in developing countries to build trustworthy AI without undue regulatory hurdles
Safety norms are being set by a small number of states and firms through processes in which most of the world has no voice; safety is contextual and shaped by language, culture, and local realities
Yoichi Iida and the Japan Delegate strongly promoted the Hiroshima AI Process and OECD AI Principles as foundational instruments and best practices , noting that approximately 70 countries including the Global South have endorsed these principles . However, the Pakistan Delegate directly challenged this framing, arguing that 'too often, the standards and benchmarks for trustworthy AI are being set by a small number of states and firms through national safety institutes and frameworks in which most of the world has no voice' , and called for safety norms to be developed through inclusive multilateral processes under the United Nations . The Brazil Representative similarly argued that the UN has a central role in ensuring developing countries participate 'not merely as rule-takers but as full co-participants in shaping the rules of AI governance' . Paula Bogantes Zamora's data that 118 countries are not meaningfully engaged in principal international AI governance discussions implicitly challenges the claim that existing processes like the Hiroshima Process are sufficiently inclusive.
OECD AI Principles and the Hiroshima AI Process as foundational instruments for interoperability, providing a voluntary multi-stakeholder framework for risk assessment, mitigation, and disclosure
Japan's Hiroshima AI Process, with approximately 70 countries including the Global South as Friends Group members, represents an inclusive international governance effort and a best practice for this dialogue
Safety norms are being set by a small number of states and firms through processes in which most of the world has no voice; safety is contextual and shaped by language, culture, and local realities
The UN has a central role in helping avoid fragmentation, identifying convergence, and ensuring developing countries participate as co-shapers of rules
118 countries, mainly from the Global South, are not meaningfully engaged in principal international AI governance discussions
Melahat Bilge Demirkoz argued explicitly that evaluation should 'shift from evaluating just models to evaluating systems' and that the approach should look at 'the interoperability not just of models but also of tools of the environment of users' . Qinghua Lu similarly argued that benchmarking alone is insufficient, particularly for agentic systems that receive human instructions at runtime , and that post-deployment evidence from real-world use is essential . However, Syed Ahmed's focus was primarily on the compliance and controls mapping layer, arguing for a meta-model for controls mapping at the lowest level , which implicitly centres on model-level and regulatory compliance rather than the broader system-level evaluation Demirkoz and Lu advocated. These represent different emphases on what the primary object of evaluation should be, with Demirkoz and Lu pushing for a broader systems view while Ahmed focused on the regulatory compliance mapping challenge.
Evaluation frameworks must shift from evaluating models alone to evaluating entire systems, including tools, environments, and users
Countries need to agree on common risk management principles and share evaluation methods and results across borders, including post-deployment evidence from real-world use
Common definitions and granular mapping between legal requirements, technical controls, and compliance evidence are essential; mapping must go two to three levels deep beyond high-level intent
This disagreement was unexpected because the session's framing strongly implied that governance should be embedded from the start. Virginia Dignum opened the panel by framing AI as 'a set of choices, technical, institutional and political' and asking what happens if interoperability is 'treated as an afterthought' , clearly implying that early integration is preferable. Paula Bogantes Zamora argued for evaluation throughout the entire system lifecycle , and the Lithuania Delegate argued the human-in-the-loop principle must be preserved at critical decision points . Against this consensus, Syed Ahmed explicitly stated 'I kind of disagree on that' regarding building governance into AI use cases from the start, arguing instead for separation and runtime application of policies . This was unexpected because it challenged a premise that most other intervenants appeared to take for granted, and came from an industry practitioner with direct implementation experience, lending it practical weight that made it a substantive rather than merely theoretical disagreement.
This disagreement was unexpected in the context of a UN dialogue that was ostensibly designed to be inclusive. Japan and France actively promoted the Hiroshima AI Process as a model of inclusive governance, with Japan noting that approximately 70 countries including the Global South have endorsed its principles and France highlighting that 56 enterprises signed up to its principles . However, Pakistan directly challenged this framing by arguing that safety standards are being set by 'a small number of states and firms' through processes where 'most of the world has no voice' . Paula Bogantes Zamora's data that 118 countries are not meaningfully engaged in principal international AI governance discussions implicitly contradicted Japan's claim of inclusivity. The tension between G7-led processes presenting themselves as inclusive and developing country representatives questioning that inclusivity was more pointed than might have been expected in a consensus-oriented UN dialogue setting.
Sam Gregory made an unexpected and forceful argument that information integrity must be treated as a systemic safety risk and a core focus for interoperability, not merely an ethics issue . He argued that 'trustworthy AI is impossible without a trustworthy information environment' and that 'when people can no longer tell what is real every other safeguard we build rests on sand' . Melahat Bilge Demirkoz supported this by noting that 'civil society and democracies, democratic frameworks, are also being damaged' by erosion of shared reality . France raised the threat to electoral integrity . However, the main panel discussions and the co-chairs' summaries treated information integrity as one concern among many rather than as a foundational prerequisite for all other governance efforts. Rebecca Finlay's summary did not elevate information integrity to the same foundational status that Gregory argued for, instead treating it as one of several interoperability concerns . This created an implicit disagreement about the relative priority and framing of information integrity within the broader AI governance agenda.
The Global Cities Hub representative made an unexpected argument that cities and regions represent 'a still-missing governance layer' and should be recognised as 'a distinct governance actor alongside national governments, industry, academia, and civil society' . This challenged the implicit framing of the entire session, which consistently discussed AI governance in terms of national governments, international organisations, industry, academia, and civil society, without explicitly including sub-national governments as a distinct category. While Rebecca Finlay emphasised multi-stakeholder participation and Amandeep Singh-Gill described the dialogue as 'horizontal facilitation' , neither they nor the co-chairs explicitly addressed the sub-national governance layer. The Global Cities Hub's argument that AI impacts 'are experienced first and most visibly in cities by two-thirds of the global population' and that local governments hold direct responsibilities in affected sectors was not contested but also not incorporated into the co-chairs' summaries, creating an implicit disagreement about the scope of the multi-stakeholder model.
The discussion revealed a moderate level of substantive disagreement beneath a surface consensus on broad principles. All intervenants agreed that AI governance interoperability is necessary, that full harmonisation is neither realistic nor desirable, that developing countries are disproportionately affected by current governance fragmentation, and that an independent scientific evidence base is urgently needed. However, significant disagreements emerged on: (1) the degree of compatibility required, ranging from selective voluntary compatibility to legally binding universal minimum standards ; (2) whether governance should be embedded in AI systems from the start or applied dynamically at runtime ; (3) whether existing G7 and OECD-led processes are sufficiently inclusive to serve as foundations for global governance versus Japan and France's promotion of the Hiroshima Process as a best practice ; (4) whether information integrity should be treated as a foundational prerequisite for all AI governance or as one concern among many ; and (5) whether sub-national governments should be recognised as a distinct governance actor . The most pointed disagreements were between developed country representatives promoting existing frameworks as inclusive and developing country representatives questioning whether those frameworks genuinely represent the global majority .
All intervenants agreed that full harmonisation of AI governance is neither realistic nor desirable, and that interoperability rather than uniformity should be the goal . The facilitator used the electrical systems analogy to argue that adapters and common standards rather than uniform systems are the model . Paula Bogantes Zamora stated that 'interoperability must not mean regulatory uniformity' . Brazil stated that 'interoperability must not be confused with regulatory uniformity' . Australia argued that 'a one-size-fits-all approach to AI governance will not be effective' . The EY Representative noted that 'different countries have different ways of operating' and that 'interoperability does not require' all countries to approach regulation in exactly the same way . However, intervenants diverged significantly on how much compatibility is needed and through what mechanisms, with some calling for legally binding minimum standards and others for selective voluntary compatibility .
Interoperability as essential alternative to harmonisation - AI governance need not be uniform, but different national frameworks must be able to communicate and work together across borders Interoperability as a practical implementation challenge - the real challenge is not whether frameworks can coexist on paper, but whether safety, accountability, and trust can be demonstrated across borders Selective and deliberate compatibility of the most critical components is a more realistic goal than full compatibility The UN has a central role in helping avoid fragmentation, identifying convergence, and ensuring developing countries participate as co-shapers of rules Existing international frameworks and regional initiatives should be built upon rather than creating new frameworks from scratch, as a one-size-fits-all approach will not be effective Good governance as the foundation for interoperability - interoperability can live at the implementation stage and should be rooted in ensuring AI functionally delivers what is needed, not merely compliance
These intervenants agreed that existing frameworks should be built upon rather than replaced, and that the task is to make them interoperable. Yoichi Iida pointed to the OECD AI Principles and Hiroshima Process as foundational . Australia called for building on existing international work rather than creating frameworks from scratch . Sam Gregory called for convergence around existing human rights conventions, the Hiroshima Process, and the EU AI Act . Rebecca Finlay argued that a shared minimum baseline already exists through global commitments, international law, and existing dialogue processes . France highlighted the Hiroshima Process and the 56 enterprises that signed up to its principles . However, they disagreed on which existing frameworks should be prioritised and whether they are sufficiently inclusive, with Pakistan and Brazil questioning whether OECD and G7-led processes adequately represent the global majority .
OECD AI Principles and the Hiroshima AI Process as foundational instruments for interoperability, providing a voluntary multi-stakeholder framework for risk assessment, mitigation, and disclosure Existing international frameworks and regional initiatives should be built upon rather than creating new frameworks from scratch, as a one-size-fits-all approach will not be effective Existing frameworks including the Council of Europe Convention, Hiroshima Process, EU AI Act, and UN bodies should be anchored and made genuinely interoperable A shared minimum baseline building on existing global frameworks, international law, and existing dialogue commitments must be consolidated, shared, and made implementable and adaptable to regional contexts AI-generated disinformation threatens the integrity of electoral processes and democratic participation; the multi-stakeholder approach and integration of science are essential responses
All these intervenants agreed that developing countries and the Global South are disproportionately affected by current AI governance fragmentation and concentration. Paula Bogantes Zamora cited data showing the US holds 75% of computing power and 118 countries are not meaningfully engaged in governance discussions . Melahat Bilge Demirkoz stated that 'developing nations face the steepest cost of this fragmentation as frontier models are based and compute is concentrated in just two countries' . Pakistan argued that safety is being defined by a small number of states and firms without the world's voice . South Africa called for frameworks inclusive in design and equitable in application . However, they diverged on solutions: some called for new UN-led processes , others for capacity building within existing frameworks , and others for technology transfer and infrastructure investment .
Concentration of AI infrastructure leads to concentration of evidence and influence over which risks are measured and which benchmarks are accepted Developing nations face the steepest costs of fragmentation as frontier models and compute are concentrated in just two countries Safety norms are being set by a small number of states and firms through processes in which most of the world has no voice; safety is contextual and shaped by language, culture, and local realities Governance frameworks must be inclusive in design, equitable in application, and supportive of technology transfer and capacity building Interoperability must not simply export assumptions, risks, and priorities from powerful jurisdictions but must allow for different national contexts and priorities AI governance must be risk-based and innovation-friendly, including regulatory sandboxes to enable innovators in developing countries to build trustworthy AI without undue regulatory hurdles
All these intervenants agreed on the urgent need for a stronger, more independent scientific evidence base for AI governance. Rebecca Finlay called for strengthening the independent scientific evidence base and turning individual disclosures into a field-wide evidence base . Melahat Bilge Demirkoz identified the 'evidence dilemma' where scientific evidence cannot keep pace with AI's rapid progress and governance models are tested by the same companies developing them . Qinghua Lu argued for common methods and shared results across borders . The International AI Safety Rapport lead writer argued that frontier risks cannot be dismissed as speculative . Joy Buolamwini warned against misleading measures of success where benchmarks represent less than 5% of the global majority . However, they diverged on the specific mechanisms: Finlay focused on disclosure and third-party evaluation , Lu on horizontal and vertical collaboration frameworks , and Buolamwini on ensuring demographic representation in benchmarks .
An independent evidence base must be strengthened, disclosure from private companies must be improved, and individual disclosures must be turned into a field-wide evidence base through benchmarks, standards, and third-party evaluation Robust scientific evidence cannot keep pace with AI's rapid progress, and governance models are tested, if at all, by the same companies developing the systems Countries need to agree on common risk management principles and share evaluation methods and results across borders, including post-deployment evidence from real-world use Frontier AI risks, including misuse, malfunctions, and systemic societal impact, cannot be dismissed as speculative and cannot be deferred indefinitely Misleading measures of success must be avoided; benchmarks that represent less than 5% of the global majority produce pyrite standards, not gold standards
These intervenants agreed on the critical importance of shared incident reporting mechanisms as a foundation for interoperability. Nouf Al Hameli identified the absence of shared incident reporting infrastructure as a critical gap, noting there is no legal duty to report and no recognition between incident monitors . Paula Bogantes Zamora included interoperable incident reporting as one of the five elements of minimal viable interoperability to be advanced before 2027 . The Center for Responsible AI called for a structured AI incident reporting framework democratised at the grassroots level . Qinghua Lu argued for sharing evaluation results and post-deployment evidence across countries . However, they disagreed on the nature of the reporting obligation: Al Hameli noted the current absence of a legal duty to report , the Center for Responsible AI called for democratised grassroots reporting , while Bogantes Zamora framed it as a practical interoperability element without specifying whether it should be mandatory .
Shared incident reporting mechanisms can ensure that lessons from failures in one jurisdiction prevent repeated harms elsewhere; currently there is no legal duty to report or recognition between incident monitors A practical starting point of minimal viable interoperability should advance shared terminology, comparable risk classifications, consistent documentation, interoperable incident reporting, and multilingual evaluation methods before 2027 A structured AI incident reporting framework must be democratised at the grassroots level, establish shared responsibilities throughout the AI value chain, and enable proactive learning-oriented governance Countries need to agree on common risk management principles and share evaluation methods and results across borders, including post-deployment evidence from real-world use
- Interoperability, not harmonisation, is the essential goal for AI governance: different national frameworks need not be identical, but must be able to communicate, share evidence, and work together across borders without imposing a single regulatory model.
- Global fragmentation of AI governance creates regulatory arbitrage, accountability gaps, increased compliance burdens, and deepens uneven governance capacity, disproportionately harming countries with limited institutional resources.
- A practical starting point of 'minimal viable interoperability' should advance shared terminology, comparable risk classifications, consistent documentation, interoperable incident reporting, and multilingual evaluation methods, with pathways towards mutual recognition of testing, auditing, and certification.
- The concentration of AI infrastructure and compute in a very small number of countries (primarily the US and China) also concentrates influence over which risks are measured, which benchmarks are accepted, and which institutions are recognised as capable of certifying safety, leaving 118 countries — mainly from the Global South — largely excluded from principal governance discussions.
- Safety frameworks are too often developed without sufficient independent evidence; the scientific panel and the global dialogue are complementary parts of a shared mission, with the panel providing evidence and the dialogue providing direction.
- Governance must evolve from static model oversight to dynamic system governance, particularly as agentic AI systems become more autonomous, tool-using, and capable of multi-step action across borders, requiring verifiable agent identity, traceable delegation, auditable actions, and effective revocation.
- Evaluation frameworks must reflect linguistic, cultural, and demographic diversity; the gap between dominant and underrepresented languages in AI models is widening, and benchmarks that represent less than 5% of the global majority produce misleading standards.
- Information integrity is a systemic safety risk, not merely an ethics issue: AI-generated disinformation, deepfakes, non-consensual imagery, and poisoned training data erode shared reality and democratic legitimacy, requiring interoperable authenticity and content provenance infrastructure grounded in privacy and human rights.
- Trustworthy AI requires human oversight, transparency, accountability, and independent third-party evaluation throughout the entire system lifecycle; the human-in-the-loop principle must be preserved as a prerequisite for safe innovation, not treated as an obstacle.
- Multi-stakeholder participation — including governments, industry, civil society, academia, local and regional governments, and communities from the Global South — is a necessity for the legitimacy and effectiveness of AI governance, not a procedural nicety.
- Open-source technical standards oriented around real-world implementation pain points can achieve rapid global adoption and simultaneously raise governance standards, as demonstrated by the model context protocol.
- Capacity building — including the ability to test, evaluate, and assure AI systems — must be treated as integral to safety itself; countries cannot be asked to trust safety assurances they have no means to verify.
“The world does not need more AI principles. It needs a common way to prove they're being implemented. That is the real interoperability challenge before us. Not whether frameworks can coexist on paper, but whether safety, accountability, and trust can be demonstrated across borders.”
“Concentration of infrastructure becomes concentration of evidence. The countries and companies with the greatest computing capacity also have greater influence over which risks are measured, which benchmarks are accepted, which languages are evaluated, and which institutions are recognised as capable of certifying safety.”
“Adoption moves at the speed of trust. That insight goes to the heart of today's discussion. Trust cannot be declared through principles alone. It must be built through evidence, safeguards, institutional cooperation, and governance frameworks that can operate across borders.”
“Instead of how fast can we deploy this, let's ask who does it serve, who is accountable when it fails, and how do we know? Instead of how powerful is this system, let's ask how verifiable is this system's safety and against what evidence?”
“We tried, being an AI company, we tried solving this using AI. We thought it's very easy. We'll build an AI model to build an adapter where it can map it. It was not easy... Even if the intent, largely, is the same [across frameworks], it is not one-to-one mapping. We need to go 2-3 steps down and be able to map each of the controls that are required.”
“If there is one defining narrative for this year, it is the rise of agentic AI... Because AI agents can act directly upon the real world, virtually and increasingly in the physical world, their failures can potentially cause severe harm before a human can even intervene.”
“Prompted to competition, where be the guardrails now?... Are we not transcendent beings bound in transient form? Can this power be guided with care, augmenting delight alongside economic destitution? Temporary Band-Aids cannot hold the wind when the task ahead is to transform the atmosphere of innovation.”
“One thing that we wanted to emphasise in our report was that when we are looking at systems, we shouldn't just be looking at the models but we should have a more approach that looks at the interoperability not just of models but also of tools, of the environment, of users — so we should shift from evaluating just models to evaluating systems.”
“There is no shared incident reporting infrastructure. So you'll have different incident monitors tracking failures independently and voluntarily, but there's no legal duty to report or to recognise or any recognition between them. So if a safety failure occurs in one country, there is no guaranteed path for that lesson to reach regulators elsewhere before the same failure recurs somewhere else.”
“The very fact that I have to present and not Geeta again demonstrates the difficulty of people from the third world having access to forums such as these. She could not get a visa at such short notice that was given to her to come in. So it is a challenge for even people from the third world to participate in these discussions.”
How can shared terminology and risk classification systems be developed that are genuinely interoperable across different national and regional frameworks, given that even common concepts like 'transparency' mean different things in different regulatory contexts?
Syed Ahmed demonstrated through practical AI-mapping attempts that high-level concepts diverge significantly at the implementation level (e.g., 'transparency' in ISO means explainability, while in the EU AI Act it means audit logs). Without resolving this semantic fragmentation, building effective governance adapters is impossible. Paula Bogantes Zamora also called for shared terminology as a foundational element of 'minimal viable interoperability'.
What mechanisms can ensure that safety failures or AI incidents reported in one jurisdiction are systematically shared with regulators in other jurisdictions before the same failure recurs elsewhere?
Nouf Al Hameli noted there is no shared incident reporting infrastructure and no legal duty to report across borders, meaning lessons from failures do not travel. The Center for Responsible AI similarly called for democratised, structured AI incident reporting. This gap means preventable harms are repeated globally.
How should AI governance frameworks be redesigned to shift from static model oversight to dynamic system governance capable of keeping pace with rapidly evolving agentic AI systems?
Amandeep Singh-Gill highlighted that current governance practices are still being adapted to systems whose behaviour changes over time, and that agentic AI outpaces existing frameworks. Qinghua Lu reinforced that benchmarking alone is insufficient for agentic systems that receive runtime instructions. This is a foundational research gap for future governance design.
How can verifiable agent identity, traceable delegation, machine-readable permissions, and effective revocation be standardised across borders for agentic AI systems acting on behalf of people or institutions?
As agentic AI systems operate across multiple platforms and jurisdictions, there are no agreed standards for who authorised an agent to act, what it is permitted to do, and how accountability is traced. Estonia's Arawite initiative was cited as an emerging example, but the broader international framework remains undeveloped.
What practical steps can be taken to ensure that the 118 countries, mainly from the Global South, that are not meaningfully engaged in principal international AI governance discussions become genuine co-shapers of global AI norms rather than rule-takers?
Multiple intervenants highlighted that governance standards are being set by a small number of states and firms, with most of the world absent. This creates standards that are exported rather than shared, and risks deepening existing inequalities. Concrete mechanisms for inclusive participation remain underspecified.
How can AI evaluation benchmarks and safety standards be designed to adequately represent the global majority, including communities with dark skin tones, intervenants of underrepresented languages, and populations in the Global South?
Joy Buolamwini demonstrated that gold-standard benchmarks have historically represented less than 5% of the global majority, creating misleading measures of progress. Latvia noted that gaps between dominant and underrepresented languages in AI models are widening. Without representative benchmarks, safety claims cannot be trusted globally.
How can multilingual AI evaluation frameworks be developed that cover indigenous, Creole, and low-resource languages, and how should these be integrated into global safety assessment processes?
AI models often perform less safely in languages with limited digital data. Paula Bogantes Zamora specifically named Spanish variants, Portuguese, indigenous, and Creole languages. Latvia noted that the gap between dominant and underrepresented languages is widening, not narrowing. The UK's work on 40 African languages was cited as a positive example, but a systematic global framework is absent.
What scientific methods are needed to determine what post-deployment evidence should be collected from real-world AI use, how it should be collected while protecting commercial confidentiality and privacy, and how it can be aggregated and analysed across borders?
Qinghua Lu identified that benchmark scores are insufficient for agentic systems and that system-level post-deployment evidence is more informative, but the scientific methods for collecting, protecting, and aggregating such evidence internationally remain underdeveloped. This is a critical gap for evidence-based governance.
How can cross-border regulatory sandboxes be established to enable joint testing, model evaluation, and evidence sharing across different regulatory environments before AI systems are widely deployed?
Amandeep Singh-Gill proposed connecting regulatory sandboxes across jurisdictions as a practical pathway to interoperability. Latvia also mentioned sandboxes as a mechanism to validate high-risk AI systems. The practical design, legal basis, and governance of such cross-border sandboxes requires further research and negotiation.
How can domestic sectoral fragmentation within countries—where AI in banking may be rigorously regulated while equivalent risks in other sectors go unaddressed due to the absence of a pre-existing regulatory owner—be systematically resolved?
Nouf Al Hameli identified that within-country sectoral fragmentation is arguably more immediately fixable than cross-border fragmentation, yet receives less attention. The UAE's experience of consolidating three separate federal mandates was cited as a case study. A framework for addressing this domestic gap could inform international approaches.
How can the governance of multi-agent AI systems—where multiple autonomous agents interact across platforms and jurisdictions—be developed, given that this remains an open research question even among leading safety experts?
The Concordia AI representative noted that while some principles for agentic AI (e.g., minimum privilege, traceable agent identity) have workable tools, the governance of multi-agent systems remains an open research question. As these systems proliferate, the absence of agreed frameworks creates significant safety risks.
What independent, third-party evaluation infrastructure needs to be built globally so that developing countries can assess and verify the safety of AI systems they depend on but did not build?
Pakistan argued that a nation cannot trust what it cannot assess, yet the ability to test and evaluate AI systems remains concentrated where the technology is built. France also called for independent evaluation of AI models before rollout. Without this infrastructure, developing countries must accept safety assurances they cannot verify.
How can content authenticity infrastructure and provenance standards (such as C2PA) be designed to be genuinely interoperable across jurisdictions while ensuring they do not become surveillance infrastructure that undermines privacy and human rights?
Sam Gregory called for interoperable authenticity infrastructure grounded in privacy and human rights, warning that such standards could be repurposed for surveillance. The tension between content provenance for information integrity and privacy protection requires careful technical and legal research.
How can AI detection capabilities for synthetic and deceptive content be improved so that they work effectively for populations in the global majority, where current detection tools perform least well?
Witness's benchmark data showed that AI detection tools for deepfakes and synthetic content work least well for those most at risk, particularly in the global majority. This represents both a technical research gap and a governance equity issue, as the populations most vulnerable to disinformation have the least protection.
How should AI governance frameworks account for the energy and water demands of AI infrastructure, and how should these environmental considerations be integrated into interoperability discussions and linked to forums such as COP31 and the 2026 UN Water Summit?
The UN Resident Coordinator representative raised AI's growing demands for energy and water as a cross-cutting issue that should inform governance discussions. This environmental dimension is largely absent from current AI governance frameworks and requires interdisciplinary research connecting AI policy with climate and resource governance.
What role should local and regional governments play as a distinct governance layer in AI interoperability frameworks, and how can their operational knowledge of AI impacts on communities be systematically incorporated into the global evidence base?
The Global Cities Hub argued that cities and regions are a missing governance layer, holding direct responsibilities in sectors where AI is already transforming societies (healthcare, education, mobility). Their exclusion from global interoperability discussions means that ground-level implementation evidence is not feeding back into policy design.
How can the long-term macroeconomic impacts of AI on labour markets, productivity, and economic inequality be measured with sufficient rigour to enable proactive, evidence-based economic policy?
The AI Panel's report found a critical gap in consistent, complete data on how AI is affecting economic outcomes, particularly regarding labour market displacement trajectories and long-term macroeconomic growth. Without this evidence base, governments cannot design proactive policies to manage AI-driven economic transformation.
How can the risks of AI to information integrity, democratic processes, and shared reality—including AI-generated disinformation, deepfake-enabled violence, and sycophantic chatbot behaviours—be addressed through interoperable governance frameworks rather than being treated as secondary to technical safety concerns?
Multiple intervenants argued that information integrity is a systemic safety risk, not merely an ethics issue, yet it is often treated as secondary in technical governance discussions. The AI Panel documented erosion of shared reality and democratic legitimacy. The International AI Safety Rapport noted that sycophantic AI behaviours and deepfakes already cause real harm that current frameworks cannot reliably prevent.
How can a shared, granular meta-model or knowledge graph be built that maps AI governance controls at the lowest level of specificity across different regulatory frameworks, enabling genuine technical interoperability rather than superficial high-level alignment?
Syed Ahmed reported that even AI-assisted mapping of governance frameworks fails at the high level because controls that appear equivalent (e.g., 'transparency') diverge significantly in their specific requirements. Building a foundational knowledge graph of controls is identified as the necessary precondition for any effective interoperability adapter, but this work has not yet been done.
How can the continuity of AI governance work be maintained between international dialogues and summits, so that progress is not lost and efforts do not restart from scratch each time?
Rebecca Finlay explicitly identified the lack of continuity between dialogues as a critical structural problem. Without mechanisms to sustain momentum, consolidate commitments, and track progress between events, the cumulative impact of international AI governance efforts is significantly diminished.
How can visa and access barriers that prevent researchers and civil society representatives from developing countries from participating in international AI governance forums be systematically addressed?
The Center for Responsible AI representative noted that their colleague could not attend due to short-notice visa denial, illustrating a structural barrier to inclusive participation. This is not merely a logistical issue but a governance equity problem: if those most affected by AI harms cannot participate in shaping governance, the resulting frameworks will be less legitimate and less effective.
How can AI systems deployed in safety-critical sectors such as healthcare, judicial systems, and public administration be responsibly transferred, evaluated, and scaled across jurisdictions that use incompatible definitions of risk, documentation requirements, and audit results?
Paula Bogantes Zamora highlighted that incompatible definitions and documentation requirements make it practically impossible to responsibly transfer or scale high-stakes AI systems across borders. This is an immediate operational problem for governments and international organisations deploying AI in sensitive domains.
What scientific methods and governance mechanisms are needed to address the risks of AI misuse for bioweapons and other severe attacks, given that AI systems are becoming useful expert advisors that may lower barriers for bad actors?
The International AI Safety Rapport lead writer identified misuse for severe attacks, including potentially bioweapons, as a frontier risk that cannot be dismissed as speculative. Current risk management methods for anticipating and mitigating these harms remain nascent, and the report called for urgent attention to domains beyond cybersecurity.
How can the principle of 'policy as code'—separating AI governance from AI use-case development and applying governance rules dynamically at runtime—be operationalised in a way that is compatible across different national regulatory environments?
Syed Ahmed argued that because AI governance is now dynamic rather than static, governance rules cannot be baked into use-case development but must be applied as executable code at runtime from a central repository. The technical and legal architecture for doing this in a way that is interoperable across jurisdictions has not been developed.
How can the lessons from WMO's 150-year experience of building trusted, interoperable data exchange systems across 193 countries—including verification mechanisms, common standards, and equitable access—be systematically applied to AI governance?
Celeste Saulo offered WMO as a concrete institutional model for building trust through verification, standards, and data sharing across diverse national contexts. A systematic study of how WMO's governance architecture could be adapted for AI evidence sharing and evaluation would provide a practical blueprint for international AI governance infrastructure.
How can AI harm reporting frameworks be designed to include the demographics and lived experiences of people who are harmed, so that the architecture for remedying harm is built into the system from the outset rather than reconstructed after the fact?
Joy Buolamwini argued that current incident reporting focuses on the model and the failure but omits the person harmed and their demographic context. Without this information, it is impossible to design effective remedies or identify patterns of discriminatory harm. This represents a fundamental design gap in current AI governance frameworks.