High-level multi-stakeholder plenary segment: Harnessing the benefits of AI for all through inclusive and interoperable approaches - part 2
Résumé
La session a porté sur la manière de transformer la gouvernance de l'IA, en passant de grands principes à des systèmes pratiques et inclusifs, grâce à la collaboration entre gouvernements, industrie, monde académique, société civile et organisations internationales . Whitney Baird a cadré la session autour de l'idée que toutes les personnes concernées par les promesses et les risques de l'IA doivent être associées aux discussions sur sa gouvernance . Bosun Tijani a affirmé que les gouvernements doivent aller au-delà des principes pour mettre en place des systèmes de gouvernance opérationnels, car l'IA remodèle déjà les secteurs et les activités économiques . Il a indiqué que les pays ont besoin de stratégies nationales claires pour l'adoption et la mesure de l'IA, d'une capacité renforcée du secteur public et d'institutions fiables. Il a également souligné la nécessité d'investissements accrus dans les infrastructures, la puissance de calcul et les talents . Selon Tijani, la faiblesse de la connectivité et des infrastructures limite à la fois l'utilisation de l'IA et la capacité à la gouverner efficacement, en particulier dans les pays à faible capacité d'absorption . Tshilidzi Marwala a identifié le principal écart de mise en œuvre comme étant l'« arbitrage réglementaire en matière d'IA », où des règles fragmentées et non coordonnées entre les organisations internationales, l'industrie et les États permettent à certains acteurs d'exploiter les juridictions les plus faibles . Il a appelé à une harmonisation, à une éducation généralisée sur les données, les algorithmes, l'informatique et les normes, à une meilleure formation des législateurs, ainsi qu'à un renforcement de la coordination entre institutions au niveau opérationnel . Rumman Chowdhury a également souligné que la participation effective dépend du capital humain et de l'évaluation, faisant valoir que les pays ont besoin d'organismes d'évaluation indépendants, de normes ancrées dans les réalités régionales et de règles de passation de marchés publics liant les contrats publics à des exigences d'évaluation . Chowdhury a indiqué que cela permettrait aux pays de passer d'une réception passive des systèmes d'IA à une participation à la définition de leurs propres priorités de développement . Kate Kallot a soutenu que la véritable souveraineté exige une appropriation locale plutôt qu'une simple consultation, citant la Barbade comme exemple où les données gouvernementales critiques restent dans le pays, le transfert de capacités est intégré dans les contrats, et des outils open source permettent aux développeurs et aux communautés locaux d'étendre eux-mêmes les systèmes . Elle a mis en avant l'implication des communautés dès la phase de conception comme l'approche la plus efficace . Yi Zeng a reconnu que les principes éthiques sont largement reconnus, mais a indiqué que les tests révèlent d'importantes défaillances de mise en œuvre, tant sur le plan éthique que sécuritaire, les services actuels de modèles de langage échouant souvent à respecter même les normes fondées sur le consensus et restant vulnérables aux attaques . Il a exhorté les scientifiques et le grand public à améliorer leur culture de l'IA. Yi Zeng considère l'ONU comme la meilleure plateforme disponible pour l'action collective et soutient que le dialogue devrait produire des résultats concrets, notamment des lignes rouges pour l'IA et un recours accru à l'IA au service des objectifs de développement durable . Lors du tour de clôture, les participants ont largement convenu que la prochaine étape est l'action : une plus grande inclusion des voix du Sud global, un soutien aux innovateurs locaux, un équilibre entre opportunités et risques, ainsi qu'un accès concret aux infrastructures et aux capacités de calcul partagées pour permettre aux pays de développer une IA adaptée à leurs propres contextes . Dans l'ensemble, le panel a conclu que l'efficacité de la gouvernance de l'IA dépendra de la confiance, du renforcement des capacités, du contexte local, de la coopération internationale et d'une mise en œuvre tangible, plutôt que de discussions de haut niveau supplémentaires .Points clés
- Un thème central était la nécessité de passer des principes généraux de gouvernance de l'IA à une mise en œuvre pratique et mesurable. Bosun Tijani a soutenu que les pays ont besoin de stratégies nationales claires en matière d'IA, d'une capacité renforcée du secteur public, d'institutions fiables, de mesures d'impact et d'investissements dans les talents et la puissance de calcul pour rendre la gouvernance concrètement significative. - Les intervenants ont régulièrement mis en évidence la fragmentation de la gouvernance mondiale de l'IA et la nécessité d'une meilleure coordination et harmonisation. Tshilidzi Marwala a décrit ce phénomène comme un « arbitrage réglementaire en matière d'IA », dans lequel des règles nationales, industrielles et internationales non coordonnées permettent à certains acteurs d'exploiter les environnements réglementaires les plus faibles, et a appelé à l'éducation, à des valeurs partagées, à des incitations et à un renforcement de la coordination institutionnelle au niveau opérationnel. - L'inclusion, la souveraineté et l'appropriation locale ont été des priorités majeures, en particulier pour le Sud global. Rumman Chowdhury a souligné que la participation effective dépend du capital humain, d'organismes d'évaluation indépendants et du lien entre évaluation et marchés publics, afin que les pays puissent façonner l'IA plutôt que de simplement la recevoir. Kate Kallot a également soutenu que la véritable souveraineté exige un contrôle des données dans le pays, le transfert de capacités contractuelles et des systèmes ouverts que les communautés et développeurs locaux peuvent étendre. Bosun Tijani a ajouté que l'accès aux infrastructures et aux capacités contextuelles est indispensable pour que les pays puissent bénéficier de l'IA. - La confiance, la sécurité et l'évaluation ont été présentées comme des fondements essentiels d'une gouvernance responsable de l'IA. Chowdhury a soutenu que la puissance de l'IA réside dans l'évaluation et dans la définition de ce qui est bon ou mauvais, tandis que Yi Zeng a averti que les modèles de langage actuels au niveau applicatif ne satisfont toujours pas de nombreuses attentes éthiques et sécuritaires et restent vulnérables aux attaques. Plusieurs interventions ont établi un lien entre la supervision humaine, la culture numérique du public et la pensée critique d'une part, et un déploiement digne de confiance d'autre part. - Le panel s'est conclu par des appels à des résultats concrets issus du Dialogue mondial de l'ONU, en particulier une coopération internationale axée sur l'action. Les participants ont exhorté la plateforme onusienne à contribuer à une refonte de la gouvernance mondiale, afin qu'elle intègre les voix du Sud global, soutienne les innovateurs locaux, établisse des lignes rouges claires et une orientation éthique, et réponde aux prérequis tels que le calcul partagé et les infrastructures. Marwala a explicitement appelé à passer « des paroles aux actes », tandis que la modératrice a conclu en soulignant qu'aucune partie prenante ni aucun pays ne peut gouverner l'IA seul.L'objectif général de la discussion était d'explorer comment la gouvernance de l'IA peut être traduite de grands principes en une action efficace, inclusive et mondialement coordonnée. Le panel s'est concentré en particulier sur ce que les gouvernements, les universités, les entreprises, la société civile et les institutions internationales - notamment l'ONU - devraient faire pour renforcer les capacités, améliorer la mise en œuvre et garantir que tous les pays puissent participer de manière significative à l'élaboration de la gouvernance de l'IA.
Le ton général était sérieux, constructif et orienté vers les solutions. Au début, la discussion a été présentée comme collaborative et urgente, avec une forte reconnaissance à la fois des promesses et des risques de l'IA. Au fil de la session, le ton est devenu plus incisif et prudent, notamment autour de la fragmentation, de la faiblesse de la mise en œuvre, des défaillances en matière de sécurité et de l'exclusion des pays moins puissants. À la fin, il s'est transformé en un appel à l'action plus ferme, les panélistes pressant pour des résultats concrets, une inclusion plus large et une coopération internationale soutenue par l'ONU.
Intervenants
- Whitney Baird - Modératrice de la session multipartite ; Présidente et directrice générale du Conseil des États-Unis pour les affaires internationales - Bosun Tijani - Ministre des Communications, de l'Innovation et de l'Économie numérique, Nigeria ; membre de l'Africa AI Council [S8] - Tshilidzi Marwala - Recteur de l'Université des Nations Unies et Secrétaire général adjoint des Nations Unies [S1] - Kate Kallot - Fondatrice et directrice générale d'Amini - Yi Zeng - Professeur à la Gaoling School of Artificial Intelligence, Université Renmin de Chine. - Rumman Chowdhury - Directrice générale et cofondatrice de Humane Intelligence. Intervenants supplémentaires : - Aucun.Whitney Baird a commencé par présenter le U.S. Council for International Business comme la voix des entreprises américaines sur la scène internationale . Elle a ensuite ouvert le panel en soulignant que les promesses et les risques de l'IA impliquent que toutes les parties prenantes doivent être associées au processus, et elle a présenté la session comme une discussion multipartite dans le cadre du premier Dialogue mondial de l'ONU sur la gouvernance de l'IA . Elle a également présenté les panélistes issus des milieux gouvernementaux, académiques, entrepreneuriaux, de la société civile et du système onusien . La session portait sur la manière dont la gouvernance de l'IA peut progresser vers la mise en œuvre de façon inclusive et applicable dans des contextes variés .
Un thème récurrent était la nécessité de passer des principes à des systèmes concrets . Bosun Tijani a soutenu que cette transition est urgente, car l'IA est déjà intégrée dans la vie quotidienne et bouleverse des secteurs et des entreprises de toutes tailles . Il a affirmé que la gouvernance devrait commencer par l'élaboration, dans chaque pays, d'une stratégie nationale pour l'adoption de l'IA et d'un cadre permettant de comprendre précisément ce qui est gouverné . Il a lié la mise en œuvre à plusieurs conditions : les décideurs politiques doivent avoir une compréhension suffisante de l'IA pour la réguler efficacement, les capacités du secteur public doivent suivre l'évolution technique, les institutions doivent être dignes de confiance, et les pays doivent investir dans les infrastructures de calcul, les talents et l'IA en tant que moteur de croissance .
Tijani a également insisté sur l'importance de la « capacité d'absorption » . Il a soutenu que la gouvernance repose sur des fondements pratiques tels que la connectivité, les infrastructures et la capacité à développer des compétences nationales . Si la connectivité est insuffisante, si les infrastructures font défaut ou si les populations ne peuvent que consommer l'IA sans contribuer à sa création, le déploiement comme la gouvernance s'en trouvent limités . Dans ses remarques de clôture, il est revenu sur ce point et a averti que, si les pays n'accèdent pas aux infrastructures et aux capacités nécessaires pour construire des solutions adaptées à leur contexte, le fossé numérique lié à l'IA pourrait devenir encore plus profond que celui engendré par l'internet .
Baird a répondu en soulignant la confiance, la capacité du secteur public et la connectivité comme des thèmes importants soulevés par Tijani . Elle est revenue à plusieurs reprises sur la question de la confiance : d'abord après les remarques de Tijani sur la confiance dans les institutions , puis après les commentaires de Rumman Chowdhury sur l'évaluation et la certitude , et à nouveau après l'intervention de Yi Zeng sur la supervision humaine et la pensée critique .
Tshilidzi Marwala a identifié l'« arbitrage réglementaire en matière d'IA » comme un problème majeur . Il a expliqué que ce phénomène découle du manque de coordination entre les modèles de gouvernance aux niveaux international, industriel et des États membres, ce qui crée des opportunités pour certains acteurs de rechercher des régimes moins contraignants, notamment en matière de données et d'infrastructures de calcul . Baird a répondu qu'une gouvernance fragmentée peut éroder la confiance et alourdir les coûts pour les développeurs et les entreprises .
Marwala a soutenu que l'éducation constitue l'une des réponses possibles . Il a affirmé que les sociétés ont besoin d'une meilleure culture des données, des algorithmes, de l'informatique et des applications de l'IA . Il a également dit que la gouvernance doit s'enraciner dans des valeurs, et que pour l'ONU, ces valeurs devraient découler de la Déclaration des droits de l'homme et de la Charte des Nations Unies . Il a en outre soutenu que l'éducation devrait façonner les comportements et les incitations, y compris pour les entreprises, et que les normes, politiques et réglementations devraient être simplifiées et intégrées dans les environnements d'apprentissage tels que les salles de classe . Il a ajouté que les législateurs ont également besoin d'être formés pour produire des lois sensées sur l'IA, et que les institutions doivent collaborer non seulement par le dialogue, mais aussi à un niveau opérationnel concret .
Rumman Chowdhury a soutenu que la puissance de l'IA réside « non pas dans le développement, mais dans l'évaluation », car c'est l'évaluation qui définit ce qui est « bon ou mauvais, juste ou faux » . Elle a affirmé que la véritable souveraineté en matière d'IA dépend de la gouvernance, de l'expertise sectorielle et du capital humain . Selon elle, seuls les êtres humains comprennent le contexte, peuvent juger des performances des modèles et décider du rôle que l'IA devrait jouer dans la société .
Elle a ensuite décrit comment son organisation avait mené des évaluations impliquant des milliers de personnes à travers le monde, et a indiqué que le défi consiste désormais à élargir cette participation . Elle a noté que les pays investissent souvent dans des centres de données, des modèles et des talents techniques coûteux, tout en négligeant la couche d'évaluation et les infrastructures nécessaires pour agréger de nombreuses perspectives individuelles en jugements sur l'adéquation et la pertinence . Ses propositions étaient que les gouvernements devraient créer des organes d'évaluation indépendants, opérationnaliser les normes aux niveaux régional et sectoriel, et utiliser la commande publique pour exiger la conformité, de sorte que les entreprises ne puissent pas remporter des marchés publics ou des contrats dans le secteur social sans respecter ces normes . Elle a dit que cela aiderait les pays à passer d'une réception passive de systèmes d'IA externes à la définition de leurs propres priorités, et déplacerait le pouvoir vers les personnes les plus concernées par la technologie . Baird a répondu que l'évaluation est un moyen de renforcer la confiance et la certitude .
Kate Kallot a abordé la souveraineté sous l'angle de l'appropriation locale. Elle a soutenu que « la consultation n'est pas adaptée » et que le partenariat souverain exige une appropriation locale . En prenant Barbade comme exemple, elle a décrit trois pratiques . Premièrement, les données critiques doivent rester dans le pays . Elle a indiqué que son entreprise avait numérisé des millions de documents gouvernementaux, notamment des accords bilatéraux et des documents du conseil des ministres, tout en veillant à ce que cette base de connaissances reste sous juridiction barbadienne sur des infrastructures contrôlées par le gouvernement . Cela a permis au gouvernement d'utiliser les capacités des modèles de pointe sans envoyer ses données les plus sensibles à l'étranger .
Deuxièmement, Kallot a soutenu que le transfert de capacités doit être réel et inscrit dans les contrats . Dans son modèle, les contrats gouvernementaux incluent des obligations de former des gestionnaires de données et des ingénieurs locaux sur une période de deux à trois ans, avec une passation de responsabilités une fois que les équipes locales sont prêtes . Elle a rejeté un simple modèle d'assistance technique et a affirmé que le succès devrait se mesurer à la capacité croissante des équipes locales à s'approprier les systèmes . Troisièmement, elle a dit que les communautés doivent pouvoir construire sur la base de ces systèmes . À Barbade, cela a notamment consisté à mettre en open source « ChatBB » afin que les développeurs locaux puissent l'enrichir, que les jeunes et les data scientists puissent s'y former, et que le contexte local puisse alimenter les services publics et la création de valeur économique . Plus largement, elle a soutenu que les communautés devraient être impliquées avant que les systèmes ne soient codés ou déployés, afin qu'elles contribuent à définir le problème, les cas d'usage, les cas limites et les expériences vécues pertinentes . Pour elle, la co-conception est ce qui rend la gouvernance réelle .
Yi Zeng a dit qu'il existe déjà un large consensus sur les principes éthiques de haut niveau en matière d'IA, notamment à travers l'UNESCO et l'organe consultatif de haut niveau des Nations Unies, mais que la mise en œuvre demeure le problème central . Il a indiqué que ces grands principes avaient été traduits en une centaine de considérations techniques plus précises et utilisés pour tester des modèles de langage . Selon lui, les modèles pouvaient obtenir des scores très élevés sur des questions standard, mais lorsque des questions équivalentes étaient reformulées de nombreuses façons différentes, les performances chutaient fortement, à environ 58 . Il a soutenu que cela démontrait que les modèles de langage applicatifs ne satisfont pas encore, même aux attentes éthiques largement partagées, lorsqu'ils sont soumis à des tests plus rigoureux . Il a également indiqué que les systèmes actuels restent significativement vulnérables aux attaques adversariales .
Yi a ajouté que les scientifiques doivent « dire la vérité » sur l'état actuel de l'IA plutôt que de surestimer ce que ces systèmes sont capables de faire . Il a dit que l'éthique et la sécurité ne sont pas uniquement des questions techniques, et que les scientifiques comme le grand public ont besoin d'une meilleure culture de ce qu'est l'IA et de ses limites . Il a affirmé qu'il n'y a « aucune magie » dans l'IA et l'a décrite comme une machine qui traite l'information sans véritablement la comprendre . Il a également soutenu que le monde a besoin d'une plateforme capable de rassembler les États autour de ces questions, et que l'ONU reste le meilleur cadre disponible, même si elle a besoin de davantage de soutien et de ressources .
Baird a répondu que les êtres humains doivent rester dans la « chaîne de commandement » et que la gouvernance requiert non seulement des ingénieurs, mais aussi des philosophes et d'autres personnes capables d'apporter des perspectives critiques plus larges . Yi Zeng a ensuite ajouté que les voix du public, y compris celles des jeunes générations, devraient être entendues, et a suggéré que certaines applications de l'IA n'ont peut-être pas besoin d'être développées du tout, appelant à la prudence quant aux types d'IA que les sociétés choisissent de créer .
Lors du tour de clôture, Yi a dit que le dialogue devrait produire des résultats concrets, et pas seulement des discussions . Il a soutenu que l'IA devrait être utilisée de manière positive pour contribuer à la réalisation des Objectifs de développement durable dans le temps limité qui reste, tout en appelant à l'établissement de lignes rouges dans le développement et l'utilisation de l'IA . Il a dit que l'éthique et la sécurité devraient contribuer à orienter l'IA dans une direction saine plutôt que d'entraver l'innovation .
Chowdhury a dit que de nombreux participants siègent déjà dans de nombreux groupes consultatifs et jugeraient cette initiative à la valeur qu'elle crée réellement . Bien qu'elle ait réaffirmé la nécessité d'une gouvernance mondiale, elle a critiqué les formes de gouvernance qui se contentent de consolider les pouvoirs existants . Elle a dit que l'année à venir devrait apporter de réels progrès dans l'intégration des pays du Sud global et des pays de la majorité mondiale dans les processus de gouvernance . Dans le même temps, elle a mis en garde contre les formes de souveraineté qui affaiblissent la coopération internationale, plaidant plutôt pour une appropriation et un contrôle qui n'impliquent pas de fermer les portes entre les pays .
Kallot a dit que les discussions mondiales ont été trop fortement influencées par un ensemble restreint d'acteurs et par l'hypothèse selon laquelle l'IA doit suivre une trajectoire centrée sur des modèles très grands et des infrastructures de calcul massives . Elle a appelé la plateforme de l'ONU à aider à « déconstruire et reconstruire » ce récit en montrant ce qui fonctionne réellement dans le Sud global et la majorité mondiale . Elle a également appelé à un soutien pratique et à une plus grande visibilité pour les entreprises et les développeurs qui cherchent à développer l'IA selon les termes de leurs propres pays .
Marwala a dit que la communauté internationale doit « passer des paroles aux actes » . Il a également décrit la gouvernance comme un exercice d'équilibre façonné par le contexte et les valeurs, citant des exemples tels que la transparence versus la sécurité, les données synthétiques versus les données authentiques, et la recherche d'opportunités versus l'aversion au risque . Il a ajouté que les paradigmes actuels de l'IA privilégient la précision plutôt que la vérité, et a suggéré que de nouveaux paradigmes techniques pourraient être nécessaires pour remédier à cette limitation .
Tijani a conclu en revenant sur l'inclusion . Il a dit que l'accès aux bénéfices de l'IA ne découlera pas simplement de l'adoption de systèmes développés ailleurs, et que les pays ont besoin d'infrastructures et de capacités pour construire des solutions adaptées à leur propre contexte . Il a suggéré que la plateforme de l'ONU pourrait contribuer à apporter de la clarté sur des questions pratiques telles que le partage des infrastructures de calcul entre régions et les prérequis dont les pays ont besoin avant de pouvoir véritablement s'approprier l'IA . Il a réitéré son avertissement que, sans investissement dans ces prérequis, le fossé numérique lié à l'IA pourrait devenir plus profond que le fossé créé par l'internet .
Dans ses remarques de clôture, Baird a dit que la discussion avait confirmé que la gouvernance de l'IA ne peut être assurée par un seul acteur ou un seul pays, et qu'elle nécessitera une collaboration soutenue entre les gouvernements, l'industrie, le monde académique, la société civile et la communauté internationale . Tout au long du panel, les intervenants sont revenus à plusieurs reprises sur la mise en œuvre, les capacités nationales, la coordination, l'évaluation, l'appropriation locale, l'inclusion du Sud global et la poursuite de la coopération au sein de l'ONU .
This is supported by a prior statement from Whitney Baird describing the US Council for International Business as representing the U.S. private sector in multilateral and international organisations and companies with a global presence [S85].
The knowledge base consistently supports this multi-stakeholder framing for AI and digital governance, including calls for participation by governments, business, civil society, academia, and other actors [S83], [S93], [S95].
This aligns with repeated knowledge base emphasis on moving from principles to action and implementation, including practical pathways for translating digital governance principles into action and creating enabling policy environments grounded in real-world experience [S103], [S87].
The knowledge base explicitly discusses the need to go 'from principles to action' in digital governance and warns against producing too many declarations without implementation [S103].
The knowledge base adds useful context by noting that national strategic frameworks on AI and cybersecurity are important for governance and implementation, reinforcing the relevance of country-level strategies [S104]. It also notes that many countries are reforming institutions to address digital challenges more holistically [S81].
The knowledge base corroborates several of these implementation conditions: diplomats and officials need AI understanding for effective policy work [S40]; countries need broader capacity building and access to opportunities [S40]; and trust is repeatedly identified as foundational in digital governance [S100].
This is well supported by the knowledge base. Multiple sources state that connectivity and digital capacity are prerequisites for meaningful participation in the digital economy and for broader digital development [S83], [S87], [S99].
The knowledge base adds relevant nuance that lack of connectivity and digital capacity hinders full participation in the digital economy [S83], and that access to capacity-building opportunities often fails to reach communities and companies in the Global South [S40].
The knowledge base does not confirm the comparative prediction directly, but it strongly supports the underlying concern about widening digital and socio-economic inequalities from AI and the persistence of earlier digital divides [S82], [S92], [S95].
Trust, capacity, and connectivity are all prominent themes in the knowledge base: trust is described as a prerequisite for effective digital public infrastructure [S100], connectivity as a foundational enabler of digital participation [S87], and capacity building as essential for AI and digital governance [S40], [S83].
The knowledge base provides strong contextual support for this concern about fragmentation. It notes that cross-cutting digital issues cannot be addressed effectively in silos [S81], and that regulatory fragmentation can undermine coherence, trust, and practical implementation [S86], [S87].
Barriers to Equitable Access #Infrastructure and Investment Challeng...
Passer des principes aux systèmes et stratégies nationaux concrets, avec des résultats mesurables, une capacité du secteur public, des institutions fiables et des investissements dans l'infrastructure et les talents en matière d'IA (Bosun Tijani)
Arg. 1Bosun Tijani soutient que la gouvernance de l'IA doit aller au-delà des principes abstraits et se traduire par des systèmes nationaux concrets que les pays peuvent réellement mettre en œuvre et évaluer. Il affirme que cela nécessite des stratégies nationales, des mécanismes de mesure, des institutions publiques compétentes, la confiance envers les organes de gouvernance, ainsi que des investissements durables dans les infrastructures et les talents.
Il affirme explicitement que la première étape consiste à passer des principes de gouvernance à des systèmes concrets, car l'IA affecte déjà la vie quotidienne et perturbe des secteurs entiers ainsi que des opportunités économiques . Il ajoute que chaque pays a besoin de stratégies claires pour l'adoption de l'IA et pour mesurer ce qui est gouverné . Il identifie en outre la capacité du secteur public, des institutions fiables, la mesure de l'impact et l'investissement dans les ressources de calcul et les talents comme des conditions nécessaires à une mise en œuvre significative , .
on: La gouvernance de l'IA doit passer des grands principes et du dialogue à une mise en œuvre concrète, à des systèmes tangibles et à des actions mesurables.
on: Comment concilier le déploiement rapide de l'IA et la prudence requise en matière d'éthique, de sécurité et de la question de savoir si certains systèmes devraient être développés du tout
Une gouvernance efficace de l'IA repose non seulement sur le développement de talents techniques, mais aussi sur la formation des fonctionnaires chargés de la mise en œuvre (Bosun Tijani)
Arg. 2Tijani souligne que la capacité de gouvernance ne se limite pas à la formation d'ingénieurs ou de développeurs en IA. Les gouvernements ont également besoin de fonctionnaires qui comprennent la technologie et sont capables de suivre l'évolution rapide du domaine afin de mettre en œuvre efficacement les cadres de gouvernance.
Il demande comment s'assurer que les fonctionnaires chargés de la mise en œuvre disposent des connaissances nécessaires et peuvent suivre les évolutions du domaine . Il affirme ensuite que le renforcement des capacités doit couvrir non seulement les talents pour développer l'IA, mais aussi la capacité du secteur public, qu'il décrit comme extrêmement importante .
on: Le renforcement des capacités et l'éducation sont essentiels à une gouvernance efficace de l'IA, notamment en ce qui concerne les compétences du secteur public, des législateurs, des praticiens techniques et du grand public.
La confiance est une condition fondamentale de la gouvernance de l'IA, et des institutions fiables sont indispensables pour que les cadres de gouvernance soient acceptés et efficaces (Bosun Tijani)
Arg. 3Tijani présente la confiance comme une exigence fondamentale de la gouvernance de l'IA. Selon lui, même des règles bien conçues échoueront si les institutions chargées de les mettre en œuvre ne bénéficient pas de la confiance du public et des parties prenantes.
Il affirme qu'il sera nécessaire de disposer d'institutions fiables, car les systèmes de gouvernance ne peuvent véritablement fonctionner si les populations ne font pas confiance aux institutions qui mettent en œuvre le cadre de gouvernance . Il présente ce point, aux côtés du leadership politique et de la mesure de l'impact, comme faisant partie des conditions pratiques nécessaires à une gouvernance efficace .
on: La confiance, l'évaluation et les mécanismes de responsabilité sont au cœur de la crédibilité et de l'efficacité de la gouvernance de l'IA.
on: Ce qui devrait être considéré comme la principale source de pouvoir et de responsabilité dans la gouvernance de l'IA
Les pays ont besoin d'une capacité d'absorption — connectivité, infrastructure et capacité de développement national — pour utiliser et gouverner l'IA de manière significative (Bosun Tijani)
Arg. 4Tijani soutient que les pays ne peuvent pas bénéficier de l'IA ni la gouverner efficacement s'ils ne disposent pas des capacités de base nécessaires pour l'absorber et l'utiliser. Cela inclut la connectivité, les infrastructures et la capacité à participer au développement de l'IA plutôt que de rester de simples consommateurs passifs.
Il affirme que la gouvernance doit être liée à la capacité d'absorption des nations pour mettre l'IA à bon usage . Il explique que là où la connectivité est insuffisante, l'application de l'IA est limitée et la capacité des populations à la gouverner s'en trouve également affaiblie . Il ajoute que le manque d'infrastructures freine le développement contextuel de l'IA et une gouvernance appropriée, tandis que les pays qui ne peuvent que consommer l'IA sans la développer font face à des limitations évidentes .
on: Les infrastructures et l'accès à la puissance de calcul sont des prérequis fondamentaux pour une participation équitable à l'IA et pour prévenir un approfondissement des inégalités mondiales.
La véritable inclusion signifie l'accès aux bénéfices de l'IA grâce à des capacités et à une infrastructure permettant aux pays de développer des solutions adaptées à leur propre contexte, et non de simplement consommer des systèmes conçus ailleurs (Bosun Tijani)
Arg. 5Dans ses remarques de clôture, Tijani définit l'inclusion comme un accès réel aux bénéfices de l'IA, et non comme un simple accès à des outils importés. Il soutient que les pays ont besoin des infrastructures et des capacités nécessaires pour développer une IA adaptée à leurs propres contextes si l'inclusion doit être véritablement effective.
Il affirme que l'inclusion devrait être centrée sur l'accès aux bénéfices de l'IA et qu'un tel accès ne découlera pas du simple fait d'adopter ce qui a été développé ailleurs . Il soutient ensuite que les nations ont besoin de capacités, notamment en matière d'infrastructures, pour pouvoir développer des solutions adaptées à leur contexte, ce qu'il considère comme essentiel à la concrétisation des bénéfices de l'IA .
on: La coopération internationale demeure nécessaire même lorsque les pays recherchent la souveraineté, des stratégies nationales et un contrôle local sur le développement et la gouvernance de l'IA.
on: Si la souveraineté en matière d'IA devrait être centrée sur le contrôle national, l'appropriation locale, ou équilibrée avec la coopération internationale
L'accès aux ressources de calcul partagées et aux autres infrastructures fondamentales doit être clarifié et élargi, faute de quoi les inégalités liées à l'IA risquent de dépasser celles qu'a engendrées la fracture numérique (Bosun Tijani)
Arg. 6Tijani avertit que l'accès inégal aux infrastructures essentielles de l'IA, notamment la puissance de calcul, pourrait créer une fracture plus profonde que la fracture numérique liée à internet. Il appelle à une clarté pratique et à des investissements dans la puissance de calcul partagée et d'autres prérequis afin que davantage de pays puissent participer de manière significative.
Il indique que la plateforme de l'ONU peut contribuer à clarifier l'accès à la puissance de calcul partagée au sein des régions et entre les pays . Il soutient également que les nations ont besoin de prérequis essentiels en place et avertit que si les investissements et le soutien aux infrastructures ne sont pas mobilisés, le fossé en matière d'IA deviendra plus important que la fracture observée lors de l'émergence d'internet .
on: Les infrastructures et l'accès à la puissance de calcul sont des prérequis fondamentaux pour une participation équitable à l'IA et pour prévenir un approfondissement des inégalités mondiales.
Le principal manque est une gouvernance fragmentée et non coordonnée entre les organisations internationales, les États et l'industrie, créant un « arbitrage de la gouvernance de l'IA » qui nécessite une harmonisation et une coordination opérationnelle (Tshilidzi Marwala)
Arg. 1Marwala soutient que le principal obstacle à la mise en œuvre est la fragmentation entre les multiples systèmes de gouvernance de l'IA. Les organisations internationales, les États et l'industrie développant des approches distinctes, certains acteurs peuvent exploiter les juridictions les plus permissives, ce qui rend l'harmonisation et la coordination pratique indispensables.
Il définit le problème comme un « arbitrage de la gouvernance de l'IA », expliquant que des modèles de gouvernance émergent au niveau international, dans l'industrie et parmi les États membres, mais qu'ils ne sont pas coordonnés . Il illustre cela en affirmant qu'une personne intéressée par les données se rendra dans un pays où la réglementation est plus souple, et que la même logique s'applique aux capacités de calcul . Il conclut qu'un mécanisme est nécessaire pour harmoniser ces approches et que les institutions doivent être réunies non seulement pour le dialogue, mais aussi au niveau opérationnel , .
on: La coopération internationale demeure nécessaire même lorsque les pays recherchent la souveraineté, des stratégies nationales et un contrôle local sur le développement et la gouvernance de l'IA.
on: Priorité de mise en œuvre principale pour une gouvernance efficace de l'IA
L'éducation est centrale : les individus ont besoin de maîtriser les données, les algorithmes, le calcul informatique, les applications, les normes et la réglementation, y compris les législateurs qui rédigent les lois sur l'IA (Tshilidzi Marwala)
Arg. 2Marwala considère l'éducation comme le mécanisme central pour faire fonctionner la gouvernance de l'IA. Il soutient qu'une large culture est nécessaire dans les domaines techniques, les normes, les politiques et l'élaboration des lois, afin que les praticiens comme les législateurs puissent agir de manière responsable et efficace.
Il affirme à plusieurs reprises que les individus ont besoin d'être formés aux données, aux algorithmes, à l'informatique et aux applications possibles de l'IA . Il ajoute que les normes devraient être intégrées dans les programmes scolaires afin que les personnes qui conçoivent des systèmes y soient exposées dès le début . Il souligne également la nécessité de former les législateurs pour qu'ils puissent élaborer une législation sensée sur l'IA .
on: Le renforcement des capacités et l'éducation sont essentiels pour une gouvernance efficace de l'IA, notamment en ce qui concerne les capacités du secteur public, les législateurs, les praticiens techniques et le grand public.
on: Ce qui devrait être considéré comme la principale source de pouvoir et de responsabilité dans la gouvernance de l'IA
Le dialogue onusien devrait passer de la discussion à l'action, notamment en démocratisant l'accès à l'IA et en contribuant à définir des équilibres tels qu'opportunité versus risque, transparence versus sécurité, et données synthétiques versus données authentiques (Tshilidzi Marwala)
Arg. 3Marwala soutient que la prochaine étape de la gouvernance mondiale de l'IA est l'action concrète plutôt que des discussions répétées. Il présente également la gouvernance comme un exercice d'équilibre, dans lequel les institutions doivent aider à arbitrer des compromis entre des valeurs concurrentes et des choix techniques.
Il affirme clairement vouloir passer des paroles aux actes, notamment en ce qui concerne l'accès des pays du Sud à la technologie et la démocratisation de cet accès . Il explique ensuite que la gouvernance est un problème d'équilibre entre la recherche d'opportunités et l'aversion au risque . À titre d'exemples, il soulève la nécessité de déterminer l'équilibre entre transparence et sécurité, ainsi qu'entre l'utilisation de données synthétiques et de données authentiques .
on: Les infrastructures et l'accès aux capacités de calcul sont des prérequis fondamentaux pour une participation équitable à l'IA et pour prévenir l'aggravation des inégalités mondiales.
on: Comment concilier le déploiement rapide de l'IA avec la prudence en matière d'éthique, de sécurité et de la question de savoir si certains systèmes devraient être développés du tout
Les principes éthiques font l'objet d'un large consensus, mais leur mise en œuvre reste insuffisante car les systèmes d'IA actuels échouent encore aux tests rigoureux d'éthique et de sécurité dans la pratique (Yi Zeng)
Arg. 1Yi Zeng soutient que le consensus sur les principes éthiques ne s'est pas traduit par une mise en œuvre fiable. Il indique que les tests révèlent que les modèles de langage actuels échouent souvent lorsque l'éthique et la sécurité sont examinées de manière rigoureuse et sous des formes variées dans des contextes réels.
Il souligne qu'il existe déjà un large consensus sur les principes éthiques de l'IA, en citant la recommandation de l'UNESCO sur l'éthique et le rapport de l'organe consultatif . Il explique que lorsque les principes de haut niveau ont été traduits en environ 90 considérations plus précises et testés, les performances ont chuté fortement lorsque la même question était posée de nombreuses façons différentes, passant d'environ 98 à 58 . Il rapporte également des résultats de tests de sécurité montrant que même les meilleurs systèmes pouvaient être attaqués avec succès 60 % du temps et les moins performants 40 % du temps, révélant de sérieuses faiblesses pratiques .
Le dialogue devrait produire des résultats concrets, notamment des lignes rouges pour le développement et l'utilisation de l'IA, tout en traitant l'éthique et la sécurité comme des guides pour une innovation saine plutôt que comme des obstacles (Yi Zeng)
Arg. 2Yi Zeng soutient que le dialogue mondial doit produire des résultats tangibles, et pas seulement des discussions. Il affirme que l'éthique et la sécurité doivent définir des lignes rouges et orienter le développement de l'IA dans une direction constructive, plutôt que d'être perçues comme des contraintes anti-innovation.
Dans ses remarques de clôture, il indique que le dialogue doit aboutir à des résultats et que le développement de l'IA nécessite impérativement des lignes rouges si l'éthique et la sécurité sont prises au sérieux . Il soutient ensuite que l'éthique et la sécurité ne constituent pas un rejet du développement de l'IA, mais contribuent au contraire à identifier la bonne direction et à soutenir un progrès sain et régulier .
on: La coopération internationale reste indispensable même lorsque les pays cherchent à affirmer leur souveraineté, à définir des stratégies nationales et à exercer un contrôle local sur le développement et la gouvernance de l'IA.
on: Comment concilier le déploiement rapide de l'IA avec la prudence en matière d'éthique, de sécurité et la question de savoir si certains systèmes devraient être développés du tout
La culture de l'IA pour le grand public est indispensable, car les systèmes actuels ne relèvent pas d'une intelligence magique, mais sont des outils aux limitations que la société doit clairement comprendre (Yi Zeng)
Arg. 3Yi Zeng soutient qu'une meilleure compréhension de l'IA par le public est essentielle pour une gouvernance responsable. Il souhaite que les scientifiques communiquent les capacités et les limites réelles des systèmes actuels afin que la société ne les confonde pas avec une intelligence de type humain.
Il affirme que le grand public a besoin d'une meilleure culture numérique et que les scientifiques devraient aider le monde à mieux comprendre l'état actuel de l'IA . Il souligne qu'il n'y a « aucune magie » dans les systèmes actuels et décrit l'IA comme une machine qui traite l'information sans véritablement la comprendre .
on: Le renforcement des capacités et l'éducation sont essentiels pour une gouvernance efficace de l'IA, notamment en ce qui concerne les capacités du secteur public, des législateurs, des praticiens techniques et du grand public.
Des tests rigoureux montrent que de nombreux modèles de langage actuels affichent des performances incohérentes en matière d'éthique et restent vulnérables sur le plan de la sécurité, ce qui prouve qu'une évaluation plus solide est urgentemente nécessaire (Yi Zeng)
Arg. 4Yi Zeng soutient que des tests systématiques révèlent de sérieuses faiblesses dans les systèmes d'IA actuels. Étant donné que les modèles peuvent sembler performants lors de tests simplifiés mais échouer face à des questions plus rigoureuses et à des attaques adversariales, il considère qu'une évaluation plus robuste est urgentemente nécessaire.
Il décrit une méthode de test dans laquelle environ 10 principes éthiques de haut niveau ont été décomposés en 90 considérations plus précises, puis soumis à des modèles de langage . Il rapporte que bien que les modèles aient semblé obtenir des scores très élevés au départ, leurs performances sont tombées à 58 lorsque la même question a été reformulée de 100 façons différentes . Il cite également des tests de sécurité adversariaux montrant des attaques réussies contre les meilleurs systèmes 60 % du temps et contre les plus faibles 40 % du temps .
on: Les mécanismes de confiance, d'évaluation et de responsabilité sont au cœur de la crédibilité et de l'efficacité de la gouvernance de l'IA.
on: Ce qui devrait être considéré comme la principale source de pouvoir et de responsabilité dans la gouvernance de l'IA
La gouvernance de l'IA doit inclure toutes les parties prenantes, car aucun pays ni aucun acteur ne peut gouverner l'IA seul ; une collaboration multipartite soutenue est indispensable (Whitney Baird)
Arg. 1Whitney Baird présente l'inclusion multipartite comme un principe fondamental de la gouvernance de l'IA. Elle soutient que, dans la mesure où les promesses et les risques de l'IA concernent de nombreux acteurs, une gouvernance efficace exige la participation de toutes les parties prenantes, plutôt que de laisser la prise de décision à un seul pays ou secteur.
D'emblée, elle affirme que compte tenu des promesses et des risques liés au développement et à la mise en œuvre de l'IA, toutes les parties concernées doivent avoir leur place à la table . Dans sa synthèse finale, elle réaffirme que la gouvernance de l'IA ne peut être assurée par une seule partie prenante ou un seul pays, et qu'elle dépendra d'une collaboration soutenue entre les gouvernements, l'industrie, le monde académique, la société civile et la communauté internationale .
on: La coopération internationale demeure nécessaire, même lorsque les pays cherchent à affirmer leur souveraineté, à développer des stratégies nationales et à exercer un contrôle local sur le développement et la gouvernance de l'IA.
on: La question de savoir si la souveraineté en matière d'IA doit être centrée sur le contrôle national, l'appropriation locale, ou mise en balance avec la coopération internationale
Les êtres humains, y compris les philosophes et le grand public, doivent rester au cœur de la supervision de l'IA, car les systèmes techniques seuls ne peuvent pas déterminer ce qui est digne de confiance ou socialement acceptable (Whitney Baird)
Arg. 2Baird soutient que la supervision de l'IA ne peut être confiée uniquement à des experts techniques ou à des machines. Elle insiste sur l'importance du jugement humain, de la pensée critique et de perspectives sociales larges — y compris celles des non-ingénieurs et du grand public — pour décider comment l'IA doit être déployée et à quelles conditions elle peut être considérée comme fiable.
Après les remarques de Yi Zeng, elle souligne le besoin crucial que les êtres humains restent dans la « chaîne de commandement » . Elle ajoute que la société a besoin non seulement d'ingénieurs, mais aussi de philosophes et d'autres personnes capables d'apporter la perspective la plus large possible sur les questions de déploiement, d'utilisation de l'information et de confiance .
on: Le renforcement des capacités et l'éducation sont essentiels à une gouvernance efficace de l'IA, notamment en ce qui concerne les capacités du secteur public, des législateurs, des praticiens techniques et du grand public.
on: Comment concilier le déploiement rapide de l'IA avec la prudence requise en matière d'éthique, de sécurité, et la question de savoir si certains systèmes devraient être développés du tout
Les mécanismes d'évaluation et de responsabilisation contribuent à instaurer la confiance et la certitude pour les utilisateurs, les gouvernements et les concepteurs (Whitney Baird)
Arg. 3Baird présente l'évaluation comme un mécanisme concret pour rendre la gouvernance de l'IA plus digne de confiance. Dans son rôle de modératrice, elle associe l'évaluation à une plus grande certitude pour les parties prenantes et fait de la confiance un critère récurrent pour déterminer si les systèmes de gouvernance seront acceptés.
Après l'intervention de Rumman Chowdhury, elle déclare que l'évaluation est un moyen de renforcer la confiance et d'apporter de la certitude . Plus tôt, elle avait également souligné l'importance capitale de la confiance en réponse aux commentaires de Bosun Tijani, montrant qu'elle la considère comme une préoccupation centrale de la gouvernance .
on: La confiance, l'évaluation et les mécanismes de responsabilisation sont au cœur de la crédibilité et de l'efficacité de la gouvernance de l'IA.
La gouvernance mondiale a trop souvent renforcé les acteurs déjà puissants ; la prochaine phase devrait délibérément intégrer les voix et les priorités du Sud global et de la majorité mondiale (Rumman Chowdhury)
Arg. 1Rumman Chowdhury soutient que la gouvernance mondiale de l'IA existante a eu tendance à consolider l'influence des acteurs qui détiennent déjà le pouvoir. Elle estime que le dialogue onusien offre une occasion de rompre avec cette tendance en intégrant délibérément les perspectives du Sud global et de la majorité mondiale.
Elle affirme que si l'IA a encore désespérément besoin d'une gouvernance mondiale, ce qu'elle a observé est une forme de gouvernance fondée sur la consolidation du pouvoir de ceux qui le détiennent déjà . Elle soutient ensuite que ces dialogues créent une opportunité de réorienter la direction et appelle explicitement à un engagement concret avec les pays du Sud global et de la majorité mondiale .
on: L'inclusion et la participation effective du Sud global, des communautés locales et des voix sous-représentées sont nécessaires pour une gouvernance légitime de l'IA.
La souveraineté ne devrait pas signifier l'isolement ; les pays ont besoin de s'approprier et de contrôler les systèmes d'IA tout en préservant la coopération internationale (Rumman Chowdhury)
Arg. 2Chowdhury soutient la souveraineté en matière d'IA, mais rejette l'idée que celle-ci devrait conduire à la fragmentation ou au désengagement. Elle affirme que les pays devraient conserver la maîtrise du développement de l'IA tout en continuant à coopérer à l'échelle internationale, en particulier dans un contexte géopolitique tendu.
Elle dit vouloir voir s'engager une discussion sur la souveraineté qui ne sacrifie pas le concept de coopération . Elle note que la géopolitique actuelle semble chargée de tensions et que certains accords de coopération internationale semblent être remis en cause . Elle conclut que, si elle soutient fermement la souveraineté et l'appropriation des modèles et modalités d'IA, les pays devraient néanmoins s'engager dans la coopération internationale plutôt que de se fermer les uns aux autres .
on: La coopération internationale reste nécessaire même lorsque les pays recherchent la souveraineté, des stratégies nationales et un contrôle local sur le développement et la gouvernance de l'IA.
on: La question de savoir si la souveraineté en matière d'IA devrait être centrée sur le contrôle national, l'appropriation locale, ou équilibrée avec la coopération internationale
Le capital humain est le fondement d'une véritable souveraineté en matière d'IA, car seules les personnes sont en mesure de comprendre le contexte et de juger si l'IA fonctionne de manière appropriée dans la société (Rumman Chowdhury)
Arg. 3Chowdhury soutient que la véritable souveraineté en matière d'IA repose sur les personnes, et non uniquement sur les infrastructures ou les modèles. Elle affirme que seuls les êtres humains sont capables d'interpréter le contexte et de déterminer ce qui constitue une performance acceptable ou réussie de l'IA dans la société.
Elle définit la véritable souveraineté en matière d'IA comme une combinaison de bonne gouvernance et d'expertise sectorielle, ce qui nécessite de cultiver le capital humain . Elle affirme ensuite que seuls les êtres humains peuvent comprendre le contexte et définir la performance des modèles, car ce sont les personnes qui doivent façonner la manière dont l'IA est utilisée dans le monde .
on: Le contexte local, l'appropriation locale et les capacités nationales sont indispensables pour que les systèmes d'IA soient utiles, gouvernables et bénéfiques.
Le véritable pouvoir dans l'IA réside dans l'évaluation plutôt que dans le développement, car c'est l'évaluation qui détermine ce qui est bon, mauvais, juste ou erroné dans le déploiement (Rumman Chowdhury)
Arg. 4Chowdhury soutient que le pouvoir le plus important dans la gouvernance de l'IA est celui d'évaluer les systèmes. Pour elle, l'évaluation est le lieu où les sociétés tranchent des questions normatives sur le caractère approprié, bénéfique ou nuisible des systèmes dans leur utilisation réelle.
Elle affirme directement que le pouvoir de l'IA réside non pas dans le développement, mais dans l'évaluation . Elle l'explique en posant la question suivante : quel pouvoir est plus grand que celui de définir ce qui est bon ou mauvais, juste ou injuste, établissant ainsi un lien entre l'évaluation et l'autorité sociale de juger les résultats de l'IA .
on: La confiance, l'évaluation et les mécanismes de responsabilité sont essentiels pour rendre la gouvernance de l'IA crédible et efficace.
on: Ce qui devrait être considéré comme la principale source de pouvoir et de responsabilité dans la gouvernance de l'IA
Les pays devraient créer des organes d'évaluation indépendants, adapter les normes d'évaluation aux contextes régionaux et sectoriels, et conditionner la conformité aux marchés publics (Rumman Chowdhury)
Arg. 5Chowdhury propose des mesures institutionnelles concrètes pour élargir la participation du public et renforcer la responsabilité dans la gouvernance de l'IA. Elle soutient que les gouvernements devraient créer des évaluateurs indépendants, localiser les normes et recourir aux règles de passation des marchés publics pour s'assurer que les fournisseurs d'IA satisfont aux exigences d'évaluation.
Elle indique que, tandis que les pays investissent dans des centres de données, des modèles et des talents, la couche d'évaluation et l'infrastructure nécessaire pour intégrer les perspectives individuelles à grande échelle sont souvent négligées . Elle recommande ensuite trois mesures politiques : la création d'organes d'évaluation indépendants, l'opérationnalisation des normes d'évaluation selon des perspectives régionales et sectorielles, et l'intégration des exigences d'évaluation dans les marchés publics, de sorte que les contrats gouvernementaux et du secteur social ne soient attribués qu'aux organisations conformes .
on: La confiance, l'évaluation et les mécanismes de responsabilité sont essentiels pour rendre la gouvernance de l'IA crédible et efficace.
on: Priorité de mise en œuvre principale pour une gouvernance efficace de l'IA
Le récit mondial dominant sur l'IA est trop étroitement façonné par un petit nombre d'acteurs ; l'ONU devrait contribuer à faire émerger des modèles alternatifs et l'innovation locale du Sud global (Kate Kallot)
Arg. 1Kate Kallot soutient que les idées dominantes sur ce que devrait être l'IA sont définies par trop peu d'acteurs issus d'une partie restreinte du monde. Elle souhaite que l'ONU remette en question cette situation en mettant en avant des modèles, des expériences et des données probantes différents, issus du Sud global et de la majorité mondiale.
Elle affirme qu'un résultat souhaité est un espace où le récit sur l'IA est déconstruit et reconstruit, car il a été porté par une partie très spécifique du monde et un ensemble très spécifique d'acteurs . Elle soutient que ces acteurs ont promu l'idée que l'IA doit nécessairement reposer sur de grands modèles généralistes et des usines à l'échelle du gigawatt, ce qu'elle rejette . Elle ajoute qu'il est nécessaire de faire émerger davantage de témoignages et de données probantes du Sud global et de la majorité mondiale .
on: L'inclusion et la participation effective du Sud global, des communautés locales et des voix sous-représentées sont nécessaires à une gouvernance légitime de l'IA.
Les développeurs, les concepteurs et les communautés dans leurs propres pays doivent être soutenus et disposer de plateformes, car ce sont eux qui façonneront concrètement l'avenir de l'IA (Kate Kallot)
Arg. 2Kallot soutient que la gouvernance de l'IA devrait autonomiser les personnes qui construisent et utilisent les systèmes localement, et pas seulement les élites présentes dans les forums mondiaux. Elle affirme que les développeurs, les entreprises et les communautés locaux détermineront concrètement l'évolution de l'IA et ont donc besoin de visibilité et de soutien.
Elle appelle à soutenir les entreprises et les développeurs qui s'efforcent de faire progresser l'IA dans leurs propres pays et d'aider leurs sociétés à se développer selon leurs propres termes . Elle demande également des plateformes où ils puissent faire connaître leurs innovations et prendre la parole dans des espaces comme le dialogue de l'ONU, affirmant qu'ils seront les véritables gardiens de ce que deviendra l'IA dans les années à venir .
Les communautés doivent être impliquées dès la phase de conception, en apportant leurs cas d'usage locaux, leurs cas limites et leur vécu, avant que les systèmes ne soient construits et déployés (Kate Kallot)
Arg. 3Kallot soutient que la consultation après coup est insuffisante et que les communautés devraient être de véritables co-conceptrices des systèmes d'IA. Elle affirme que les utilisateurs locaux doivent contribuer à définir les problèmes, les cas d'usage et les cas limites avant que le codage et le déploiement ne commencent.
Elle indique qu'Amini fonctionne selon le principe que la consultation n'est pas adaptée à cet objectif et que la véritable souveraineté exige une appropriation locale . Elle conclut que l'approche la plus efficace consiste à associer les communautés dès la phase de conception, avant que le code ne soit écrit ou que les systèmes ne soient déployés, afin qu'elles puissent définir le problème, les cas d'usage, les cas limites et apporter leur vécu local .
on: Le contexte local, l'appropriation locale et les capacités nationales sont indispensables pour que les systèmes d'IA soient utiles, gouvernables et bénéfiques.
on: Priorité de mise en œuvre principale pour une gouvernance efficace de l'IA
Les données nationales sensibles doivent rester dans le pays, sous juridiction nationale, afin que les États puissent utiliser des capacités avancées d'IA sans renoncer au contrôle de leurs informations critiques (Kate Kallot)
Arg. 4Kallot soutient qu'une véritable souveraineté en matière d'IA exige que les données d'État critiques restent sous contrôle national. Elle affirme que les pays ne devraient pas avoir à choisir entre l'accès à des outils d'IA puissants et le maintien de leur juridiction sur les informations sensibles.
Prenant la Barbade comme exemple, elle indique qu'Amini a numérisé des millions de documents gouvernementaux, notamment des accords bilatéraux et des documents du cabinet datant de 2018 . Elle explique que cette base de connaissances intelligente reste à la Barbade, sous une infrastructure et une juridiction contrôlées par le gouvernement, permettant ainsi aux ministres et aux fonctionnaires d'utiliser les capacités des modèles de pointe sans envoyer de données sensibles hors du pays .
on: L'infrastructure et l'accès aux capacités de calcul sont des prérequis fondamentaux pour une participation équitable à l'IA et pour prévenir l'aggravation des inégalités mondiales.
on: La question de savoir si la souveraineté en matière d'IA doit être centrée sur le contrôle national, l'appropriation locale, ou mise en balance avec la coopération internationale
Le transfert de capacités doit être intégré dans les partenariats gouvernementaux en matière d'IA, afin que les fonctionnaires et les ingénieurs locaux puissent à terme gérer les systèmes de manière autonome (Kate Kallot)
Arg. 5Kallot soutient que le renforcement des capacités doit être contractuel et concret, et non purement rhétorique. Elle estime que les prestataires externes devraient former progressivement les agents gouvernementaux et les ingénieurs locaux, afin que les systèmes puissent à terme être transférés et exploités de manière autonome.
Elle indique que dans chaque contrat gouvernemental, Amini inclut une obligation de transfert, plutôt que de se limiter à proposer une assistance technique ou un service client . Elle explique que les équipes locales forment des gestionnaires de données au sein du gouvernement ainsi que des ingénieurs sur les piliers opérationnels sur une période de deux à trois ans, à l'issue de laquelle les systèmes sont transférés lorsque l'équipe locale est prête .
on: Le contexte local, l'appropriation locale et les capacités nationales sont nécessaires pour que les systèmes d'IA soient utiles, gouvernables et bénéfiques.
Les systèmes open source et extensibles localement permettent aux développeurs et aux communautés locaux de s'appuyer sur une infrastructure d'IA publique et de générer de la valeur économique locale (Kate Kallot)
Arg. 6Kallot soutient que l'appropriation locale devrait inclure la capacité à étendre et à développer les systèmes d'IA. Les outils d'IA publics en open source peuvent permettre aux développeurs locaux de contribuer des savoirs locaux, de créer de nouveaux services et de conserver davantage de valeur au sein du pays.
Elle indique qu'à la Barbade, Amini a publié en open source « ChatBB », un assistant IA visant à réduire les obstacles à l'accès aux services publics . Elle explique que, le système étant open source, les développeurs barbadiens peuvent s'appuyer dessus, tandis que des programmes de formation destinés aux jeunes locaux et aux data scientists leur permettent de contribuer de nouvelles applications et de nouveaux services qui enrichissent le système de contexte local et génèrent de la valeur économique localement .
on: Le contexte local, l'appropriation locale et les capacités nationales sont nécessaires pour que les systèmes d'IA soient utiles, gouvernables et bénéfiques.
Graphe de connaissances de la session
Intervenants · Sujets · Arguments · Relations
Several intervenants converged on the view that AI governance is already beyond the stage of abstract principle-setting and now requires implementation. Bosun Tijani said governance must move away from principles into practical systems, with country strategies and measurement . Tshilidzi Marwala said he wanted to see a move from talk to action . Yi Zeng said the dialogue must produce outputs and red lines for development . Whitney Baird framed the session around the need for all stakeholders to be at the table and closed by stressing that progress depends on sustained collaboration across sectors and countries .
Move from principles to practical national systems and strategies, with measurable outcomes, public-sector capacity, trusted institutions, and investment in AI infrastructure and talent (Bosun Tijani)
The UN dialogue should move from discussion to action, especially in democratising access to AI and helping define balances such as opportunity versus risk, transparency versus security, and synthetic versus authentic data (Tshilidzi Marwala)
The dialogue should produce concrete outputs, including red lines for AI development and use, while treating ethics and safety as guides for healthy innovation rather than barriers (Yi Zeng)
AI governance must include all stakeholders because no single country or actor can govern AI alone; sustained multistakeholder collaboration is essential (Whitney Baird)
This aligns with recent governance debates stressing implementation over abstract principles: governments are increasingly treating AI as infrastructure to be secured and deployed through concrete national strategies [S43][S44], while IGF discussions have recommended regulatory sandboxes, gradual rollout, and context-specific implementation mechanisms [S53].
A strong cross-panel agreement was that governance depends on people, not only technology. Bosun Tijani stressed capacity for public officials as well as technical talent . Tshilidzi Marwala repeatedly called for education on data, algorithms, compute, applications, standards, and legislators' understanding . Yi Zeng argued for greater public literacy and clear understanding of AI's limitations . Rumman Chowdhury said true AI sovereignty requires human capital because only humans understand context and define performance . Kate Kallot argued that capacity must transfer through in-country training and eventual handover . Whitney Baird reinforced that humans, not only engineers but also philosophers and the public, must remain central in the chain of command .
Effective AI governance depends on building capacity not only for technical talent but also for government officials responsible for implementation (Bosun Tijani)
Education is central: people need literacy in data, algorithms, compute, applications, standards, and regulation, including legislators who draft AI laws (Tshilidzi Marwala)
AI literacy for the public is necessary because current systems are not magical intelligence but tools with limitations that society must understand clearly (Yi Zeng)
Human capital is the basis of real AI sovereignty because only people can understand context and judge whether AI performs appropriately in society (Rumman Chowdhury)
Capacity transfer must be built into government AI partnerships so local officials and engineers can eventually run systems independently (Kate Kallot)
Humans, including philosophers and the general public, must remain central in AI oversight because technical systems alone cannot determine trustworthy or socially acceptable outcomes (Whitney Baird)
This is strongly supported by prior policy work. IGF’s Policy Network on AI identified capacity building as intrinsic to all aspects of AI and data governance, including for civil servants and policymakers [S54]. UN-oriented work also frames AI capacity development as holistic, spanning institutions, member states, and broader communities [S60], and UN financing discussions identify skills as one of the core foundations for inclusive AI development [S44].
The intervenants broadly agreed that AI governance must be more inclusive and must not be dominated by a narrow set of actors. Whitney Baird said everyone with a stake in AI needs to be at the table and that governance cannot be achieved by a single stakeholder or country . Bosun Tijani argued that inclusion means access to AI benefits through domestic capabilities and infrastructure, not only adoption of systems built elsewhere . Rumman Chowdhury criticised governance that consolidates already powerful actors and called for concrete engagement with Global South and global majority countries . Kate Kallot similarly argued that the AI narrative has been driven by a specific part of the world and that more stories and models from the Global South should be surfaced . Marwala added that democratising access to the technology should be part of moving from talk to action .
AI governance must include all stakeholders because no single country or actor can govern AI alone; sustained multistakeholder collaboration is essential (Whitney Baird)
True inclusion means access to AI benefits through capabilities and infrastructure that let countries build for their own context, not just consume systems developed elsewhere (Bosun Tijani)
Global governance has too often reinforced already powerful actors; the next phase should deliberately include Global South and global majority voices and priorities (Rumman Chowdhury)
The dominant global AI narrative is too narrowly shaped by a small set of actors; the UN should help surface alternative models and local innovation from the Global South (Kate Kallot)
The UN dialogue should move from discussion to action, especially in democratising access to AI and helping define balances such as opportunity versus risk, transparency versus security, and synthetic versus authentic data (Tshilidzi Marwala)
This reflects longstanding concerns that global digital governance often excludes Global South actors in practice despite inclusive rhetoric [S55]. Recent AI discussions similarly stress representation of women and Global South organisations [S59], community participation alongside international cooperation [S42], and policy inclusion across local, national, regional, and international levels [S58].
Another clear area of agreement was the need for trusted institutions and stronger evaluation. Bosun Tijani said governance requires trusted institutions and impact measurement . Rumman Chowdhury argued that the real power in AI lies in evaluation and proposed independent evaluation bodies, localised standards, and procurement-linked compliance . Yi Zeng supported the need for stronger evaluation by presenting evidence that current models fail robust ethics and safety testing . Whitney Baird explicitly linked evaluation with building trust and certainty, and repeatedly returned to trust as a central benchmark .
Trust is a core condition for AI governance, and trusted institutions are necessary if governance frameworks are to be accepted and effective (Bosun Tijani)
The real power in AI lies in evaluation rather than development, because evaluation determines what counts as good, bad, right, and wrong in deployment (Rumman Chowdhury)
Countries should build independent evaluation bodies, adapt evaluation standards to regional and sectoral contexts, and tie compliance to public procurement (Rumman Chowdhury)
Robust testing shows that many current language models perform inconsistently on ethics and remain vulnerable on safety, proving that stronger evaluation is urgently needed (Yi Zeng)
Evaluation and accountability mechanisms help build trust and certainty for users, governments, and builders (Whitney Baird)
This aligns with established AI policy framing that transparency, explainability, and accountability are prerequisites for public trust [S43]. Technical and governance discussions also emphasise red-teaming, evaluation tools, and testing methods as foundations for safe deployment [S53], while authoritative UN-facing proposals stress traceability, peer review, and security testing to support reliable AI systems [S60].
Multiple intervenants agreed that AI governance must be grounded in local conditions and ownership. Bosun Tijani said countries need absorptive capacity, including connectivity, infrastructure, and development capability, or they will be limited to consumption rather than meaningful participation and governance . He also said real inclusion means being able to build for context . Kate Kallot argued that consultation is insufficient and that communities must shape systems from the design stage . She also stressed in-country data control, contractual capacity transfer, and open-source systems that local developers can extend . Rumman Chowdhury complemented this by saying only humans can understand context and define appropriate model performance .
Countries need absorptive capacity such as connectivity, infrastructure, and domestic development capability if they are to use and govern AI meaningfully (Bosun Tijani)
True inclusion means access to AI benefits through capabilities and infrastructure that let countries build for their own context, not just consume systems developed elsewhere (Bosun Tijani)
Communities must be involved from the design stage, bringing local use cases, edge cases, and lived experience before systems are built and deployed (Kate Kallot)
Sensitive national data should remain in-country under national jurisdiction so states can use advanced AI capabilities without surrendering control over critical information (Kate Kallot)
Capacity transfer must be built into government AI partnerships so local officials and engineers can eventually run systems independently (Kate Kallot)
Open-source and locally extensible systems allow domestic developers and communities to build on public AI infrastructure and generate local economic value (Kate Kallot)
Human capital is the basis of real AI sovereignty because only people can understand context and judge whether AI performs appropriately in society (Rumman Chowdhury)
This is reinforced by UNCTAD-based analysis that developing countries need skills, data, and infrastructure to shape AI according to local priorities rather than merely consume it [S42]. Broader digital policy work also argues that multilevel approaches must bring governance closer to affected communities and local cultural contexts [S46].
There was notable agreement that infrastructure is not a peripheral issue but a prerequisite for AI governance and participation. Bosun Tijani said insufficient connectivity and infrastructure limit both AI application and the ability to govern it, and warned that lack of support for infrastructure could create an AI gap larger than the internet divide . Kate Kallot underscored the need for nationally controlled infrastructure so countries can use advanced models without ceding control over critical data . Marwala linked practical action to democratising access to the technology .
Countries need absorptive capacity such as connectivity, infrastructure, and domestic development capability if they are to use and govern AI meaningfully (Bosun Tijani)
Access to shared compute and other foundational infrastructure should be clarified and expanded, or AI inequality may become worse than the earlier digital divide (Bosun Tijani)
Sensitive national data should remain in-country under national jurisdiction so states can use advanced AI capabilities without surrendering control over critical information (Kate Kallot)
The UN dialogue should move from discussion to action, especially in democratising access to AI and helping define balances such as opportunity versus risk, transparency versus security, and synthetic versus authentic data (Tshilidzi Marwala)
This is directly supported by discussions of the global compute divide. UN financing analysis identifies compute, energy, connectivity, data, skills, and adaptable models as core AI foundations [S44], while IGF discussions on bridging the compute divide describe infrastructure concentration, investment gaps, and skills shortages as barriers to equitable participation [S62]. Concerns about big tech concentration excluding broader participation also provide historical context [S42].
The panel showed broad agreement that sovereignty and national capacity should be pursued alongside, not instead of, international cooperation. Whitney Baird emphasised sustained collaboration across governments, industry, academia, civil society, and the international community . Marwala warned against fragmented governance and called for harmonisation and working-level coordination among institutions . Rumman Chowdhury explicitly said sovereignty should not lose the concept of cooperation and urged countries not to close doors to one another . Yi Zeng argued that the UN is the key platform able to gather 193 member states to tackle these questions seriously . Bosun Tijani likewise suggested the platform could help clarify access to shared compute and prerequisites across countries and regions .
AI governance must include all stakeholders because no single country or actor can govern AI alone; sustained multistakeholder collaboration is essential (Whitney Baird)
The main gap is fragmented and uncoordinated governance across international bodies, states, and industry, creating “AI governance arbitrage” that requires harmonisation and working-level coordination (Tshilidzi Marwala)
Sovereignty should not mean isolation; countries need ownership and control over AI systems while still preserving international cooperation (Rumman Chowdhury)
The dialogue should produce concrete outputs, including red lines for AI development and use, while treating ethics and safety as guides for healthy innovation rather than barriers (Yi Zeng)
True inclusion means access to AI benefits through capabilities and infrastructure that let countries build for their own context, not just consume systems developed elsewhere (Bosun Tijani)
This matches a well-established policy line that sovereignty and cooperation are not opposites. Multiple sources argue for balancing national control with cross-border collaboration [S42][S46], and IGF discussions describe collaborative sovereignty models that preserve national control while enabling interoperability and trusted exchange [S47].
Both intervenants focused on the implementation gap in governance. Tijani argued for practical national systems, strategy, and measurement rather than abstract principles . Marwala identified fragmentation and 'AI governance arbitrage' as the main problem and called for harmonisation and working-level coordination . Together, they pointed to governance as an institutional design and implementation challenge rather than a lack of principles. Tijani and Kallot shared a strongly sovereignty-oriented but practical view of AI participation. Tijani said countries need connectivity, infrastructure, and development capability so they can build for their own context rather than remain mere consumers . Kallot argued similarly for in-country data control, government-controlled infrastructure, and built-in capacity transfer so local teams can ultimately own the systems . These intervenants aligned on evaluation as a core governance tool. Chowdhury said evaluation is where societies define what is good, bad, right, and wrong, and proposed independent institutions and procurement-linked compliance . Yi Zeng provided empirical justification by showing that current systems perform inconsistently and remain vulnerable under stronger testing . Baird explicitly endorsed evaluation as a means of building trust and certainty . Marwala, Yi, and Baird all stressed that human understanding and broad literacy are indispensable. Marwala called for education spanning technical content, standards, and legislation . Yi argued the public needs to understand AI's real limitations and not treat it as magical intelligence . Baird broadened the point by saying oversight requires humans, philosophers, and the public, not only engineers . All three argued that inclusion must be substantive rather than symbolic. Chowdhury called for a reset away from governance that consolidates existing power and towards engagement with Global South and global majority voices . Kallot said local builders and communities should be supported and given platforms because they will shape AI in practice . Tijani said inclusion means countries having capabilities to build for context, not merely adopting imported systems . Chowdhury and Kallot both tied legitimacy in AI to human context. Chowdhury said only humans can understand context and define model performance . Kallot said communities must shape AI from the design stage by contributing local use cases, edge cases, and lived experience . Their shared view is that context-sensitive governance depends on direct human participation, not generic technical deployment.
An unexpected area of consensus was that intervenants who emphasised sovereignty did not advocate isolation. Tijani linked inclusion to domestic capability and context-building . Kallot emphasised national jurisdiction over critical data and infrastructure . Chowdhury explicitly argued that sovereignty should not lose the concept of cooperation . Baird and Marwala both reinforced the need for multistakeholder collaboration and harmonisation across actors and jurisdictions .
A notable and somewhat unexpected convergence was the prominence given to evaluation. Chowdhury elevated evaluation above development as the place where social norms are set . Yi Zeng reinforced this with technical evidence showing that current systems fail robust ethics and safety tests . Baird embraced evaluation as a route to trust and certainty , while Tijani connected trusted institutions and impact measurement to workable governance .
Although much AI policy discussion often focuses on enabling innovation, there was unexpected agreement here that restraint is also legitimate. Yi Zeng called for red lines and repeated that societies should be cautious about what kinds of AI are brought into the world . Whitney Baird supported the need for humans, philosophers, and broad social judgement in deciding deployment and trust . Chowdhury's claim that evaluation determines what is good and bad in deployment also aligns with the idea that some systems may fail normative tests .
The panel displayed high consensus on the main structural issues in AI governance: the need to move from principles to implementation, the centrality of capacity building and education, the importance of inclusion of Global South and local voices, the need for trusted institutions and strong evaluation, and the requirement for infrastructure and local capability to support meaningful participation .
The intervenants agreed that implementation is the core challenge, but they differed on what should come first. Bosun Tijani prioritised national strategies, trusted institutions, measurement, public-sector capacity, and investment . Tshilidzi Marwala argued that the biggest gap is fragmentation across international, state, and industry regimes, requiring harmonisation and working-level coordination . Rumman Chowdhury located the central leverage point in independent evaluation systems and procurement-linked compliance . Kate Kallot emphasised co-design, local ownership, and community participation before deployment . Yi Zeng focused on concrete outputs such as red lines grounded in ethics and safety to steer development .
Move from principles to practical national systems and strategies, with measurable outcomes, public-sector capacity, trusted institutions, and investment in AI infrastructure and talent (Bosun Tijani)
The main gap is fragmented and uncoordinated governance across international bodies, states, and industry, creating “AI governance arbitrage” that requires harmonisation and working-level coordination (Tshilidzi Marwala)
Countries should build independent evaluation bodies, adapt evaluation standards to regional and sectoral contexts, and tie compliance to public procurement (Rumman Chowdhury)
Communities must be involved from the design stage, bringing local use cases, edge cases, and lived experience before systems are built and deployed (Kate Kallot)
The dialogue should produce concrete outputs, including red lines for AI development and use, while treating ethics and safety as guides for healthy innovation rather than barriers (Yi Zeng)
There was a substantive difference in how sovereignty was framed. Bosun Tijani argued that meaningful inclusion requires domestic capabilities and infrastructure so countries can build for their own context rather than merely adopt systems built elsewhere . Kate Kallot advanced a stronger control-based sovereignty model in which sensitive government data stays in-country under national jurisdiction and infrastructure control . Rumman Chowdhury supported sovereignty and ownership, but explicitly warned against losing international cooperation or closing doors between countries . Whitney Baird's framing stressed that everyone with a stake must be at the table and that no single country or stakeholder can govern AI alone .
True inclusion means access to AI benefits through capabilities and infrastructure that let countries build for their own context, not just consume systems developed elsewhere (Bosun Tijani)
Sovereignty should not mean isolation; countries need ownership and control over AI systems while still preserving international cooperation (Rumman Chowdhury)
Sensitive national data should remain in-country under national jurisdiction so states can use advanced AI capabilities without surrendering control over critical information (Kate Kallot)
AI governance must include all stakeholders because no single country or actor can govern AI alone; sustained multistakeholder collaboration is essential (Whitney Baird)
This disagreement mirrors an established international debate. Sources describe sovereignty as contested across national, regional, and personal dimensions [S46][S47], with some advocating a multi-level sovereignty-plus-cooperation approach [S42], while others warn that sovereignty rhetoric can be appropriated by securitising state agendas unless socially anchored [S45].
Bosun Tijani stressed urgency in moving into practical systems and investment because AI is already disrupting daily life and economic sectors . Yi Zeng emphasised that present models still fail ethics and safety expectations and argued for red lines and caution, even noting that some applications perhaps should not be built . Tshilidzi Marwala framed governance as a balancing problem between opportunity seeking and risk aversion, and between transparency and security . Whitney Baird reinforced the need for humans, including non-engineers such as philosophers, to remain central in deciding how AI is used and trusted .
Move from principles to practical national systems and strategies, with measurable outcomes, public-sector capacity, trusted institutions, and investment in AI infrastructure and talent (Bosun Tijani)
The dialogue should produce concrete outputs, including red lines for AI development and use, while treating ethics and safety as guides for healthy innovation rather than barriers (Yi Zeng)
The UN dialogue should move from discussion to action, especially in democratising access to AI and helping define balances such as opportunity versus risk, transparency versus security, and synthetic versus authentic data (Tshilidzi Marwala)
Humans, including philosophers and the general public, must remain central in AI oversight because technical systems alone cannot determine trustworthy or socially acceptable outcomes (Whitney Baird)
This reflects a central policy tension in AI governance. National and regional strategies seek to balance innovation with safeguards [S43][S50], while recent analysis notes pressure for rapid deployment and competitiveness alongside stricter safety and trust requirements [S44]. IGF discussions also recommend gradual rollout beginning with narrow, low-risk use cases [S53].
Rumman Chowdhury asserted that the decisive power in AI is evaluation, because evaluation defines what is right or wrong and should therefore be institutionalised through independent bodies and procurement rules . Bosun Tijani instead foregrounded trusted institutions, leadership, and investment as the core practical conditions for governance . Tshilidzi Marwala treated education and literacy across society, standards, and legislatures as the main route to responsible governance . Yi Zeng supported strong evaluation through testing evidence, but from a scientific ethics-and-safety perspective rather than Chowdhury's institutional procurement approach .
The real power in AI lies in evaluation rather than development, because evaluation determines what counts as good, bad, right, and wrong in deployment (Rumman Chowdhury)
Trust is a core condition for AI governance, and trusted institutions are necessary if governance frameworks are to be accepted and effective (Bosun Tijani)
Education is central: people need literacy in data, algorithms, compute, applications, standards, and regulation, including legislators who draft AI laws (Tshilidzi Marwala)
Robust testing shows that many current language models perform inconsistently on ethics and remain vulnerable on safety, proving that stronger evaluation is urgently needed (Yi Zeng)
External sources show multiple competing loci of accountability: national strategies and state institutions [S43], technical transparency and explainability [S43][S60], assurance and testing frameworks [S49][S53], and socially anchored governance arrangements beyond the state alone [S45]. This demonstrates that accountability is not settled in one institutional location.
An unexpected divide appeared within a generally pro-governance panel over what ethics and safety actually require in practice. Yi Zeng stressed red lines and technical testing failures . Chowdhury focused on evaluation institutions and procurement enforcement . Tijani emphasised trusted institutions and state capability . Kallot treated ethical governance as beginning with community co-design and local ownership before code is written . This was not a disagreement over whether ethics matters, but over where ethics should be operationalised.
The panel broadly supported inclusion, but unexpectedly diverged on what exclusion most fundamentally consists of. Tijani framed it primarily as a material infrastructure and compute gap . Chowdhury framed it as a governance and power imbalance in who gets represented . Kallot framed it as a narrative and model monopoly in how AI is imagined and whose innovations are recognised .
The panel showed low-to-moderate disagreement. There was strong consensus on core goals: AI governance must be practical rather than rhetorical, more inclusive of the Global South, grounded in capacity building, and oriented towards trust, safety, and human oversight . The disagreements were mainly about sequencing and institutional design: whether to prioritise national capacity, international harmonisation, evaluation systems, community co-design, or ethics-based red lines .
All five shared the goal of moving from abstract discussion to practical implementation, but they proposed different pathways. Tijani argued for country strategies, institutions, and investment ; Marwala for harmonisation and working-level coordination ; Chowdhury for independent evaluation and procurement leverage ; Kallot for local ownership and co-design ; and Yi for red lines and ethics-and-safety outputs .
Move from principles to practical national systems and strategies, with measurable outcomes, public-sector capacity, trusted institutions, and investment in AI infrastructure and talent (Bosun Tijani) The main gap is fragmented and uncoordinated governance across international bodies, states, and industry, creating “AI governance arbitrage” that requires harmonisation and working-level coordination (Tshilidzi Marwala) Countries should build independent evaluation bodies, adapt evaluation standards to regional and sectoral contexts, and tie compliance to public procurement (Rumman Chowdhury) Communities must be involved from the design stage, bringing local use cases, edge cases, and lived experience before systems are built and deployed (Kate Kallot) The dialogue should produce concrete outputs, including red lines for AI development and use, while treating ethics and safety as guides for healthy innovation rather than barriers (Yi Zeng)
These intervenants agreed on the goal of broader inclusion, especially for countries and communities outside dominant AI centres, but differed on means and emphasis. Tijani focused on infrastructure and capability for context-specific building ; Kallot on supporting local builders and communities directly ; Chowdhury on sovereignty combined with cooperation ; and Baird on broad multistakeholder participation across sectors and countries .
True inclusion means access to AI benefits through capabilities and infrastructure that let countries build for their own context, not just consume systems developed elsewhere (Bosun Tijani) Builders, developers, and communities in their own countries should be supported and given platforms, since they will shape AI’s future in practice (Kate Kallot) Sovereignty should not mean isolation; countries need ownership and control over AI systems while still preserving international cooperation (Rumman Chowdhury) AI governance must include all stakeholders because no single country or actor can govern AI alone; sustained multistakeholder collaboration is essential (Whitney Baird)
All four endorsed human capacity as essential, but they targeted different audiences and purposes. Tijani stressed public-sector officials implementing governance ; Marwala emphasised broad education including legislators and standards in classrooms ; Yi focused on public literacy about AI's real limitations ; and Baird highlighted human judgement, including philosophers and the general public, in oversight and trust .
Effective AI governance depends on building capacity not only for technical talent but also for government officials responsible for implementation (Bosun Tijani) Education is central: people need literacy in data, algorithms, compute, applications, standards, and regulation, including legislators who draft AI laws (Tshilidzi Marwala) AI literacy for the public is necessary because current systems are not magical intelligence but tools with limitations that society must understand clearly (Yi Zeng) Humans, including philosophers and the general public, must remain central in AI oversight because technical systems alone cannot determine trustworthy or socially acceptable outcomes (Whitney Baird)
There was broad agreement that trust and accountability matter, but not on the main mechanism. Chowdhury prioritised evaluation institutions and standards ; Yi presented testing evidence for stronger evaluation of ethics and safety ; Baird linked evaluation to trust and certainty ; while Tijani located trust mainly in institutions, leadership, and implementation credibility .
The real power in AI lies in evaluation rather than development, because evaluation determines what counts as good, bad, right, and wrong in deployment (Rumman Chowdhury) Robust testing shows that many current language models perform inconsistently on ethics and remain vulnerable on safety, proving that stronger evaluation is urgently needed (Yi Zeng) Evaluation and accountability mechanisms help build trust and certainty for users, governments, and builders (Whitney Baird) Trust is a core condition for AI governance, and trusted institutions are necessary if governance frameworks are to be accepted and effective (Bosun Tijani)
- There was broad agreement that AI governance must move beyond high-level principles to practical implementation through national strategies, measurable outcomes, trusted institutions, public-sector capability, and sustained investment in infrastructure, compute, connectivity, and talent.
- Intervenants highlighted a major implementation gap caused by fragmented and uncoordinated governance across international organisations, governments, and industry, creating opportunities for 'AI governance arbitrage' and undermining trust and efficiency.
- Ethical AI principles are already widely articulated, but current AI systems still perform inconsistently on ethics and safety tests in practice, showing that implementation and enforcement lag behind stated commitments.
- Trust emerged as a central theme: effective AI governance depends on trusted institutions, credible evaluation, and accountability mechanisms that users, governments, and builders can rely on.
- Inclusion was treated as essential to legitimate AI governance. Countries should not only adopt systems built elsewhere but also gain the capability and infrastructure needed to build AI suited to their own contexts.
- Global South and global majority participation was identified as insufficient in current governance processes, with calls for the UN dialogue to broaden representation and surface local innovation and alternative development models.
- Intervenants emphasised that sovereignty should mean local ownership, control, and context-sensitive capability, while still preserving international cooperation rather than encouraging isolation.
- Capacity building was seen as foundational, including technical talent, public officials, legislators, regulators, and the general public, so that societies can understand, govern, and use AI responsibly.
- Human participation was repeatedly stressed as indispensable: only people can judge context, define acceptable performance, contribute lived experience, and oversee what kinds of AI should or should not be built.
- Evaluation was framed as a core governance function. Independent evaluation bodies, locally adapted standards, and procurement-linked compliance were proposed as ways to make governance operational and accountable.
- Local ownership of data and systems was presented as a practical route to sovereignty, including keeping critical national data in-country, embedding capacity transfer into contracts, and enabling local developers to extend public AI systems.
- The UN was seen as a uniquely suitable platform for convening all member states and stakeholders, but several intervenants stressed that it must now produce concrete outputs and move from dialogue to action.
“Bosun Tijani argued that AI governance must move 'away from governance principles into practical systems' and linked effective governance to strategy, public-sector capacity, trusted institutions, connectivity, infrastructure, and investment.”
“Tshilidzi Marwala described the biggest disconnect as 'AI governance arbitrage', where actors can exploit fragmented international, national, and industry governance models by moving to jurisdictions with weaker rules.”
“Rumman Chowdhury said that 'the power of artificial intelligence lies not in development but in evaluation' and argued that true AI sovereignty depends on human capital and the ability to define what counts as 'good and bad and right and wrong'.”
“Kate Kallot argued that 'consultation is not fit for purpose' and that genuine sovereignty requires local ownership, with data staying in-country, mandatory capacity transfer, and communities being able to build on top of systems.”
“Yi Zeng presented empirical evidence that while language models can score highly on standard ethical questions, their performance drops sharply when the same questions are rephrased, and that even top systems remain vulnerable to adversarial attack at significant rates.”
“Yi Zeng added that AI ethics is 'not only about what we shouldn't do, but also what we should do', linking ethics to the unfinished Sustainable Development Goals and arguing that safety and ethics provide direction rather than hinder innovation.”
“Rumman Chowdhury warned that current global AI governance has tended to consolidate 'the people who are already powerful' and argued that these dialogues offer a chance to reset by genuinely incorporating Global South and global majority voices while preserving international cooperation.”
“Kate Kallot said the AI narrative has been too heavily defined by 'a very specific part of the world by very specific actors' and challenged the assumption that the only valid path is through large-scale general-purpose models and gigawatt-scale infrastructure.”
“Tshilidzi Marwala called for moving 'from talk to action' and then complicated the discussion by saying governance is fundamentally a balancing problem: opportunity versus risk, transparency versus security, synthetic versus authentic data, and even accuracy versus truth.”
“Bosun Tijani concluded that inclusion must mean access to the benefits of AI through access to capabilities, especially infrastructure, warning that without investment in prerequisites the AI divide could become 'bigger than what we were battling with when we were talking about the emergence of Internet'.”
How can countries move from broad AI governance principles to practical, measurable governance systems tailored to national contexts?
He argued that principles alone are insufficient and that each country needs clear strategies, measurement approaches and implementation systems. This is important because governance must produce real outcomes rather than remain aspirational.
What methods and indicators should be used to measure the impact and effectiveness of AI governance frameworks?
He stressed the need to measure what is being governed and to assess whether frameworks serve national purposes. This is important for accountability, policy learning and evidence-based improvement.
How can public sector capacity be built so that officials can keep pace with rapid AI development and implement governance effectively?
Both intervenants highlighted the need to educate and train government actors, including officials and legislators. This matters because weak institutional capability undermines implementation even when policies exist.
What are the essential national prerequisites and absorptive capacities needed for countries to benefit from and govern AI effectively, including connectivity, infrastructure and local development capability?
He emphasised that governance depends on broader digital readiness and that countries without infrastructure or development capacity will struggle both to use and regulate AI. This is important to avoid deepening global inequality.
How can trust in institutions responsible for AI governance be built and maintained?
Trust was repeatedly identified as central to successful governance. This is important because public confidence affects compliance, legitimacy and the adoption of AI systems.
How can fragmented AI governance models across international bodies, states and industry be harmonised to prevent regulatory arbitrage?
He described a major disconnect caused by uncoordinated governance models that allow actors to seek out weaker jurisdictions. This is important for consistency, fairness and preventing loopholes.
What mechanisms could incentivise good behaviour around AI, particularly among companies?
He explicitly asked what mechanisms would make actors respect adopted governance models. This is important because rules without incentives or enforcement may not shape behaviour.
How can standards, policies and regulations for AI be simplified and integrated into education and training, including classrooms and legislative development?
He questioned whether standards are being brought into classrooms and highlighted the need to educate legislators. This is important for embedding responsible practice early and improving lawmaking quality.
How can international organisations and other institutions cooperate not only at dialogue level but at working level on AI governance?
He said institutions need to be brought together operationally, not only for discussion. This is important because implementation depends on practical coordination mechanisms.
How can broad public involvement in AI governance and evaluation be scaled rather than remaining small-scale or symbolic?
She said the question has shifted from how people can get involved to how involvement can scale. This is important because meaningful participation is necessary for legitimacy and context-sensitive evaluation.
How should countries build independent AI evaluation bodies and evaluation infrastructure as part of their AI stack?
She argued that evaluation is often overlooked despite being central to defining acceptable performance and outcomes. This is important because evaluation shapes accountability, safety and sovereignty.
How can evaluation standards be operationalised for regional and domain-specific contexts?
She called for standards to be translated into practical regional and sectoral mechanisms. This matters because generic standards may fail to reflect local realities and use cases.
How can AI evaluations be linked to government procurement so that public contracts require compliance with governance standards?
She proposed tying evaluation requirements to procurement eligibility. This is important because procurement can be a powerful lever for enforcing responsible AI practices.
What governance models best enable countries to move from being passive recipients of foreign AI systems to shaping development priorities themselves?
She framed this as a question of sovereignty and power. This is important for ensuring that AI serves local needs rather than reproducing external priorities.
What practical models best ensure local ownership of AI systems, including keeping critical data in-country under national jurisdiction?
She presented in-country data control as a core principle of sovereign partnerships. This is important because control over sensitive data affects security, autonomy and public trust.
How can capacity transfer be built into AI partnerships and contracts so that governments and local teams can eventually own and operate systems independently?
She argued that capacity must transfer over time and that sustainability is measured by reduced external dependence. This is important for long-term national capability and resilience.
How can communities become genuine co-designers and builders of AI systems rather than merely being consulted after key decisions are made?
She said communities should define problems, use cases and edge cases before systems are built. This is important because co-design improves relevance, legitimacy and local economic benefit.
How can local developers and communities in the Global South be supported to build on top of open AI infrastructure and generate local economic value?
She highlighted open-source approaches and local training as ways to extend systems locally. This is important for inclusion, innovation and sustainable digital development.
How can high-level ethical AI principles be translated into detailed technical requirements and robust evaluation methods?
He described mapping broad principles into many finer considerations and testing them against language models. This is important because ethical consensus is not enough without technically actionable implementation.
How robust are AI models when ethical and safety tests are reformulated in many different ways, and what does this reveal about current model reliability?
He noted sharp performance drops when equivalent questions were rephrased and cited vulnerability to adversarial attacks. This is important because apparent benchmark success may mask unstable real-world performance.
What is the actual current level of ethical and safety performance of application-level language models in real-world conditions?
He argued that scientists must speak truthfully about current limitations and risks. This is important because policy and deployment decisions depend on accurate assessment rather than hype.
How can public understanding of AI be improved so that general literacy matches the realities and limitations of current systems?
He called for scientists to help raise public understanding and dispel the idea that AI is magical. This is important for democratic oversight and informed public participation.
What kinds of AI applications should perhaps not be built at all, and where should red lines be drawn for AI development?
He explicitly raised the need to be cautious about which applications are pursued and later called for red lines. This is important because governance must address not only how to build AI safely, but whether some uses are acceptable.
How can the United Nations platform be strengthened with resources, people and support to enable meaningful international AI governance over the next five years?
He argued that the UN is the best platform for global coordination but lacks sufficient support. This is important because multilateral capacity affects whether dialogue can lead to implementation.
How can AI be used as an enabling technology to accelerate progress on the Sustainable Development Goals, especially where progress remains incomplete?
He raised this as something the international community should actively do, not just avoid harms. This is important because it frames AI governance around positive global public benefit.
How can global AI governance be reset so that it does not simply consolidate existing power among already powerful actors?
She warned that current global governance trends favour entrenched power. This is important because governance legitimacy depends on broad representation and fairness.
How can Global South and global majority countries be more concretely incorporated into AI governance processes and decision-making?
All three stressed inclusion, voice and capacity for countries outside dominant AI centres. This is important to avoid exclusion and ensure governance reflects diverse needs and realities.
How can AI sovereignty be advanced without undermining international cooperation?
She raised concern that geopolitical tensions could turn sovereignty into isolation. This is important because effective governance requires both local control and cross-border collaboration.
How can the dominant global narrative about AI be deconstructed and reconstructed to reflect approaches beyond large-scale general-purpose models and massive infrastructure projects?
She argued that current narratives are driven by a narrow set of actors and do not reflect the full range of workable approaches. This is important for broadening policy imagination and making room for context-specific innovation.
What evidence from on-the-ground AI deployments in the Global South is needed to show what is actually working and what is not?
She called for more stories and evidence from real implementations. This is important because governance and investment should be based on demonstrated outcomes rather than assumptions.
How can governments, companies and institutions move from repeated discussion to concrete action on democratising access to AI in the Global South?
He explicitly said he wanted to see movement from talk to action. This is important because many governance themes have been discussed for years without sufficient implementation.
How should the balance be set between opportunity-seeking and risk aversion in AI governance?
He described governance as fundamentally a balancing problem and said the right balance is unclear. This is important because overemphasis on either side can either stifle benefits or permit harm.
Where should the balance be drawn between transparency and security in AI systems, and who should determine that balance?
He posed this explicitly as a governance dilemma. This is important because more transparency can improve accountability but may create vulnerabilities.
What limits or standards should govern the use of synthetic data versus authentic data in AI training, and who should decide them?
He raised this as another unresolved balancing issue. This is important because data provenance affects performance, fairness, privacy and trust.
What new technical paradigms are needed to address algorithmic limitations of current AI systems, particularly around truth rather than mere accuracy?
He argued that current dominant AI approaches are structurally limited and that investment in new paradigms is needed. This is important because governance and safety depend partly on the capabilities and limitations of underlying methods.
How can nations gain access to shared compute and other infrastructure needed to build AI for local contexts?
He called for clarity on access to shared compute within and across regions. This is important because infrastructure access shapes whether countries can participate meaningfully in AI development.
How can investment and support be mobilised for the infrastructure prerequisites required for countries to appropriate AI effectively?
He warned that without infrastructure investment, AI inequality could exceed the digital divide seen with the internet. This is important because material constraints may block both development and governance capacity.
