Empowering Voices: Strengthening CSO and Youth Participation in AI Governance
Résumé
La discussion a porté sur la gouvernance de l'IA, en mettant particulièrement l'accent sur la nécessité de la rendre plus inclusive, démocratique et réceptive à la participation de la société civile et des jeunes . Le modérateur a cadré la session autour d'outils et de mécanismes concrets permettant une implication sociétale plus large dans la gouvernance de l'IA, tandis que les panélistes ont présenté des projets couvrant la documentation communautaire, l'infrastructure d'évaluation et la mise en œuvre réglementaire . Emaan Yasin Malik a indiqué que ses préoccupations ont été suscitées après qu'un hackathon technologique pour les jeunes au Pakistan a attiré des candidatures provenant majoritairement de jeunes hommes musulmans, avec une faible participation féminine et aucune représentation des communautés hindoue, chrétienne ou sikhe. Des questions se sont également posées quant à savoir si la société civile avait été véritablement consultée lors de l'élaboration de la politique nationale pakistanaise en matière d'IA . En réponse, Malik a décrit un projet pilote mené avec la communauté chrétienne visant à documenter les préjudices facilités par l'IA, tels que les deepfakes entraînant des accusations de blasphème et des violences. Parmi les objectifs supplémentaires figurent la création de voies d'orientation vers le système de plaintes de la Commission nationale des droits de l'homme, ainsi que l'élaboration de ressources dans les langues locales, notamment l'ourdou et le pendjabi . Addie Achan a ajouté que le projet Kaleidoscope aide les communautés locales à évaluer et à gouverner l'IA. Elle a exprimé sa crainte que les projets « IA pour le bien commun » n'exportent des biais californiens ou américains dans d'autres contextes sans garde-fous appropriés . Vasileios Rovilos a expliqué que Credo AI se concentre sur la couche opérationnelle de la réglementation en constituant des bibliothèques de risques, des bibliothèques de contrôles et des techniques d'atténuation afin de créer des structures de preuve et de responsabilité pour la gouvernance de l'IA . Un thème majeur a été la nécessité pour la société civile de disposer d'un meilleur accès aux données probantes, aux financements et à la collaboration. Malik a soutenu qu'en Asie du Sud, les OSC peinent à construire des infrastructures de preuve indépendantes, car leur travail est financé par des donateurs, à court terme, répétitif et cloisonné, tandis que l'accès aux ensembles de données détenus par les gouvernements est également difficile . Achan a abondé dans ce sens en soulignant que beaucoup de travaux se déroulent en vase clos, et a suggéré que les OSC peuvent collecter des données probantes qui sont ensuite codifiées via des infrastructures existantes, citant en exemple une fiducie de données en langue māorie en Nouvelle-Zélande comme modèle de gestion communautaire . Rovilos a plaidé pour la collaboration, l'intégrité des données probantes et des taxonomies communes afin d'éviter la fragmentation dans la gouvernance mondiale de l'IA . Sur la question de la participation des jeunes, les panélistes ont convenu que les jeunes ont besoin d'un pouvoir réel plutôt que d'une inclusion symbolique. Malik a souligné les inégalités d'accès parmi les étudiants, les barrières linguistiques dans l'explication de l'IA, la croyance erronée selon laquelle une expertise en programmation est nécessaire, ainsi que la valeur des universités, des forums de jeunesse et des institutions nationales des droits de l'homme dans la construction d'un engagement en matière d'IA fondé sur les droits . Achan a distingué le tokenisme d'une véritable prise de décision partagée, en soutenant que les jeunes devraient avoir autorité sur les décisions qui les concernent . Rovilos a ajouté que les jeunes figurent parmi les personnes les plus exposées aux systèmes d'IA, des outils de surveillance des examens aux outils de recrutement, et devraient donc être impliqués dès le début, se voir accorder une influence et être soutenus par des actions concrètes et des efforts en matière de culture numérique de l'IA . Dans une perspective à cinq ans, les intervenants ont appelé à des rôles plus formalisés et mieux dotés en ressources pour les jeunes dans la gouvernance de l'IA. Malik a proposé une participation obligatoire des jeunes aux processus internationaux de reporting numérique et la création d'une commission numérique indépendante dirigée par des jeunes au Pakistan . Achan a plaidé pour un vote participatif transparent sur les priorités en matière d'IA, associé à des évaluations indépendantes permettant de vérifier si les systèmes répondent aux besoins du public . Dans l'échange final, le panel a également noté que les parents et les enseignants ne sont pas encore pleinement équipés pour enseigner l'IA, mais pourraient faire davantage avec des ressources accessibles, tandis que la gouvernance des systèmes d'IA plus avancés devrait progresser à travers des attentes communes, des processus multipartites et un renforcement de la culture numérique de l'IA . Dans l'ensemble, la discussion a convergé vers la collaboration, les données probantes et la participation des jeunes comme conditions essentielles d'une gouvernance de l'IA plus équitable .Points clés
- Le thème central du panel était la construction d'une gouvernance de l'IA plus inclusive, plurielle et démocratique, en impliquant la société civile, les communautés locales et les jeunes, le modérateur ayant cadré la session autour d'outils et de mécanismes concrets pour une participation plus large à la gouvernance de l'IA. - Emaan Yasin Malik a mis en lumière l'exclusion et la sous-représentation dans le paysage technologique et politique de l'IA au Pakistan, notant une participation déséquilibrée lors d'un hackathon pour les jeunes et des préoccupations selon lesquelles la politique nationale pakistanaise en matière d'IA affirmait avoir consulté des groupes de défense des droits, ce que beaucoup ont démenti. En réponse, elle a décrit un projet pilote axé sur la communauté chrétienne visant à documenter les préjudices facilités par l'IA, à créer des voies d'orientation vers la Commission nationale des droits de l'homme et à élaborer des ressources communautaires dans les langues locales. - Addie Achan et Vasileios Rovilos ont tous deux souligné que l'efficacité de la gouvernance de l'IA repose sur des données probantes et une infrastructure opérationnelle. Addie a décrit l'approche de Kaleidoscope comme « données probantes plus infrastructure égale confiance », en utilisant les contributions des communautés pour élaborer des référentiels et des évaluations de l'IA pour les déploiements locaux. Vasileios a de même plaidé pour des bibliothèques de risques, des bibliothèques de contrôles et des techniques d'atténuation qui traduisent la réglementation en pratique opérationnelle et créent des structures de responsabilité. - Un point de discussion majeur a été la difficulté que rencontrent les organisations de la société civile à participer de manière significative à la gouvernance de l'IA, en particulier dans les contextes à faibles ressources. Emaan a évoqué les cycles de financement courts imposés par les donateurs, la duplication des projets, le travail cloisonné et les difficultés d'accès aux ensembles de données gouvernementales fragmentées en Asie du Sud. Addie a plaidé pour la collaboration et pour que les OSC collectent des données probantes pouvant être codifiées via des structures de gouvernance existantes, tandis que Vasileios a insisté sur la combinaison de données probantes indépendantes, de taxonomies communes et de collaboration pour éviter la fragmentation et accroître l'influence. - La participation des jeunes est apparue comme une priorité essentielle, les intervenants soutenant que les jeunes ont besoin de plus qu'une représentation symbolique. Emaan a souligné les inégalités d'accès, les barrières linguistiques et les idées reçues selon lesquelles seuls les programmeurs peuvent façonner la gouvernance de l'IA, et a proposé de travailler à travers les écoles, les universités et les institutions nationales des droits de l'homme. Addie a utilisé un cadre opposant le tokenisme à une véritable prise de décision partagée, en soutenant que les jeunes devraient disposer d'une autorité réelle. Vasileios a renforcé la nécessité d'une implication proactive, d'un suivi concret et d'une culture numérique de l'IA, notamment parce que les jeunes figurent parmi les personnes les plus touchées par les systèmes d'IA. Dans une perspective à cinq ans, le panel a appelé à une inclusion obligatoire des jeunes dans les rapports internationaux, à la création d'organes numériques indépendants dirigés par des jeunes, à des systèmes participatifs transparents pour l'évaluation des outils d'IA, à davantage de financements et à des engagements institutionnels plus solides en faveur de la culture numérique de l'IA.L'objectif général de la discussion était d'explorer comment la gouvernance de l'IA peut devenir plus inclusive, fondée sur des données probantes et démocratique, notamment en renforçant le rôle de la société civile et en veillant à ce que les jeunes et les communautés marginalisées ne soient pas simplement consultés de manière symbolique, mais soient en mesure de façonner les décisions dans la pratique.
Le ton général de la discussion a été constructif, réflexif et collaboratif tout au long. Il a débuté de manière pratique et conversationnelle, le modérateur invitant explicitement à la discussion plutôt qu'à des présentations formelles. Il est ensuite devenu plus sérieux et urgent lorsque les intervenants ont décrit l'exclusion, la faiblesse des consultations, les préjudices en ligne et les obstacles structurels à la participation. Vers la fin, le ton est devenu plus prospectif et orienté vers les solutions, notamment lors de la discussion sur la participation des jeunes, les futures réformes institutionnelles et les questions du public sur l'AGI, l'éducation et le dialogue intergénérationnel.
Intervenants
- Dr. Pedro dos Santos Maia - Modérateur de la session sur la gouvernance de l'IA et la gouvernance inclusive et diversifiée de l'IA ; a présidé la discussion et la séance de questions-réponses. - Mme Emaan Yasin Malik - Praticienne des droits de l'homme spécialisée dans les droits numériques, la protection des femmes et des enfants, et les droits des communautés minoritaires ; coordinatrice de programme à la Commission/Comité national des droits de l'homme du Pakistan. - Mme Addie Achan - Fondatrice et directrice exécutive du projet Kaleidoscope, une organisation à but non lucratif axée sur la réduction des risques liés à l'IA, la collecte de données probantes et l'implication des communautés locales dans le mouvement IA pour le bien commun ; ancienne ingénieure en IA et ancienne responsable IA au sein d'une fondation philanthropique finançant des déploiements d'IA pour le bien commun. - M. Vasileios Rovilos - Directeur de la politique européenne chez Credo AI ; dirige la pratique de politique européenne de l'entreprise et supervise la mise en œuvre de l'AI Act de l'UE et des réglementations numériques connexes, notamment le DSA, le DMA, le RGPD, NIS2 et le CRA. - Public - Participants du public posant des questions lors de la séance de questions-réponses. Intervenants supplémentaires : - Aucun clairement identifié par son nom au-delà des intervenants listés.Le modérateur, Dr Pedro dos Santos Maia, a présenté le panel comme une conversation sur la manière de construire une gouvernance de l'IA plus inclusive et diversifiée, en l'articulant explicitement autour de mécanismes pratiques plutôt que de discours formels . Il a invité les trois panélistes - Emaan Yasin Malik, Addie Achan et Vasileios Rovilos - à expliquer quels outils ou processus concrets ils développaient, quelle lacune en matière de gouvernance ces outils comblaient, et pourquoi ils avaient choisi ce point de départ . Cela a donné à la discussion une orientation pratique axée sur des mécanismes concrets d'inclusion dans la gouvernance de l'IA .
Malik a ancré ses remarques liminaires dans le contexte institutionnel et social du Pakistan . Elle a expliqué que la Commission nationale des droits de l'homme se situe entre la société civile et le gouvernement, et cherche à faire le lien entre les deux . Elle a ensuite décrit un hackathon technologique pour les jeunes organisé avec la Cour suprême, dans lequel la majorité des candidats étaient de jeunes hommes musulmans, environ 20 pour cent seulement étaient des femmes, et aucun candidat ne provenait des communautés hindoue, chrétienne ou sikh . Elle a présenté cela comme le signe d'une exclusion plus large, façonnée par des hiérarchies sociales et communautaires . Elle a établi un lien avec les préoccupations concernant la politique nationale d'IA du Pakistan, indiquant que bien que cette politique affirme que la société civile et les groupes de défense des droits avaient été consultés, plusieurs organisations de premier plan ont déclaré ne pas avoir été réellement incluses .
Malik a ensuite présenté un projet pilote centré sur la communauté chrétienne du Pakistan . La première étape consistait à documenter les préjudices liés à l'IA avec les églises, les écoles chrétiennes, les OSC et les membres de la communauté . Elle a donné l'exemple des deepfakes susceptibles de déclencher des accusations de blasphème et, par conséquent, d'entraîner des incitations à la violence, des violences de foule ou des arrestations . La deuxième étape visait à créer une voie d'orientation vers le système de plaintes de la Commission, afin que les agents chargés des plaintes puissent traiter ces cas plus efficacement . La troisième étape, qu'elle a décrite en termes plus prudents, consistait à développer des ressources accessibles en ourdou et en pendjabi, et à veiller à ce que les contributions de la communauté parviennent également aux processus d'élaboration des politiques .
Achan a présenté l'approche de Kaleidoscope centrée sur la communauté en matière de gouvernance de l'IA . S'appuyant sur son expérience d'ancienne ingénieure en IA, puis de responsable IA au sein d'une fondation philanthropique soutenant des travaux d'IA à vocation sociale, elle a dit croire toujours au potentiel bénéfique de l'IA, mais a soutenu que de nombreux déploiements manquaient de garde-fous adéquats . Sa préoccupation était que des outils largement développés en Californie ou aux États-Unis pouvaient être exportés dans d'autres contextes en emportant avec eux des présupposés et des biais centrés sur les États-Unis, même lorsqu'ils étaient présentés comme socialement bénéfiques . Elle a résumé son approche par la formule : « preuve plus infrastructure égale confiance » . Par preuve, elle entendait la collecte des contributions des communautés ; par infrastructure, elle entendait la transformation de ces contributions en outils de gouvernance utilisables, tels que des référentiels et des évaluations de l'IA, qu'elle a décrits comme des tests permettant de comprendre les performances des systèmes . Son argument était que la confiance est plus susceptible d'émerger lorsque les communautés contribuent à façonner les normes selon lesquelles les systèmes d'IA sont évalués .
Rovilos s'est concentré sur le volet opérationnel de la gouvernance . S'exprimant au nom de Credo AI, il a indiqué que l'organisation travaille sur la couche qui traduit les exigences réglementaires en pratiques quotidiennes . Il a vivement approuvé la position d'Achan selon laquelle la preuve deviendrait centrale dans la gouvernance de l'IA, et a dit que cela serait également important pour permettre la participation de la société civile et des jeunes . En même temps, il a noté que les OSC sont souvent invitées à regarder « sous le capot » des systèmes d'IA sans disposer de preuves suffisantes pour le faire . Il a indiqué que Credo AI répond à cela en constituant des bibliothèques de risques, des bibliothèques de contrôles et des techniques d'atténuation, et en les élaborant avec ses clients afin que les organisations disposent d'une base de preuves utilisable et d'une piste d'audit pour la responsabilisation .
Le modérateur a ensuite dégagé un fil conducteur commun aux trois interventions : la relation entre la preuve et l'infrastructure de gouvernance . Il a demandé si les OSC avaient besoin d'une infrastructure de preuve indépendante qui leur soit propre pour participer de manière significative à des systèmes souvent dominés par des experts et des ingénieurs, ou si les connaissances de la société civile et l'expérience vécue pouvaient plutôt être intégrées dans les cadres de gouvernance existants .
Malik a répondu que la réponse dépendait fortement du contexte national, en particulier en Asie du Sud . Elle a dit que les OSC peinent souvent à construire leurs propres systèmes de preuve, car ce travail est financé par des donateurs, les cycles de financement sont courts, et la concurrence pour les subventions favorise la duplication et les projets cloisonnés . Elle a ajouté que les organisations finissent fréquemment par répéter des formes similaires de collecte de données sans créer d'infrastructure partagée durable . Elle a soutenu qu'une plus grande collaboration entre les OSC était nécessaire, éventuellement avec le soutien d'un organisme distinct . Pour illustrer le problème des ressources, elle a décrit des bénévoles travaillant sur le Forum de gouvernance de l'Internet Asie-Pacifique au Pakistan après leurs heures universitaires, tout en devant encore chercher des donateurs pour organiser le forum annuel . Elle a également souligné les difficultés à obtenir des données, notant que dans de nombreux pays d'Asie du Sud, les ensembles de données clés sont fragmentés entre les institutions . Son exemple était la tentative de l'UNICEF au Pakistan de développer un outil de vérification de l'âge basé sur l'IA pour les enfants avant leur transfert vers des quartiers de prison pour adultes, entravée par des problèmes d'obtention de données policières auprès du Bureau national de la police .
Achan a globalement convenu que trop de travaux se déroulent en vase clos . Elle a soutenu que les OSC peuvent rassembler des preuves, mais que ces preuves doivent ensuite se connecter à des structures institutionnelles pour devenir exploitables . Elle a illustré cela par un exemple de Nouvelle-Zélande, où des communautés māories développaient la reconnaissance vocale pour une langue sous-dotée en ressources . Lorsqu'une société cinématographique américaine a tenté d'acheter les données, une OSC indépendante a aidé à les organiser, et le gouvernement les a finalement placées dans un fonds fiduciaire afin qu'elles puissent bénéficier à la communauté et être protégées contre la surveillance ou une utilisation commerciale extractive . Elle a dit que cela montrait que les OSC peuvent collecter et organiser des preuves communautaires, tandis que les gouvernements peuvent fournir des garanties juridiques ou institutionnelles autour de celles-ci . Elle a également élargi la discussion, passant de l'accès aux preuves à la question de ce qui compte comme preuve dans la gouvernance de l'IA et de la manière dont les OSC peuvent y contribuer .
Rovilos a dit qu'il ne fallait pas traiter cela comme un choix binaire entre preuve et infrastructure . Il a plutôt plaidé pour les deux : l'indépendance des OSC peut contribuer à préserver l'intégrité des preuves, tandis que des taxonomies partagées et un langage commun peuvent permettre à ces preuves de circuler entre les institutions et les juridictions . Sans de tels cadres communs, a-t-il averti, la gouvernance risque de devenir une « Tour de Babel » dans laquelle des acteurs fragmentés ne peuvent pas communiquer de manière significative . Il a également cité des chiffres suggérant que si une grande majorité d'entreprises utilisent désormais l'IA, une très faible proportion sait comment mettre en œuvre la gouvernance de l'IA en pratique . Il a utilisé cela pour souligner à la fois le fossé de mise en œuvre et la nécessité d'une collaboration entre les acteurs qui cherchent à construire des systèmes fonctionnels .
La conversation s'est ensuite tournée vers la participation des jeunes . Le modérateur n'a pas simplement demandé comment inclure les jeunes ; il a demandé s'ils devaient être impliqués de la même manière que les experts actuellement, ou si quelque chose de plus spécifique était nécessaire . Cette question a orienté le tour de parole suivant.
Malik a mis l'accent sur les inégalités d'accès, de langue et de confiance en soi . Elle a mis en contraste les élèves des écoles d'élite, qui peuvent avoir un meilleur accès aux outils, aux modèles de langage et aux cours en ligne, avec les élèves des écoles publiques sous-dotées en ressources, où même expliquer l'IA en ourdou peut s'avérer difficile . Elle a raconté avoir essayé de traduire l'IA par « nakli akal », que les élèves ont compris de manière négative et ont trouvé alarmant . Elle a également dit que de nombreux jeunes associent principalement l'IA aux outils d'image des réseaux sociaux et supposent qu'ils doivent savoir coder avant de pouvoir parler de gouvernance de l'IA . Pour elle, cela signifiait que la participation significative dépend autant de la littératie et de l'accessibilité linguistique que de l'inclusion formelle . Elle a mentionné des espaces régionaux anglophones tels que Netmission Asia et le Forum de gouvernance de l'Internet pour les jeunes de l'Asie-Pacifique . Au Pakistan, cependant, elle a dit que les universités constituaient l'un des points d'entrée les plus utiles, et elle a évoqué des mémorandums d'accord avec 20 universités et des plans pour travailler à travers des cellules de droits de l'homme afin de développer des modules sur l'IA et les droits . Elle a également soutenu que les institutions nationales des droits de l'homme devraient disposer d'un programme ou d'un point focal sur l'IA et les droits .
Achan a abordé la participation des jeunes en remettant en question les présupposés sur l'expertise . Elle a soutenu que, l'IA étant encore relativement nouvelle, la différence d'utilisation de l'IA entre une personne de 25 ans et une personne de 50 ans n'est peut-être pas si marquée . Elle a également noté que les conséquences à long terme de l'IA, y compris les effets environnementaux, affecteront particulièrement les jeunes générations . Pour cadrer son propos, elle s'est appuyée sur l'échelle de participation de Roger Hart, qui va du tokenisme au bas de l'échelle à la prise de décision partagée initiée par les jeunes au sommet . Son argument central était que la gouvernance ne devrait pas simplement « donner la parole aux enfants » sans leur offrir des choix ou une influence significatifs . Elle a suggéré d'évaluer la participation en se demandant si la présence des jeunes modifie réellement le résultat . Cela a renforcé la distinction entre l'inclusion symbolique et le véritable pouvoir de décision pour les jeunes .
Rovilos a repris l'argument anti-tokenisme mais y a ajouté une critique institutionnelle plus forte . Il a dit que la tokenisation est un moyen peu coûteux de paraître inclusif tout en refusant le vrai pouvoir . Selon lui, la participation des jeunes doit être liée à des processus qui comptent, et la distance structurelle entre les jeunes et les décideurs doit être abordée directement . Il a soutenu la position de Malik sur les ressources et le suivi, en faisant valoir que les jeunes ont besoin de soutien, d'un engagement soutenu et d'une influence réelle plutôt que d'invitations ponctuelles . Il a également dit que la participation des jeunes devrait être liée aux systèmes d'IA déployés localement, car la proximité avec les préjudices vécus est importante . Le calendrier était également important pour lui : les jeunes devraient être impliqués tôt, avant que les décisions ne soient effectivement arrêtées . Il a ajouté que ce n'est pas seulement un point de procédure, car les jeunes sont déjà fortement affectés par les systèmes d'IA à travers des outils tels que les logiciels de surveillance d'examens, les algorithmes des téléphones et, plus tard, les systèmes de recrutement . D'un point de vue européen, il a mentionné le Pacte sur l'IA comme un possible véhicule multipartite, mais a soutenu que les efforts actuels en matière de littératie de l'IA sont principalement conçus pour les déployeurs et les acteurs corporatifs, laissant les jeunes largement en dehors du processus .
Dans la section prospective, le modérateur a demandé quelles institutions, quels cadres ou quels référentiels pour la participation des jeunes les panélistes aimeraient voir dans cinq ans .
Malik a proposé deux changements principaux . Premièrement, elle a dit que la participation des jeunes devrait être obligatoire dans les rapports internationaux sur les questions numériques, en particulier dans les processus liés à l'ONU, afin que les États soient tenus de produire des preuves de ce que les jeunes disent réellement . Elle a noté que les enfants sont déjà consultés dans le cadre de la Convention relative aux droits de l'enfant et a suggéré que les rapports liés au numérique dans le cadre de mécanismes tels que le CAT et le CERD devraient également inclure les contributions des jeunes . Deuxièmement, elle a dit que dans cinq ans, elle aimerait voir une commission numérique indépendante pour les jeunes au Pakistan, gérée par les jeunes eux-mêmes mais financée par l'État . Elle a présenté cela comme une aspiration liée aux préoccupations concernant la liberté d'expression et les violences généralisées en ligne et facilitées par la technologie affectant les enfants, les communautés minoritaires et les femmes .
Achan a dit qu'elle aimerait voir une forme de processus public qui interroge continuellement les communautés sur ce qu'elles attendent de l'IA, potentiellement à travers des mécanismes spécifiques à des enjeux particuliers plutôt qu'une structure unique à tout faire . Elle a ensuite proposé un système de vote participatif transparent permettant aux personnes d'exprimer ce qu'elles attendaient des systèmes d'IA entrant dans leur vie . Ces préférences seraient mises en correspondance avec des scores transparents montrant dans quelle mesure ces systèmes répondaient réellement aux besoins des communautés . Elle a souligné que cette notation devrait être réalisée par un évaluateur indépendant plutôt que par les entreprises d'IA elles-mêmes .
Rovilos a globalement soutenu les propositions précédentes et y a ajouté trois priorités . Premièrement, il a dit que la gouvernance de l'IA est intrinsèquement intergénérationnelle, de sorte qu'exclure les jeunes aurait peu de sens étant donné qu'ils vivront le plus longtemps avec ses conséquences . Deuxièmement, il est revenu sur la question du financement et a soutenu que davantage de ressources doivent être investies dans la participation des jeunes au cours des cinq prochaines années . Troisièmement, il a critiqué la pratique européenne qui consiste souvent à inviter les jeunes à soulever des préoccupations sans véritable suivi . Ce qu'il souhaitait à la place, c'était une inclusion davantage axée sur l'impact, avec des droits de participation plus clairement accentués, voire renforcés, et des institutions tenues d'agir sur ce que disent les jeunes . Il a conclu en revenant sur la littératie de l'IA, en soutenant que les institutions devraient traiter le renforcement des compétences des jeunes comme faisant partie de leur pratique quotidienne, car les jeunes générations devront faire face aux conséquences à long terme de l'utilisation généralisée de l'IA .
Les questions du public ont introduit deux dernières questions : l'IA avancée et l'éducation intergénérationnelle . Un membre du public a fait référence à une déclaration attribuée à un dirigeant de Google selon laquelle l'AGI pourrait arriver avant 2030, et a demandé ce que cela signifierait pour la gouvernance de l'IA et si les jeunes seraient impliqués . Un autre a demandé comment le dialogue intergénérationnel pourrait être construit en pratique et si les parents et les enseignants étaient équipés pour enseigner l'IA à la prochaine génération .
Achan a répondu que les parents et les enseignants ne sont pas encore équipés pour bien enseigner l'IA, car c'est un domaine nouveau et l'expertise en la matière n'est pas étroitement liée à l'âge . Elle a dit que cela renforce en fait l'argument en faveur d'une voix égale pour les jeunes, plutôt que de supposer que les générations plus âgées devraient décider à leur place . Sur l'AGI, elle a adopté une vision relativement continue, soutenant que même si les systèmes deviennent beaucoup plus capables, la gouvernance devra toujours se concentrer sur la manière dont ils affectent l'expérience humaine . Pour cette raison, les jeunes resteraient des participants essentiels, bien que non exclusifs, au sein d'une gouvernance intergénérationnelle .
Malik a répondu à la question sur l'éducation avec des exemples du Pakistan . Elle a décrit les enseignants comme surchargés de travail mais généralement ouverts aux outils susceptibles de les aider . Elle a également observé que les parents sont souvent anxieux mais très motivés, donnant l'exemple de parents à Lahore demandant comment « faire entrer leur enfant dans l'IA » . Malgré la confusion et les récits médiatiques contradictoires, elle a dit que cela crée un certain degré de volonté et d'enthousiasme chez les parents, les enseignants et les élèves . Sa recommandation pratique était de fournir des programmes et des ressources d'ateliers gratuits, accessibles et adaptés aux langues locales, car les enseignants sont susceptibles de les utiliser s'ils sont disponibles .
Rovilos a répondu d'un point de vue réglementaire et institutionnel . Sur l'AGI, il a reconnu que des avancées majeures pourraient survenir plus rapidement que prévu, mais a soutenu que la gouvernance devrait néanmoins progresser étape par étape . Il a cité la loi européenne sur l'IA comme exemple d'un cadre qui, au moins, classe les risques et y attache des obligations, y compris des pratiques interdites . Sa préoccupation plus profonde était que des systèmes plus avancés pourraient remettre en question des présupposés tels que la supervision humaine significative . Il a également mentionné des dynamiques géopolitiques plus larges, notamment les contrôles à l'exportation et l'accès aux technologies, comme preuve que les États façonnent déjà les marchés de l'IA de manière importante . En même temps, il a soutenu que la priorité immédiate est d'établir des attentes communes à travers un large engagement multipartite plutôt que d'essayer de résoudre tous les scénarios futurs à la fois . Sur l'éducation, il a donné l'exemple de sa nièce utilisant Claude sur une tablette pour ses devoirs à la maison, à l'insu de ses enseignants . Il a directement lié cela à la nécessité d'obligations en matière de littératie de l'IA non seulement pour les entreprises, mais aussi pour les écoles et les institutions publiques .
Dans l'ensemble, le panel a été marqué davantage par des complémentarités que par des désaccords . Malik s'est concentrée sur l'exclusion, les préjudices subis par les minorités, les barrières linguistiques, les voies de recours et la nécessité de mandats institutionnels . Achan a mis l'accent sur les preuves communautaires, la confiance, l'évaluation indépendante et la différence entre la participation symbolique et l'influence réelle . Rovilos s'est concentré sur l'opérationnalisation de la gouvernance, la construction de cadres communs, l'évitement du tokenisme et le fait que les efforts actuels en matière de littératie sont trop axés sur les déployeurs et les acteurs corporatifs . À travers ces contributions, plusieurs thèmes communs ont émergé : l'inclusion nécessite des structures pratiques ; la preuve et l'infrastructure doivent fonctionner ensemble ; et la participation est affaiblie lorsque le financement est instable, que les données sont inaccessibles ou que les institutions ne donnent pas suite .
En conclusion, la discussion a suggéré un modèle stratifié de gouvernance inclusive de l'IA ancré dans les préjudices vécus, les contributions des communautés et des mécanismes institutionnels utilisables . Elle a également établi un lien entre la pertinence locale et les exemples pakistanais de Malik d'une part, et l'avertissement d'Achan concernant les biais américains importés d'autre part . Le panel s'est terminé sans résolutions formelles, mais avec une orientation claire : une gouvernance de l'IA plus équitable nécessitera des preuves ascendantes, une collaboration renforcée, une participation significative des jeunes, et des institutions capables de traduire la participation en responsabilisation et en pratique . Le modérateur a conclu en remerciant Globethics d'avoir organisé la session et en invitant les participants à poursuivre la conversation de manière informelle par la suite .
The knowledge base provides broader support for this concern by noting that simply transferring technologies from developed countries to developing countries is often inappropriate because such transfers require context-specific considerations [S85]. It also warns that developing states risk becoming providers of raw data while paying for intelligence services developed elsewhere [S87].
This is consistent with wider AI governance discussions in the knowledge base stressing the need for practical tools, resource libraries, standards, and reliable assessment methods for testing AI systems and translating principles into implementation [S89].
The emphasis on actionable mechanisms aligns with broader knowledge-base discussions that AI governance now needs to move from high-level principles to practical, implementable measures and toolkits [S89].
Documentation communautaire des préjudices et voies de recours pour les groupes minoritaires afin d'alimenter la politique et la responsabilisation en matière d'IA (Ms. Emaan Yasin Malik)
Arg. 1Emaan soutient que la gouvernance inclusive de l'IA devrait commencer par une documentation directe des préjudices subis par les communautés marginalisées et par des voies de recours concrètes. Son approche consiste à relier les preuves communautaires, le traitement des plaintes et les contributions aux politiques, afin que les groupes minoritaires ne soient pas exclus des processus de gouvernance et de responsabilisation.
Elle a expliqué que son projet pilote travaille avec la communauté chrétienne du Pakistan, en partenariat avec des églises, des écoles chrétiennes, des membres de la communauté et des OSC pour documenter les préjudices liés aux violences facilitées par l'IA . Elle a donné des exemples concrets de ces préjudices, notamment des deepfakes entraînant des accusations de blasphème, des incitations, des violences de foule et des arrestations, et a indiqué que le projet établirait ensuite une voie d'orientation vers le système de plaintes de la Commission nationale des droits de l'homme et produirait des ressources en ourdou et en pendjabi afin que les contributions communautaires puissent orienter les politiques .
on: La gouvernance inclusive de l'IA doit être fondée sur des preuves issues des communautés concernées et traduite en mécanismes de gouvernance pratiques
on: La question de savoir si la gouvernance de l'IA devrait privilégier la documentation et la réparation des préjudices au niveau communautaire, des systèmes d'évaluation participative indépendants, ou des outils de conformité opérationnelle comme principal mécanisme concret d'inclusion
Au Pakistan et dans des contextes similaires, les OSC peinent à construire une infrastructure probatoire en raison de financements à court terme, pilotés par les bailleurs, répétitifs et cloisonnés ; une collaboration renforcée et des structures d'appui sont donc nécessaires (Ms. Emaan Yasin Malik)
Arg. 2Emaan soutient que les organisations de la société civile au Pakistan et dans des contextes similaires se heurtent à des obstacles structurels pour construire des systèmes probatoires durables en matière de gouvernance de l'IA. Elle souligne que la fragmentation des financements et le cloisonnement des projets rendent nécessaires la collaboration et le soutien institutionnel si les OSC veulent contribuer de manière significative.
Elle a indiqué que dans des pays comme le Pakistan, ce travail est presque entièrement financé par des bailleurs de fonds, avec des cycles de financement courts et une concurrence intense, ce qui conduit à des projets répétitifs et à une collecte de données cloisonnée plutôt qu'à des systèmes probatoires durables . Elle a ajouté qu'une solution majeure serait de renforcer la collaboration entre les OSC et, éventuellement, de créer une structure d'appui pour les accompagner, tout en notant que les groupes de jeunes consacrent souvent leur énergie à la recherche de bailleurs plutôt qu'à l'avancement du travail lui-même .
on: La participation de la société civile dépend d'une meilleure collaboration, de systèmes probatoires plus solides et d'une moindre fragmentation
on: La question de savoir si la principale réponse institutionnelle à la faible participation des OSC réside dans des structures d'appui et des financements renforcés, dans l'intégration des preuves dans les structures étatiques existantes, ou dans la construction de taxonomies partagées et d'une cohérence opérationnelle
L'exclusion est visible dans la pratique : la participation des jeunes aux technologies au Pakistan était dominée par des hommes musulmans, tandis que les femmes et les communautés minoritaires étaient largement absentes, révélant des obstacles plus profonds liés à la classe sociale et à l'appartenance communautaire (Ms. Emaan Yasin Malik)
Arg. 3Emaan soutient que les lacunes en matière de participation ne sont pas abstraites, mais déjà visibles dans le profil de ceux qui accèdent aux opportunités technologiques et liées à l'IA. La domination d'un groupe social dans un hackathon pour jeunes a révélé des exclusions plus profondes liées au genre, à la classe sociale et à l'appartenance minoritaire, auxquelles la gouvernance inclusive doit répondre.
Elle a décrit comment son organisation a organisé un hackathon technologique pour les jeunes au Pakistan avec la Cour suprême et a constaté que toutes les candidatures provenaient de jeunes hommes musulmans, à l'exception de 20 % de femmes, sans aucune candidature des communautés hindoue, chrétienne ou sikhe . Elle a indiqué que ces tendances reflétaient les structures de classe et communautaires au Pakistan et constituaient une préoccupation sérieuse pour la commission .
on: La participation actuelle à l'IA est excluante, en particulier pour les groupes marginalisés et les communautés situées en dehors des centres de pouvoir dominants
La participation des jeunes doit tenir compte des inégalités d'accès, de langue et d'alphabétisation ; de nombreux étudiants ignorent qu'ils peuvent contribuer à la gouvernance de l'IA sans être développeurs, ce qui rend indispensables une éducation fondée sur les droits et des ressources en langues locales (Ms. Emaan Yasin Malik)
Arg. 4Emaan soutient que la participation des jeunes à la gouvernance de l'IA nécessite bien plus que d'inviter des jeunes dans la salle ; elle implique de remédier à l'inégalité d'accès aux outils, aux barrières linguistiques et aux idées reçues sur les personnes qualifiées pour participer. Elle souligne que l'éducation fondée sur les droits et les ressources en langues locales sont indispensables pour que les jeunes comprennent que la gouvernance n'est pas réservée aux codeurs ou aux élites.
Elle a établi un contraste entre les élèves des grandes écoles, qui avaient accès aux visas, aux modèles de langage et aux cours en ligne, et les élèves des écoles publiques et défavorisées où même expliquer l'IA en ourdou était difficile . Elle a raconté avoir tenté de traduire l'IA par « Nakli akal », ce que les élèves ont trouvé effrayant, et a indiqué que beaucoup d'entre eux n'associaient l'IA qu'à la génération d'images sur TikTok et pensaient avoir besoin de compétences en codage pour avoir leur mot à dire dans la gouvernance . Elle a également mentionné des ressources telles que la Netmission Academy et l'Asia-Pacific Youth Internet Governance Forum, et a précisé que son organisation a signé des MOU avec 20 universités pour développer des modules d'IA fondés sur les droits humains .
on: La participation des jeunes à la gouvernance de l'IA doit être réelle et non symbolique, avec une véritable influence sur les décisions
La participation des jeunes devrait être obligatoire dans les rapports internationaux sur les droits numériques, et le Pakistan devrait créer une commission numérique indépendante gérée par des jeunes avec le soutien de l'État (Ms. Emaan Yasin Malik)
Arg. 5Emaan soutient que d'ici cinq ans, la participation des jeunes devrait être formellement intégrée dans les processus internationaux de responsabilisation, plutôt que d'être laissée à titre facultatif. Elle appelle également à la création d'un mécanisme institutionnel national au Pakistan, indépendant, dirigé par des jeunes et financé sur fonds publics, pour traiter les préjudices numériques et les questions de gouvernance.
Elle a déclaré que la participation des jeunes devrait être obligatoire dans les processus de rapportage international sur les questions numériques, en faisant valoir que l'ONU devrait exiger la prise en compte des voix des jeunes dans les cycles de rapportage tels que le CAT et le CERD, afin que les États soient tenus de fournir des preuves de ce que disent les jeunes . Elle a également proposé la création au Pakistan d'une commission numérique indépendante et autogérée, gérée entièrement par des jeunes et soutenue par des ressources publiques, en invoquant des préoccupations liées au faible classement en matière de liberté d'expression et aux violences en ligne affectant les enfants, les minorités et les femmes .
on: Les cinq prochaines années devraient voir l'émergence de structures plus formelles, plus transparentes et mieux dotées en ressources pour la participation des jeunes à la gouvernance de l'IA
on: Comment la participation des jeunes devrait être institutionnalisée au cours des cinq prochaines années
Les enseignants, les parents et les élèves sont prêts à s'engager avec l'IA, mais ils ont besoin de programmes et de ressources d'ateliers gratuits, accessibles et adaptés à leur langue pour le faire efficacement (Ms. Emaan Yasin Malik)
Arg. 6Emaan soutient que les acteurs du secteur éducatif ne sont pas réticents à l'IA, mais cherchent activement des orientations et des outils. Elle suggère que l'adoption pratique dépend de la mise à disposition de matériels pédagogiques gratuits, faciles à utiliser et adaptés aux langues et contextes locaux.
Elle a indiqué que les enseignants sont surchargés de travail mais accueillent favorablement les outils susceptibles de les aider, et elle a décrit des parents d'un lycée au Pakistan demandant comment faire en sorte que leurs enfants s'initient à l'IA, car ils ressentent une urgence et une incertitude quant à ce que l'IA représente pour l'avenir . Elle a soutenu que si les enseignants et les élèves disposent de curricula accessibles, de formats d'ateliers et de ressources adaptées aux langues, ils sont prêts à s'engager, et elle a cité une enquête de l'ITU montrant un enthousiasme particulièrement élevé à l'égard de l'IA en Asie du Sud, comparé à la crainte qu'elle suscite ailleurs .
on: La littératie en IA et l'éducation sont essentielles, et les institutions doivent soutenir les enseignants, les parents et les jeunes plutôt que de présupposer leur état de préparation
on: Si la littératie en IA doit être principalement envisagée comme une participation collective et intergénérationnelle ou comme une obligation institutionnelle prioritaire centrée sur les établissements scolaires et les éducateurs
Les données probantes locales combinées à une infrastructure d'évaluation peuvent rétablir la confiance et aider les communautés à évaluer les systèmes d'IA avant et pendant leur déploiement (Ms. Addie Achan)
Arg. 1Addie soutient que la gouvernance inclusive de l'IA repose sur la collecte de données probantes au niveau des communautés locales et leur transformation en outils d'évaluation pratiques. Sa thèse centrale est que lorsque les communautés peuvent évaluer les systèmes d'IA à l'aide de référentiels et d'évaluations, la confiance a davantage de chances de s'établir que lorsque ces systèmes leur sont simplement imposés.
Elle a indiqué que son organisation, Kaleidoscope, aide les communautés locales à évaluer et à gouverner les systèmes d'IA au moment de leur introduction dans leur environnement . Elle a décrit son approche comme suit : « données probantes plus infrastructure égale confiance », précisant que les données probantes désignent la collecte des contributions communautaires et que l'infrastructure consiste à transformer ces contributions en outils tels que des référentiels et des évaluations d'IA pour tester les performances des systèmes, dans le but de restaurer la confiance des communautés dans le déploiement .
on: La gouvernance inclusive de l'IA devrait être fondée sur des données probantes issues des communautés concernées et traduite en mécanismes de gouvernance pratiques
on: La question de savoir si la gouvernance de l'IA devrait accorder la priorité à la documentation et à la réparation des préjudices au niveau communautaire, à des systèmes d'évaluation participatifs indépendants, ou à des outils de conformité opérationnelle comme principal mécanisme concret d'inclusion
Les OSC peuvent collecter de précieuses données probantes communautaires et les intégrer aux infrastructures étatiques ou institutionnelles, mais il faut également une reconnaissance plus large de ce qui constitue une preuve (Ms. Addie Achan)
Arg. 2Addie soutient que la société civile peut jouer un rôle important dans la collecte de données probantes, même si elle ne contrôle pas l'infrastructure politique finale. Elle avertit également que les systèmes de gouvernance doivent élargir leur conception de ce qui constitue une preuve, car les savoirs communautaires risquent sinon d'être sous-évalués par rapport aux données probantes produites par des acteurs privés disposant de moyens financiers bien supérieurs.
Elle a indiqué que les OSC peuvent collecter des données probantes et les intégrer aux infrastructures institutionnelles existantes pour les traduire en actions concrètes . À titre d'exemple, elle a décrit comment des communautés maories en Nouvelle-Zélande ont développé la reconnaissance vocale pour leur langue sous-dotée en ressources, avec une OSC indépendante chargée de la curation des données et le gouvernement néo-zélandais les plaçant dans un fonds fiduciaire afin qu'elles profitent à la communauté et soient protégées contre la surveillance et l'exploitation commerciale . Elle a également soutenu qu'il est nécessaire d'approfondir la réflexion sur ce qui qualifie comme preuve, car les acteurs de l'IA à but lucratif disposent de beaucoup plus de capital pour produire les types de données probantes qui dominent actuellement les processus de gouvernance .
on: La participation de la société civile dépend d'une meilleure collaboration, de systèmes de données probantes plus solides et d'une moindre fragmentation
on: La question de savoir si la réponse institutionnelle principale à la faible participation des OSC réside dans des structures de soutien et des financements renforcés, dans l'intégration des données probantes aux structures étatiques existantes, ou dans l'élaboration de taxonomies communes et d'une cohérence opérationnelle
Les initiatives « IA pour le bien commun » exportent souvent des présupposés et des biais californiens ou américains dans d'autres contextes, sans garde-fous suffisants ni responsabilité locale (Ms. Addie Achan)
Arg. 3Addie soutient que même les déploiements d'IA bien intentionnés peuvent reproduire des déséquilibres de pouvoir lorsqu'ils sont conçus dans une perspective américaine et exportés ailleurs. Elle suggère qu'une responsabilité locale accrue et des garde-fous plus solides sont nécessaires pour que l'« IA pour le bien commun » ne se limite pas à transmettre des biais externes à d'autres communautés.
S'appuyant sur son expérience d'ingénieure en IA et d'ancienne responsable IA au sein d'une fondation philanthropique finançant des déploiements d'IA pour le bien commun, elle a déclaré que si l'IA pour le bien commun est possible, ce mouvement manque souvent de garde-fous . Elle a spécifiquement critiqué la tendance des technologies développées en Californie ou aux États-Unis à véhiculer des biais américains, puis à être déployées dans d'autres régions « au nom du bien commun » sans responsabilité locale suffisante .
on: La participation actuelle à l'IA est excluante, en particulier pour les groupes marginalisés et les communautés situées en dehors des centres de pouvoir dominants
Les jeunes devraient disposer d'une autorité réelle plutôt que de jouer des rôles symboliques, car leur perspective est distincte et particulièrement pertinente pour les impacts à long terme, notamment les effets environnementaux et sociaux (Ms. Addie Achan)
Arg. 4Addie soutient que les jeunes ne devraient pas être inclus dans la gouvernance de l'IA de manière purement symbolique. Leur participation devrait avoir une incidence sur de véritables décisions, d'autant plus qu'ils vivront le plus longtemps avec les conséquences à long terme de l'IA et peuvent offrir des perspectives différentes de celles des générations plus âgées.
Elle a indiqué que la différence fonctionnelle entre une personne de 25 ans et une personne de 50 ans dans l'utilisation de l'IA est peut-être moins marquée que dans les secteurs plus anciens, car l'IA est relativement nouvelle, ce qui rend les perspectives des jeunes particulièrement importantes . Elle a fait référence à un essai de l'UNICEF rédigé par Roger Hart décrivant huit niveaux de participation des enfants, opposant le tokenisme à la prise de décision partagée à l'initiative des jeunes, et a soutenu que la gouvernance de l'IA devrait conférer aux jeunes une autorité réelle et vérifier si leur présence modifie les résultats plutôt que de remplir une fonction purement symbolique . Elle a également souligné que les effets à long terme, notamment les impacts environnementaux, touchent particulièrement les jeunes .
on: La participation des jeunes à la gouvernance de l'IA doit être réelle plutôt que symbolique, avec une véritable influence sur les décisions
on: Comment intégrer dans les discussions actuelles sur la gouvernance la question d'une IA future très avancée ou d'une AGI
Les gouvernements devraient créer des systèmes participatifs transparents permettant aux citoyens, y compris aux jeunes, d'exprimer leurs attentes vis-à-vis de l'IA et de consulter des évaluations indépendantes attestant que les systèmes répondent à ces besoins (Ms. Addie Achan)
Arg. 5Addie soutient que d'ici cinq ans, la gouvernance devrait inclure des canaux participatifs formels permettant aux personnes d'exprimer leurs attentes vis-à-vis des systèmes d'IA et de vérifier si ces systèmes les satisfont. Elle met l'accent sur la transparence et l'indépendance, afin que l'évaluation ne soit pas contrôlée par les entreprises d'IA elles-mêmes.
Dans sa vision à cinq ans, elle a proposé des systèmes de vote participatif transparents permettant aux personnes d'exprimer ce qu'elles attendent des outils d'IA qui affectent leur vie . Elle a ajouté que ces systèmes devraient être associés à des scores objectifs transparents et à des évaluations indépendantes montrant dans quelle mesure les outils répondent à ces besoins, en évitant spécifiquement l'auto-évaluation par les entreprises d'IA .
on: Les cinq prochaines années devraient voir l'émergence de structures plus formelles, plus transparentes et mieux dotées en ressources pour la participation des jeunes à la gouvernance de l'IA
on: Comment institutionnaliser la participation des jeunes au cours des cinq prochaines années
L'IA étant un domaine nouveau, l'expertise ne se mesure pas simplement à l'âge ; les parents et les enseignants ne sont pas automatiquement outillés pour y faire face, ce qui renforce l'argument en faveur d'une participation partagée entre les générations (Ms. Addie Achan)
Arg. 6Addie soutient que l'expertise en matière d'IA ne peut être présumée sur la base de l'âge ou du rôle social, car cette technologie est nouvelle pour presque tout le monde. Cela signifie que la gouvernance et l'éducation intergénérationnelles devraient être partagées, les jeunes ayant une voix égale plutôt que d'être traités uniquement comme des apprenants.
En réponse au public, elle a déclaré qu'elle ne pense pas que les enseignants et les parents soient actuellement en mesure d'enseigner l'IA, car il s'agit d'un nouvel ensemble de compétences dont la maîtrise a très peu à voir avec l'âge . Elle a soutenu que cela rend la participation des jeunes plus crédible et nécessaire, tout en précisant que les jeunes ne devraient pas avoir un rôle exclusif, car la collaboration intergénérationnelle reste importante .
on: La littératie en IA et l'éducation sont essentielles, et les institutions doivent soutenir les enseignants, les parents et les jeunes plutôt que de présumer qu'ils sont prêts
on: Si la littératie en IA devrait être principalement conçue comme une participation partagée et large entre les générations ou comme une obligation institutionnelle prioritaire centrée sur les écoles et les éducateurs
La gouvernance opérationnelle nécessite des bibliothèques de risques, des bibliothèques de contrôles et des outils d'atténuation qui traduisent la réglementation en structures de responsabilité concrètes (Mr. Vasileios Rovilos)
Arg. 1Vasileios soutient qu'une gouvernance inclusive de l'IA requiert des mécanismes opérationnels rendant la réglementation applicable en pratique. Plutôt que de rester au niveau des principes, la gouvernance devrait s'appuyer sur des référentiels concrets de risques, de contrôles et de techniques d'atténuation permettant d'assurer la responsabilité.
Il a indiqué que Credo AI propose une couche opérationnelle qui traduit les exigences réglementaires en actions concrètement applicables par les organisations, dans le but de rendre la gouvernance de l'IA plus robuste, plus globale et plus durable . Il a précisé que cela inclut la création de bibliothèques de risques, de bibliothèques de contrôles et de techniques d'atténuation des risques, co-construites avec les clients, afin de constituer un inventaire substantiel de données probantes susceptibles d'étayer les structures de responsabilité dans la gouvernance de l'IA .
on: La gouvernance inclusive de l'IA devrait être fondée sur des données probantes issues des communautés concernées et traduite en mécanismes de gouvernance pratiques
on: La question de savoir si la gouvernance de l'IA devrait privilégier la documentation des préjudices au niveau communautaire et les mécanismes de recours, les systèmes d'évaluation participative indépendants, ou les outils de conformité opérationnelle comme principal mécanisme concret d'inclusion
La gouvernance de l'IA ne devrait pas traiter l'infrastructure et les données probantes comme des choix distincts ; l'indépendance des OSC, l'intégrité des données probantes et une taxonomie commune sont toutes nécessaires pour éviter la fragmentation et renforcer l'influence (Mr. Vasileios Rovilos)
Arg. 2Vasileios soutient que les données probantes et l'infrastructure sont des approches mutuellement complémentaires plutôt que concurrentes. Il affirme que l'influence de la société civile dépend de données probantes indépendantes et fiables, mais aussi d'un langage commun et de cadres partagés qui préviennent la fragmentation entre les organisations et les régulateurs.
Il a déclaré que la question ne devrait pas être présentée comme un choix binaire entre infrastructure et accès aux données probantes, mais comme une approche combinée dans laquelle les OSC assurent l'indépendance et l'intégrité des données probantes au sein d'une taxonomie ou d'un langage commun . Il a averti que la multiplicité des façons d'aborder la gouvernance de l'IA au sein des OSC et des régulateurs crée une situation de « Tour de Babel », et a soutenu que la fragmentation est particulièrement préjudiciable pour un enjeu mondial comme l'IA .
on: La participation de la société civile dépend d'une meilleure collaboration, de systèmes de données probantes plus solides et d'une moindre fragmentation
on: La question de savoir si la principale réponse institutionnelle à la faible participation des OSC réside dans des organes de soutien renforcés et des financements accrus, dans l'intégration des données probantes dans les structures étatiques existantes, ou dans la construction de taxonomies partagées et d'une cohérence opérationnelle
De nombreuses organisations utilisent l'IA de manière intensive sans savoir comment la gouverner, ce qui crée un écart dangereux entre l'adoption et une supervision responsable (Mr. Vasileios Rovilos)
Arg. 3Vasileios soutient que l'adoption de l'IA dépasse les capacités de gouvernance au sein des organisations. Cela crée un risque systémique, car les entreprises s'appuient fortement sur des outils d'IA sans disposer de la maturité interne ni des contrôles nécessaires à une utilisation responsable.
Il a cité comme preuve que plus de 70 % des entreprises s'appuient sur des outils d'IA, alors que seulement environ 4 à 5 % d'entre elles savent comment mettre en œuvre une gouvernance de l'IA . Il a conclu que ces organisations utilisent l'IA sans infrastructure mature pour la contrôler, ce qu'il a qualifié de profondément problématique .
Les jeunes sont structurellement éloignés des processus décisionnels alors qu'ils sont fortement exposés aux systèmes d'IA ; ils doivent donc être associés dès le départ, dotés d'un pouvoir d'influence réel et soutenus par des engagements concrets (Mr. Vasileios Rovilos)
Arg. 4Vasileios soutient que les jeunes sont souvent tenus à l'écart des véritables processus décisionnels, alors qu'ils figurent parmi les groupes les plus touchés par l'IA. Il affirme qu'une participation réelle exige une implication précoce, une influence concrète sur les décisions et un suivi durable, afin que les jeunes ne soient pas simplement consultés de manière symbolique.
Il a souligné l'écart considérable entre les décideurs et les jeunes, a critiqué la tokenisation qui accorde aux jeunes une visibilité sans pouvoir réel, et a soutenu qu'ils doivent être impliqués dans des processus qui ont véritablement de l'importance . Il a insisté sur le fait que la participation des jeunes doit être ancrée dans les systèmes d'IA déployés localement et que les jeunes doivent être intégrés de manière proactive, avant que les décisions ne soient prédéterminées . Il a également relevé que les jeunes sont fortement exposés à l'IA par le biais d'outils de surveillance des examens, de systèmes de smartphones et de futurs algorithmes de recrutement, ce qui rend indispensable qu'ils soient conscients de l'espace décisionnel qui leur revient et en mesure de le revendiquer .
on: La participation des jeunes à la gouvernance de l'IA doit être réelle plutôt que symbolique, avec une véritable influence sur les décisions
Des financements accrus, un suivi plus rigoureux et une culture de l'IA profondément ancrée sont nécessaires pour que les institutions intègrent systématiquement les jeunes dans les prises de décision, plutôt que de recourir à une participation symbolique (Mr. Vasileios Rovilos)
Arg. 5Vasileios soutient que l'inclusion réelle des jeunes au cours des cinq prochaines années dépendra des ressources allouées, de la mise en œuvre et des transformations institutionnelles. Il insiste sur le fait que la consultation symbolique doit être remplacée par une participation financée et axée sur l'impact, soutenue par une culture de la littératie en IA intégrée dans les pratiques institutionnelles quotidiennes.
Il a indiqué que l'un des principaux obstacles identifiés précédemment était l'accès aux données probantes et aux financements, et a soutenu que davantage de fonds devraient être investis dans cette direction au cours des cinq prochaines années . Il a critiqué la tokenisation dans le contexte européen comme une participation de façade sans suite concrète, et a exprimé sa volonté de voir une inclusion des jeunes dans la prise de décision axée sur l'impact, assortie éventuellement de droits renforcés . Il a en outre soutenu que la littératie en IA doit s'ancrer dans la réflexion et les actions quotidiennes des institutions, car les générations futures devront gérer les implications de l'IA .
on: Les cinq prochaines années devraient donner lieu à des structures plus formelles, plus transparentes et mieux dotées en ressources pour la participation des jeunes à la gouvernance de l'IA
on: Comment intégrer dans les discussions actuelles sur la gouvernance la question d'une IA future très avancée ou d'une AGI
La culture de l'IA devrait constituer une obligation prioritaire pour les établissements scolaires et les enseignants, étant donné que les jeunes utilisent déjà des outils d'IA sans supervision adulte ni préparation institutionnelle (Mr. Vasileios Rovilos)
Arg. 6Vasileios soutient que les écoles et les enseignants devraient être au cœur des politiques de littératie en IA, car les enfants utilisent déjà l'IA de manières pour lesquelles les institutions ne sont pas préparées. Il présente cela comme une obligation, et non comme un complément facultatif, dans la mesure où les établissements scolaires sont directement concernés par l'usage de l'IA.
Il a raconté avoir rendu visite à sa nièce en Grèce et avoir découvert qu'elle utilisait Claude sur sa tablette pour faire ses devoirs, s'étant en pratique formée elle-même en interrogeant directement l'outil d'IA, sans supervision directe de la part des enseignants . Il a utilisé cet exemple pour soutenir que les enseignants et les éducateurs doivent faire l'objet d'investissements importants dans les efforts de littératie en IA, et que les écoles devraient être considérées comme une priorité de premier rang, idéalement dans le cadre d'obligations de droit public en matière de littératie en IA .
on: La littératie en IA et l'éducation sont essentielles, et les institutions doivent soutenir les enseignants, les parents et les jeunes plutôt que de présupposer leur état de préparation
on: Si la littératie en IA doit être principalement conçue comme une participation collective large à travers les générations ou comme une obligation institutionnelle prioritaire centrée sur les écoles et les éducateurs
Le panel porte sur la manière de construire une gouvernance de l'IA plus inclusive et diversifiée, avec une participation plurielle de la société civile et d'autres acteurs sociaux (Dr. Pedro dos Santos Maia)
Arg. 1Pedro structure la session autour de la nécessité d'une gouvernance de l'IA plus inclusive, diversifiée et démocratique. Il demande aux panélistes d'expliquer quels outils et mécanismes concrets ils développent pour élargir la participation de la société civile et d'autres composantes de la société.
Il a introduit la session en indiquant qu'elle porterait sur la gouvernance de l'IA et sur la manière de construire une gouvernance plus inclusive et diversifiée . Il a ensuite demandé aux panélistes quels outils et mécanismes concrets ils mettaient en place pour garantir une participation plus plurielle et démocratique de la société civile et d'autres secteurs à la gouvernance de l'IA, et à expliquer les lacunes que ces efforts visent à combler .
on: Une gouvernance inclusive de l'IA doit s'appuyer sur des données probantes issues des communautés concernées et se traduire par des mécanismes de gouvernance concrets
La discussion examine comment les OSC peuvent s'engager plus activement dans les espaces de gouvernance dirigés par des experts, et si une infrastructure de preuves indépendante est nécessaire pour la prise de décision (Dr. Pedro dos Santos Maia)
Arg. 2Pedro structure la deuxième partie de la discussion autour du rôle de la société civile dans la production de preuves et la conception de la gouvernance. Il demande si les OSC ont besoin d'infrastructures de preuves indépendantes ou d'autres voies permettant à leurs connaissances et à leur expérience vécue d'influencer les cadres de l'IA dirigés par des experts.
Il a identifié un fil conducteur dans les projets des panélistes concernant la manière dont les preuves sont produites et intégrées dans l'infrastructure de gouvernance de l'IA . Il a ensuite demandé comment les OSC pourraient participer plus activement aux groupes d'experts actuels, et si une infrastructure de preuves indépendante est nécessaire pour orienter la prise de décision, ou si d'autres voies pourraient permettre de traduire les connaissances des OSC dans les cadres actuels de l'IA .
on: La participation de la société civile dépend d'une meilleure collaboration, de systèmes de preuves plus solides et d'une moindre fragmentation
La conversation établit à plusieurs reprises un lien entre les lacunes actuelles de la gouvernance et l'exclusion de certains acteurs des processus de consultation, d'expertise et de mise en œuvre (Dr. Pedro dos Santos Maia)
Arg. 3Pedro oriente à plusieurs reprises la conversation vers l'inclusion, en soulignant que les défaillances de la gouvernance de l'IA sont liées à l'exclusion des processus de consultation et de participation. Sa modération met en évidence que la qualité de la gouvernance dépend de la capacité des acteurs à contribuer par des preuves, une expertise et une expérience vécue.
Il a structuré la discussion générale autour de la participation démocratique de la société civile et d'autres composantes de la société à la gouvernance de l'IA . Par la suite, il a explicitement résumé les thèmes récurrents du panel comme étant le besoin de collaboration, de participation des États et de preuves, reliant ainsi les lacunes de la gouvernance à la question de l'inclusion dans ces processus .
on: La participation actuelle à l'IA est excluante, en particulier pour les groupes marginalisés et les communautés situées en dehors des centres de pouvoir dominants
Le panel examine explicitement comment la gouvernance de l'IA peut refléter et renforcer la participation des jeunes, plutôt que de les traiter comme une considération secondaire (Dr. Pedro dos Santos Maia)
Arg. 4Pedro soulève explicitement la participation des jeunes comme une question de conception de la gouvernance, et non comme un sujet secondaire. Il demande si les jeunes doivent être associés par les mêmes structures que les experts, ou par des mécanismes plus adaptés à leurs besoins spécifiques.
Il a demandé comment la gouvernance de l'IA pourrait être conçue de manière à refléter la participation des jeunes et comment ceux-ci pourraient être intégrés à la conversation . Il a également demandé si les méthodes existantes orientées vers les experts sont suffisantes, ou si quelque chose de plus spécifique est nécessaire pour répondre aux besoins des jeunes .
on: La participation des jeunes à la gouvernance de l'IA doit être substantielle plutôt que symbolique, avec une véritable influence sur les décisions
L'exercice de clôture invite le panel à imaginer quels organes, cadres et critères de référence pour la participation des jeunes devraient exister d'ici cinq ans (Dr. Pedro dos Santos Maia)
Arg. 5Pedro conclut le panel en invitant les intervenants à passer du diagnostic à la conception. Il leur demande d'imaginer des arrangements institutionnels concrets, des cadres et des critères de référence qui devraient être mis en place d'ici cinq ans pour soutenir la participation des jeunes à la gouvernance de l'IA.
Il a introduit un exercice final demandant aux panélistes d'imaginer la situation dans cinq ans et d'indiquer ce qu'ils souhaiteraient voir mis en œuvre en matière de participation des jeunes à la gouvernance de l'IA . Il a notamment interrogé les participants sur les types d'organes, de cadres et de critères de référence qu'ils espéraient voir exister d'ici là .
on: Les cinq prochaines années devraient apporter des structures plus formelles, plus transparentes et mieux dotées en ressources pour la participation des jeunes à la gouvernance de l'IA
Les questions du modérateur relient la gouvernance à l'éducation pratique, en demandant comment associer les jeunes et la société dans son ensemble à une participation éclairée (Dr. Pedro dos Santos Maia)
Arg. 6La modération de Pedro relie systématiquement la gouvernance de l'IA à la compréhension et à la participation du public, et pas uniquement à la régulation par les experts. En posant des questions sur l'inclusion des jeunes, puis en invitant le public à poser des questions sur l'éducation, il contribue à relier les débats sur la gouvernance à la culture numérique pratique et au renforcement des capacités sociales.
Il a demandé comment la gouvernance de l'IA pourrait mieux inclure les jeunes et si ces derniers avaient besoin de mécanismes de participation spécifiques allant au-delà du modèle expert . Il a ensuite ouvert le débat au public, ce qui a directement conduit à une discussion sur la capacité des parents et des enseignants à enseigner l'IA et sur les moyens de favoriser le dialogue intergénérationnel .
on: La culture de l'IA et l'éducation sont essentielles, et les institutions doivent accompagner les enseignants, les parents et les jeunes plutôt que de présupposer leur état de préparation
Une préoccupation clé du public est de savoir si les outils de gouvernance resteront adéquats si une IA très avancée arrive dans les cinq prochaines années (Audience)
Arg. 1Le public soulève la crainte que les mécanismes de gouvernance actuels puissent être dépassés par les progrès rapides des capacités de l'IA. La question invite le panel à se demander si les outils évoqués sont pérennes dans l'hypothèse où une IA très avancée émergerait prochainement.
Un membre du public a fait référence à la conviction du cofondateur et PDG de Google selon laquelle une IA très avancée pourrait voir le jour avant 2030, et a demandé ce que cela impliquerait pour la gouvernance de l'IA si cela survenait dans les cinq prochaines années .
Le public souligne que le dialogue intergénérationnel est nécessaire et demande comment ce dialogue peut concrètement être encouragé en pratique (Audience)
Arg. 2Le public soutient qu'un large consensus sur le dialogue intergénérationnel ne suffit pas sans méthodes pratiques pour le concrétiser. La question vise à identifier des stratégies concrètes pour relier les générations dans la gouvernance et l'éducation à l'IA.
Un membre du public a déclaré partager l'avis que le dialogue intergénérationnel doit avoir lieu, mais a demandé directement comment ce dialogue peut être encouragé en pratique .
Le public établit un lien entre les risques futurs de l'IA et l'urgence de renforcer dès maintenant les capacités de gouvernance, plutôt que de supposer que les systèmes actuels sont suffisants (Audience)
Arg. 3Le public soutient que la perspective de progrès rapides de l'IA renforce l'urgence des travaux de gouvernance actuels. Plutôt que de supposer que les institutions existantes seront à la hauteur, la question implique que les capacités de gouvernance doivent être renforcées immédiatement.
La question du public a mis en relation la perspective d'une IA très avancée avant 2030 avec le défi pratique de la réponse de la gouvernance si de tels systèmes émergent dans cinq ans . Cette formulation a traité les capacités futures de l'IA comme une raison de tester et de renforcer dès maintenant les capacités de gouvernance .
Le public demande si les parents et les enseignants sont équipés pour enseigner l'IA et comment la société peut instaurer le dialogue intergénérationnel nécessaire à l'engagement des jeunes (Audience)
Arg. 4Le public soutient que la participation effective des jeunes dépend de la capacité des adultes qui les entourent à les soutenir. La question met en évidence les écoles et les familles comme intermédiaires essentiels pour instaurer le dialogue intergénérationnel nécessaire à un engagement significatif autour de l'IA.
Un membre du public a demandé si les enseignants et les parents sont équipés pour enseigner l'IA à la prochaine génération et, dans le cas contraire, comment la société peut développer cette capacité à grande échelle .
Le public invite le panel à réfléchir à l'évolution nécessaire de la gouvernance si des systèmes de niveau AGI émergent dans ce même délai de cinq ans (Audience)
Arg. 5Le public remet en question l'horizon de planification à cinq ans du panel en introduisant la possibilité que des systèmes de niveau AGI émergent durant cette même période. Cela implique que les recommandations futures ne doivent pas seulement améliorer la participation, mais aussi rester adaptables à des changements technologiques potentiellement transformateurs.
Le membre du public a explicitement demandé ce que l'arrivée d'une IA très avancée dans un délai de cinq ans signifierait et comment la gouvernance de l'IA pourrait être assurée dans ces conditions .
Le public affirme explicitement qu'une gouvernance efficace de l'IA dépend de la capacité à outiller les enseignants et les parents pour soutenir la prochaine génération (Audience)
Arg. 6Le public soutient que la gouvernance ne peut réussir sans renforcer les capacités pratiques des adultes qui façonnent l'apprentissage et le développement des enfants. Cela positionne la culture de l'IA pour les enseignants et les parents comme un prérequis à une participation sociale significative à la gouvernance de l'IA.
Le membre du public a demandé si les enseignants et les parents sont en mesure d'enseigner l'IA et, dans le cas contraire, comment ces capacités peuvent être développées, établissant explicitement un lien entre le soutien intergénérationnel et les besoins de la prochaine génération .
on: La culture de l'IA et l'éducation sont essentielles, et les institutions doivent soutenir les enseignants, les parents et les jeunes plutôt que de présupposer leur préparation
Graphe de connaissances de la session
Intervenants · Sujets · Arguments · Relations
All panellists agreed that AI governance should not remain abstract or expert-only, but should be built through concrete tools that connect evidence from affected people to operational accountability. Pedro framed the discussion around concrete mechanisms for more inclusive AI governance . Emaan described documenting AI-related harms in minority communities and linking these to complaint pathways and policy input . Addie argued that 'evidence plus infrastructure equals trust' and said community input should be converted into benchmarks and evaluations . Vasileios similarly stressed operational tools such as risk libraries, controls libraries and mitigation techniques to make governance actionable .
Community-centred harm documentation and complaint pathways for minority groups to feed AI policy and accountability (Ms. Emaan Yasin Malik)
Local evidence plus evaluation infrastructure can rebuild trust and help communities assess AI systems before and during deployment (Ms. Addie Achan)
Operational governance needs risk libraries, control libraries and mitigation tools that translate regulation into practical accountability structures (Mr. Vasileios Rovilos)
The panel focuses on how to build more inclusive and diverse AI governance with plural participation from civil society and other social actors (Dr. Pedro dos Santos Maia)
This aligns with bottom-up and community-centred governance approaches that emphasise cultivating governance from affected communities rather than imposing it from above [S49]. It is also reinforced by examples of community-owned data collection and community-driven decision-making models, which show how lived evidence can be turned into operational governance practice [S57], and by critiques of AI deployments that exclude residents from deciding what systems optimise for [S60].
There was broad agreement that CSOs need stronger ways to participate in AI governance through collaboration and evidence-sharing rather than isolated work. Pedro explicitly asked how CSOs could participate more actively and whether independent evidence infrastructure was needed . Emaan said CSOs in Pakistan face donor-driven, short-term and siloed conditions and therefore need more collaboration and possibly supporting bodies . Addie agreed that too much is happening in isolation and said CSOs can collect evidence and plug it into existing infrastructure, while also widening ideas of what counts as evidence . Vasileios rejected an either/or framing between infrastructure and evidence and argued for combined systems built on CSO independence, evidence integrity and common language to avoid fragmentation .
In Pakistan and similar contexts, CSOs struggle to build evidence infrastructure because funding is short-term, donor-driven, repetitive and siloed, so stronger collaboration and support bodies are needed (Ms. Emaan Yasin Malik)
CSOs can collect valuable community evidence and connect it to state or institutional infrastructure, but there must also be broader recognition of what counts as evidence (Ms. Addie Achan)
AI governance should not treat infrastructure and evidence as separate choices; CSO independence, evidence integrity and a common taxonomy are all needed to avoid fragmentation and improve influence (Mr. Vasileios Rovilos)
The discussion asks how CSOs can engage more actively in expert-led governance spaces and whether independent evidence infrastructure is needed for decision-making (Dr. Pedro dos Santos Maia)
This reflects wider multistakeholder digital governance practice, where collaborative policy processes and structured stakeholder participation are treated as prerequisites for inclusive governance [S58] [S62]. Community-based and civil society-led models also show the importance of shared evidence, coordination, and policy-shaping roles for non-state actors rather than merely reacting to state decisions [S57] [S59].
The intervenants converged on the view that exclusion is already built into many AI and tech participation systems. Emaan provided a concrete example from Pakistan, where hackathon participation was dominated by young Muslim men, with women and minority communities largely absent . Addie warned that AI for Good deployments often export Californian or US biases into other contexts without local accountability . Pedro repeatedly steered the discussion towards who is left out of consultation and participation in AI governance . Together, these points show agreement that AI governance must address structural inequalities, not just procedural inclusion.
Exclusion is visible in practice: youth tech participation in Pakistan was dominated by Muslim men, while women and minority communities were largely absent, revealing deeper class and community barriers (Ms. Emaan Yasin Malik)
AI for Good efforts often export Californian or US assumptions and biases into other contexts without sufficient guardrails or local accountability (Ms. Addie Achan)
The conversation repeatedly links current governance gaps to who is left out of consultation, expertise and implementation processes (Dr. Pedro dos Santos Maia)
This is supported by authoritative critiques noting that residents, marginalised communities, and those outside dominant linguistic and technical centres are often excluded from deciding how AI systems are designed and deployed [S60] [S61]. Broader inclusion frameworks also stress that policy inclusion and access inclusion remain unfinished tasks in digital governance, especially for underserved communities [S62].
All three panellists, prompted by Pedro, agreed that youth participation should go beyond symbolic presence and should shape real decisions. Pedro explicitly asked how AI governance could mirror youth participation and whether youth need tailored participation models beyond expert structures . Emaan stressed that youth participation must account for inequality in access, language and understanding, and that students often wrongly think only coders can have a say . Addie used the contrast between tokenism and shared decision-making to argue that youth should have genuine authority and that their presence should change outcomes . Vasileios likewise criticised tokenisation, said youth are structurally distant from decision-making, and argued they must be included proactively in processes that matter, with follow-through .
Youth participation must account for inequality in access, language and literacy; many students do not know they can shape AI governance without being coders, so rights-based education and local-language resources are essential (Ms. Emaan Yasin Malik)
Youth should have meaningful authority rather than token roles, because their perspective is distinct and especially relevant to long-term impacts such as environmental and social effects (Ms. Addie Achan)
Young people are structurally distant from decision-making even though they are heavily exposed to AI systems, so they must be included early, given influence and supported through follow-through (Mr. Vasileios Rovilos)
The panel explicitly examines how AI governance can mirror and strengthen youth participation rather than treating young people as an afterthought (Dr. Pedro dos Santos Maia)
This is directly supported by UN policy framing on meaningful youth engagement, which highlights structured mechanisms such as youth councils, youth parliaments, technical working groups, and participation in official delegations [S53]. It is also echoed in digital governance discussions calling for youth to move from token inclusion to shared decision-making, including formal youth seats and co-design roles in governance processes [S54] [S64].
A strong area of consensus was that AI literacy is now a governance issue, not only an educational add-on. The audience asked whether teachers and parents are equipped to teach AI and how to build intergenerational dialogue . Addie said teachers and parents are not automatically equipped because AI is a new skill set and expertise is not age-based . Emaan said teachers and parents are willing to engage, but need free, accessible and language-appropriate resources, curricula and workshop materials . Vasileios reinforced this by arguing that schools and educators should be a top priority for AI literacy because children are already using tools like Claude without supervision . Pedro's moderation linked youth participation to broader informed participation and capacity-building .
Teachers, parents and students are willing to engage with AI, but they need free, accessible and language-appropriate curricula and workshop resources to do so effectively (Ms. Emaan Yasin Malik)
Because AI is new, expertise is not simply age-based; parents and teachers are not automatically equipped, which strengthens the case for shared participation across generations (Ms. Addie Achan)
AI literacy should be a priority obligation for schools and educators, since young people are already using AI tools without adult supervision or institutional readiness (Mr. Vasileios Rovilos)
The audience explicitly argues that effective AI governance depends on equipping teachers and parents to support the next generation (Audience)
The moderator’s questions connect governance to practical education, asking how to bring youth and broader society into informed participation (Dr. Pedro dos Santos Maia)
This aligns with established digital literacy thinking that treats educator capacity-building as a high-priority societal responsibility rather than an individual burden [S65]. Recent education-focused analysis similarly argues that adaptation to AI requires institutional backing for teachers, support for parents and students, and realistic recognition that readiness cannot be assumed [S55] [S56].
The panel broadly agreed that youth participation should be institutionalised over the next five years through formal mechanisms, transparency and resources. Pedro asked the panellists to imagine concrete bodies, frameworks and benchmarks for youth participation within five years . Emaan proposed mandatory youth participation in international reporting processes and an independent youth-run digital commission in Pakistan backed by state resources . Addie proposed transparent participatory systems and independent evaluations showing whether AI tools meet public needs . Vasileios agreed on the need for more funding, stronger follow-through, impact-driven participation and AI literacy embedded in institutions .
Youth participation should be mandatory in international digital rights reporting, and Pakistan should develop an independent youth-run digital commission with state support (Ms. Emaan Yasin Malik)
Governments should create transparent participatory systems through which people, including youth, can state what they want from AI and see independent evaluations of whether systems meet those needs (Ms. Addie Achan)
More funding, stronger follow-through and deeply embedded AI literacy are necessary so institutions consistently include youth in decision-making rather than using symbolic participation (Mr. Vasileios Rovilos)
The closing exercise invites the panel to imagine what bodies, frameworks and benchmarks for youth participation should exist within five years (Dr. Pedro dos Santos Maia)
This has clear policy precedent in UN and multilateral practice, where formal youth participation mechanisms already include national youth councils, youth parliaments, technical working groups, youth ombudsperson roles, and youth participation in official delegations [S53]. Comparable digital governance discussions have also proposed formalising youth seats, advisory platforms, internships, and participatory structures to ensure sustained influence rather than ad hoc consultation [S54] [S64].
Both intervenants argued that governance should begin from the experiences and knowledge of local communities. Emaan focused on documenting harms affecting Pakistan's Christian community and building complaint and policy pathways from that evidence . Addie similarly argued that collecting community inputs and turning them into benchmarks and evaluations is the route to trust and accountable deployment . All three shared the view that CSO evidence work is valuable but currently weakened by fragmentation and insufficient support. Emaan highlighted siloed donor-driven work and the need for collaboration . Addie said too much is happening in isolation and that CSOs can feed evidence into larger institutional systems . Vasileios added that evidence and infrastructure must be joined through common taxonomy and integrity to avoid fragmentation . Addie and Vasileios strongly aligned in rejecting token youth participation. Addie distinguished between tokenism and youth-initiated shared decision-making and argued that youth must have authority that genuinely affects outcomes . Vasileios similarly criticised tokenisation, said youth are structurally distant from decision-making, and stressed early inclusion, influence and follow-through . These intervenants shared a practical concern with how youth are actually reached. Emaan stressed inequalities between elite and underprivileged students, language barriers, and misconceptions that only coders can participate in governance . Vasileios complemented this by saying youth are among the most exposed to AI systems yet remain structurally distant from decision-making, so they must be brought in proactively . There was clear alignment that adults around young people are not yet fully prepared for AI, and that support systems are needed. The audience directly raised the issue of whether parents and teachers are equipped . Addie answered that they are not automatically equipped because AI is new . Emaan said they are willing to engage if given accessible and localised resources . Vasileios added that schools should be a top-tier AI literacy priority because children are already using AI without adult supervision .
Although the panel was framed around AI governance, the discussion converged unexpectedly strongly on schools, parents, teachers and literacy as core governance concerns. Pedro's questioning opened space for this by linking youth participation to broader informed participation . The audience then pushed the issue directly . Addie, Emaan and Vasileios all treated educational readiness as central to governance effectiveness rather than peripheral .
Despite coming from different institutional standpoints, the intervenants converged on the importance of evidence rooted in real-world impacts. Emaan approached this through minority harm documentation and complaint systems , Addie through community inputs and independent evaluation , and Vasileios through operational evidence inventories such as risk and controls libraries . This shared emphasis across rights-based, community and compliance-oriented perspectives was a notable area of consensus.
The intervenants did not stop at calling for more youth inclusion; they converged on the stronger claim that participation must affect power and outcomes. Emaan pointed to structural barriers that must be removed before youth can participate meaningfully . Addie explicitly invoked the difference between tokenism and shared decision-making . Vasileios echoed this by criticising tokenisation and demanding early inclusion, influence and follow-through .
The strongest areas of agreement were that AI governance must be more inclusive, evidence-based and operational; that CSOs and affected communities should play a larger role in producing evidence; that youth participation must be meaningful rather than tokenistic; and that AI literacy for schools, parents and educators is now a core governance requirement rather than a secondary issue .
All three intervenants supported inclusive AI governance, but they advanced different primary mechanisms. Emaan prioritised documenting harms experienced by marginalised communities and creating complaint and referral pathways into human rights institutions . Addie prioritised collecting community inputs and converting them into benchmarks and independent AI evaluations to rebuild trust around deployment . Vasileios prioritised translating regulation into operational governance through risk libraries, controls libraries and mitigation techniques that can support accountability structures . These are not mutually exclusive, but they reflect different views on what the most immediate governance lever should be.
Community-centred harm documentation and complaint pathways for minority groups to feed AI policy and accountability (Ms. Emaan Yasin Malik)
Local evidence plus evaluation infrastructure can rebuild trust and help communities assess AI systems before and during deployment (Ms. Addie Achan)
Operational governance needs risk libraries, control libraries and mitigation tools that translate regulation into practical accountability structures (Mr. Vasileios Rovilos)
This disagreement maps onto wider governance tensions between human rights accountability frameworks that stress oversight, redress, and clear rules [S50], bottom-up community governance models centred on locally owned evidence and participatory decision-making [S57], and more compliance-oriented approaches focused on embedding safeguards, transparency, and explainability into systems and institutions [S52].
When asked how CSOs could participate more actively in expert-led AI governance, Emaan stressed that CSOs in Pakistan face donor-driven, short-cycle funding and siloed work, so collaboration and some supporting body are needed to help them build evidence capacity . Addie argued that CSOs can gather evidence and then plug it into existing infrastructure, using the New Zealand example to show how independent curation can connect with state-backed institutional protections . Vasileios rejected an either/or framing and instead emphasised combining independence, evidence integrity and common taxonomies to avoid fragmentation across CSOs and regulators . The disagreement lies in the institutional remedy each treats as most important.
In Pakistan and similar contexts, CSOs struggle to build evidence infrastructure because funding is short-term, donor-driven, repetitive and siloed, so stronger collaboration and support bodies are needed (Ms. Emaan Yasin Malik)
CSOs can collect valuable community evidence and connect it to state or institutional infrastructure, but there must also be broader recognition of what counts as evidence (Ms. Addie Achan)
AI governance should not treat infrastructure and evidence as separate choices; CSO independence, evidence integrity and a common taxonomy are all needed to avoid fragmentation and improve influence (Mr. Vasileios Rovilos)
Relevant external context shows multiple recognised pathways: formal support and participation mechanisms for underrepresented constituencies [S53], integration of stakeholder input into national and multilateral policy structures [S52] [S62], and collaborative multistakeholder models that depend on coordination and shared frameworks rather than fragmented engagement [S58] [S59].
In the forward-looking exercise, Emaan proposed mandatory youth participation in international reporting processes and an independent youth-run digital commission in Pakistan supported by the state . Addie proposed transparent participatory voting systems paired with independent evaluations and objective scores showing whether AI systems meet public needs . Vasileios instead focused on more funding, stronger follow-through, strengthened rights and deeply embedded AI literacy in institutional practice so youth inclusion becomes impact-driven rather than symbolic . They agreed on the need for stronger youth influence, but differed on the institutional design that should deliver it.
Youth participation should be mandatory in international digital rights reporting, and Pakistan should develop an independent youth-run digital commission with state support (Ms. Emaan Yasin Malik)
Governments should create transparent participatory systems through which people, including youth, can state what they want from AI and see independent evaluations of whether systems meet those needs (Ms. Addie Achan)
More funding, stronger follow-through and deeply embedded AI literacy are necessary so institutions consistently include youth in decision-making rather than using symbolic participation (Mr. Vasileios Rovilos)
This has direct policy background in existing models for institutionalising youth participation, including youth councils, youth parliaments, technical working groups, youth ombudspersons, and participation in official delegations [S53]. Digital governance examples add further options such as formal youth seats, internships in policy offices, and regional advisory platforms, showing that the disagreement concerns model choice rather than whether institutionalisation is needed [S54] [S64].
Asked about the possibility of highly advanced AI arriving before 2030, Addie responded by stressing that even if models become more capable, governance will still need to address human impacts and perspectives, and youth will remain important participants in that process . Vasileios took a more regulatory and incremental approach, stressing that governments should proceed step by step, set common expectations, and recognise that AGI may challenge human oversight and existing regulatory assumptions . The difference is between a more human-centred continuity view and a more cautious, institutionally sequenced governance response.
Youth should have meaningful authority rather than token roles, because their perspective is distinct and especially relevant to long-term impacts such as environmental and social effects (Ms. Addie Achan)
More funding, stronger follow-through and deeply embedded AI literacy are necessary so institutions consistently include youth in decision-making rather than using symbolic participation (Mr. Vasileios Rovilos)
This reflects a well-established policy debate over how much emphasis governance should place on long-term existential risks versus immediate and mid-term harms. A recognised framing distinguishes short-term known risks, mid-term concentration risks, and long-term unknown risks, while cautioning that public debate has often over-focused on extinction scenarios at the expense of present governance needs [S51].
On intergenerational dialogue and education, Addie said teachers and parents are not currently equipped, and because AI expertise is not age-based, governance should reflect shared participation rather than assume adults are the natural arbiters . Emaan emphasised willingness and demand from teachers and parents, arguing that what is needed is free, practical, language-appropriate curriculum and workshop support . Vasileios went further in making AI literacy a policy obligation, arguing from the example of his niece using Claude unsupervised that schools and educators should be a top-tier priority within public-law style AI literacy expectations . The disagreement is about the primary frame: equal intergenerational participation, practical resource provision, or formal institutional obligation.
Because AI is new, expertise is not simply age-based; parents and teachers are not automatically equipped, which strengthens the case for shared participation across generations (Ms. Addie Achan)
Teachers, parents and students are willing to engage with AI, but they need free, accessible and language-appropriate curricula and workshop resources to do so effectively (Ms. Emaan Yasin Malik)
AI literacy should be a priority obligation for schools and educators, since young people are already using AI tools without adult supervision or institutional readiness (Mr. Vasileios Rovilos)
External sources support both sides of this tension. One strand frames digital and AI literacy as a broad societal responsibility involving users, families, educators, and institutions [S55] [S64] [S65]. Another gives schools and educators a particularly central role, arguing that educator capacity and institutional support are prerequisites for effective adaptation to AI in education [S55] [S56] [S65].
This difference was unexpected because the panel was otherwise highly aligned. In response to the audience question on highly advanced AI, Addie suggested that even with more capable systems, governance would still fundamentally turn on human perspectives and impacts . Vasileios instead emphasised regulatory sequencing, common expectations and the possibility that AGI could unsettle core assumptions such as human oversight, calling for a step-by-step approach . The disagreement is subtle but notable because it concerns how much present governance should adapt to speculative capability jumps.
This divergence was unexpected because both supported intergenerational learning. Addie stressed that AI expertise is not naturally located in adults and therefore governance should not default to teacher- or parent-led authority . Vasileios, while agreeing that adults are not ready, drew a stronger policy conclusion: schools and educators should be a top-tier priority under AI literacy obligations because children are already using AI tools without supervision . The disagreement concerns institutional hierarchy rather than ultimate goals.
The discussion contained low to moderate disagreement. The intervenants were strongly aligned on the broad goals of inclusive AI governance, stronger evidence, more meaningful youth participation, and better AI literacy . Most differences concerned strategy and institutional design rather than underlying principles: Emaan leaned towards community-centred harm documentation, human rights redress and formal youth mandates ; Addie leaned towards participatory evidence, independent evaluation and trust-building mechanisms ; Vasileios leaned towards operational governance tooling, shared taxonomies, funding, follow-through and institutionalised literacy obligations .
The intervenants agreed that evidence and collaboration are essential for meaningful CSO participation in AI governance. Emaan highlighted funding constraints, duplicated projects and siloed data collection, arguing for stronger collaboration and support structures . Addie agreed that collaboration is crucial, but placed more emphasis on CSOs feeding evidence into existing infrastructure and broadening what counts as evidence . Vasileios agreed on access to evidence and collaboration, but insisted that a common taxonomy and evidence integrity are equally necessary to avoid fragmentation . They shared the same goal but proposed different routes to it.
In Pakistan and similar contexts, CSOs struggle to build evidence infrastructure because funding is short-term, donor-driven, repetitive and siloed, so stronger collaboration and support bodies are needed (Ms. Emaan Yasin Malik) CSOs can collect valuable community evidence and connect it to state or institutional infrastructure, but there must also be broader recognition of what counts as evidence (Ms. Addie Achan) AI governance should not treat infrastructure and evidence as separate choices; CSO independence, evidence integrity and a common taxonomy are all needed to avoid fragmentation and improve influence (Mr. Vasileios Rovilos)
All three intervenants agreed that youth participation must be meaningful rather than symbolic. Emaan stressed barriers of access, language and misconceptions about coding, and advocated rights-based and local-language educational pathways . Addie argued that youth should have genuine authority and explicitly contrasted meaningful participation with tokenism . Vasileios likewise criticised tokenisation and argued for early inclusion, influence and follow-through because youth are already heavily exposed to AI systems . They agreed on the goal of meaningful youth participation, but differed over whether the main route is literacy and inclusion, participatory authority, or institutional timing and follow-through.
Youth participation must account for inequality in access, language and literacy; many students do not know they can shape AI governance without being coders, so rights-based education and local-language resources are essential (Ms. Emaan Yasin Malik) Youth should have meaningful authority rather than token roles, because their perspective is distinct and especially relevant to long-term impacts such as environmental and social effects (Ms. Addie Achan) Young people are structurally distant from decision-making even though they are heavily exposed to AI systems, so they must be included early, given influence and supported through follow-through (Mr. Vasileios Rovilos)
The intervenants agreed that teachers and parents are not yet fully prepared to support young people on AI issues. Addie said they are not equipped because AI is a new skill set, and therefore youth should have an equal voice in shared governance . Emaan emphasised that adults are willing and eager to engage, but need accessible and local-language materials and support . Vasileios agreed that institutional readiness is lacking, but framed the response more strongly as an AI literacy obligation for schools and educators . The common goal is stronger intergenerational capacity, but the means differ.
Because AI is new, expertise is not simply age-based; parents and teachers are not automatically equipped, which strengthens the case for shared participation across generations (Ms. Addie Achan) Teachers, parents and students are willing to engage with AI, but they need free, accessible and language-appropriate curricula and workshop resources to do so effectively (Ms. Emaan Yasin Malik) AI literacy should be a priority obligation for schools and educators, since young people are already using AI tools without adult supervision or institutional readiness (Mr. Vasileios Rovilos)
- Inclusive AI governance requires concrete, participatory mechanisms rather than abstract principles alone. The panel highlighted community harm documentation, complaint pathways, independent evaluations, risk libraries and control libraries as practical governance tools.
- Preuves and infrastructure were treated as foundational to trustworthy AI governance. Community evidence must be collected, translated into usable governance tools and connected to accountability structures.
- Civil society organisations have an essential role in identifying harms and producing evidence, but many lack funding, stable infrastructure, data access and coordination, especially in Pakistan and similar Global South contexts.
- Collaboration across CSOs, governments, regulators, youth groups and communities was repeatedly identified as necessary to avoid siloed work, fragmented standards and weak influence in policy processes.
- Current AI governance is often exclusionary. In practice, women, religious minorities, lower-income groups and non-English-speaking communities are frequently left out of consultation, technical participation and policy design.
- The panel stressed that AI governance should recognise multiple forms of evidence, including community experience and lived harms, not only technical or corporate metrics.
- Youth participation must be meaningful rather than symbolic. Young people should have actual influence over decisions, be involved early and be included in follow-up and feedback loops.
- AI literacy is a major governance issue. Many young people, teachers and parents are not adequately equipped, and local-language, accessible and free educational resources are needed.
- The discussion underscored that young people are already heavily exposed to AI systems in education, online platforms and future labour markets, making their participation in governance especially urgent.
- The panel argued that many organisations are already using AI without adequate governance capacity, creating a dangerous gap between adoption and oversight.
- There was a strong call for governance models that are locally grounded and do not simply export US or Californian assumptions into other settings.
- Looking ahead five years, participants envisaged stronger youth-centred structures such as mandatory youth inclusion in reporting processes, independent evaluations of AI systems, dedicated youth bodies and more embedded AI literacy obligations.
“Emaan Yasin Malik described how a youth tech hackathon in Pakistan received applications almost entirely from young Muslim men, with very low participation from women and none from Hindu, Christian or Sikh communities, and linked this exclusion to concerns about the legitimacy of Pakistan's national AI policy consultation process.”
“Emaan Yasin Malik explained that her project begins with documenting harms faced by Pakistan's Christian community, including deepfakes leading to blasphemy allegations, incitement, mob violence and arrests, before building referral pathways and multilingual resources.”
“Addie Achan framed her approach with the equation 'evidence plus infrastructure equals trust'.”
“Addie Achan warned that 'AI for good' may be deploying technologies developed with California or US biases into other communities in the name of doing good, but without the necessary guardrails.”
“Emaan Yasin Malik argued that in South Asia it is very difficult for CSOs to build their own evidence infrastructures because work is donor-funded, funding cycles are short, projects are repetitive, and organisations often work in silos.”
“Addie Achan offered the example of Māori communities in New Zealand building speech recognition for their language, with a CSO curating the data and the government placing it in a trust so it benefits the people and is protected from surveillance or extractive commercial use.”
“Vasileios Rovilos said the issue should not be framed as 'either infrastructure or access to evidence' but as 'and', warning that without a common taxonomy and language across CSOs and regulators there is a risk of a 'Tower of Babel situation'.”
“Emaan Yasin Malik described trying to explain AI in Urdu as 'nakli akal', or 'fake knowledge', and noted that students found it frightening, while many also assume they need to know coding in order to have a say in governance.”
“Addie Achan drew on Roger Hart's ladder of children's participation, contrasting tokenism with youth-initiated and shared decision-making, and asked whether youth presence changes outcomes or is merely performative.”
“Vasileios Rovilos argued that youth participation must be proactive and pre-emptive, not introduced after decisions are already predetermined, and stressed that young people are among those most subjected to AI tools through proctoring, phones and hiring systems.”
“Emaan Yasin Malik proposed that youth participation should be mandatory in digital-related international reporting processes, including UN mechanisms, so that states are compelled to provide evidence of what young people are saying.”
“Addie Achan said she would like to see a participatory voting system for people to express what they want from AI tools in their lives, combined with transparent objective scores from independent evaluations rather than company-led assessments.”
“In response to the audience, Addie Achan said she does not think teachers and parents are currently equipped to teach AI, and that expertise in this area has very little to do with age because the technology is so new.”
“Vasileios Rovilos recounted that his niece was using Claude for homework and told him her teachers did not know, using this to argue that educators should be a top-tier priority for AI literacy obligations.”
How can concrete tools and mechanisms be built to ensure more plural and democratic participation of civil society and other parts of society in AI governance?
This is the central governance question of the discussion. It is important because inclusive participation determines whether AI governance reflects affected communities rather than only technical or corporate actors.
How can harms faced by marginalised religious communities in Pakistan from AI-facilitated violence, including deepfakes and blasphemy-related incitement, be documented effectively?
This is important because evidence of harm is needed to design protections, complaint pathways and policy interventions for communities currently excluded from AI governance.
How can complaint and referral pathways be designed so that institutions are equipped to handle AI-related human rights complaints from vulnerable communities?
This matters because documenting harms alone is insufficient unless institutions can receive, process and remedy complaints in practice.
How can AI governance resources be created in local languages such as Urdu and Punjabi so affected communities can participate meaningfully?
Language accessibility is essential for inclusion, especially where technical governance debates are otherwise limited to elite or English-speaking groups.
How can local communities evaluate and govern AI systems entering their contexts, rather than having externally developed systems imposed on them?
This is important because local evaluation can reveal bias, misalignment and lack of trust in AI systems deployed in the name of public benefit.
How should community inputs be converted into practical governance infrastructure such as benchmarks and AI evaluations?
This is a key research and implementation gap because community knowledge must be translated into operational tools if it is to shape deployment decisions.
How can operational AI governance infrastructures such as risk libraries, control libraries and mitigation techniques be co-shaped with stakeholders to strengthen accountability?
This matters because governance principles require practical implementation tools and evidence trails to become enforceable and auditable.
Do civil society organisations need independent evidence infrastructure to shape AI decision-making, or are there alternative ways to translate their knowledge into existing AI governance frameworks?
This is important because the answer affects whether AI governance should prioritise building new independent institutions, adapting existing ones, or combining both approaches.
How can civil society organisations collaborate more effectively rather than duplicating data collection and working in silos?
This is important because fragmented efforts weaken evidence quality, reduce efficiency and make it harder to influence policy and regulation.
What funding models could support longer-term civil society and youth participation in AI governance, especially in donor-dependent environments such as Pakistan?
Sustainable financing is crucial because short funding cycles prevent the development of durable evidence infrastructure, collaboration and youth engagement.
How can access to fragmented government-held datasets be improved for public-interest AI governance and rights-based use cases?
Data access is a major practical barrier to oversight, accountability and socially beneficial AI applications such as child protection systems.
What governance models can protect community-owned data, such as indigenous or minority language data, from surveillance or exploitative commercial use?
This is important because communities need mechanisms to retain control over valuable data while still enabling beneficial uses.
What should count as valid evidence in AI governance, particularly when civil society lacks the resources available to commercial AI actors?
Defining evidence standards is essential to ensure that community-based and public-interest evidence is recognised in governance processes.
How can common taxonomies or shared languages be developed so civil society organisations and regulators can communicate without fragmentation?
A shared vocabulary is important because fragmented terminology can prevent evidence from being compared, aggregated or translated into policy action across jurisdictions.
How can AI governance better mirror meaningful youth participation rather than treating young people as symbolic participants?
This is important because young people are major subjects of AI systems and will live longest with their consequences, yet are often excluded from decision-making.
Do young people need participation mechanisms different from those used for experts, and if so what should those mechanisms look like?
This matters because expert-led participation models may not be accessible or meaningful for youth, especially across different educational and socioeconomic contexts.
How can AI governance and AI literacy be explained to students in local languages and in ways that do not assume coding knowledge?
This is important because many students may otherwise believe they are unqualified to participate in governance debates about technologies that affect them directly.
How can universities, schools and national human rights institutions be used to build sustained youth engagement in AI and rights-based governance?
These institutions may provide durable entry points for participation, curriculum and accountability, especially in countries where dedicated AI governance structures are limited.
How can youth participation be assessed using a spectrum from tokenism to shared decision-making, and how can governance processes move towards the higher end of that spectrum?
This is important because many participation initiatives appear inclusive but give young people little real authority or influence over outcomes.
How can locally deployed AI systems incorporate proactive and continuous feedback loops from the young people most affected by them?
This matters because governance needs not just initial consultation but ongoing mechanisms to capture lived impacts and adapt systems accordingly.
What bodies, frameworks or benchmarks should exist within five years to institutionalise youth participation in AI governance?
This forward-looking question is important because it shifts the discussion from principles to concrete institutional design and measurable goals.
Should youth participation in digital and AI-related international reporting processes be made mandatory, including across UN treaty reporting cycles?
This is important because mandatory participation could compel states to gather and report evidence of youth perspectives rather than treating them as optional.
Could an independent youth-run digital commission be created in Pakistan, supported by state resources but self-governed?
This proposal is significant because it suggests a concrete institutional model for embedding youth leadership in digital rights and AI governance.
How could transparent participatory voting systems and independent evaluations be designed so communities, including young people, can express what they want from AI tools and assess whether those tools meet those needs?
This is important because it offers a practical mechanism for democratic input and accountability that is not controlled by AI companies themselves.
How should AI governance prepare for the possible arrival of AGI before 2030, and what role should young people play in governing it?
This is important because more advanced AI could strain existing governance frameworks, making questions of oversight, participation and human control more urgent.
How can intergenerational dialogue on AI be fostered in practice?
This matters because effective governance requires cooperation between young people and older generations rather than assuming either group can address AI challenges alone.
Are teachers and parents equipped to teach and guide the next generation on AI, and if not how can they be upskilled?
This is important because educators and parents are key intermediaries in AI literacy, but may currently lack the knowledge, training and resources to play that role well.
How should AI literacy obligations apply to schools, educators and public bodies, rather than focusing mainly on corporate deployers?
This is significant because current literacy efforts may overlook the public institutions shaping how children and young people encounter AI in daily life.
