Dans le contexte de la gouvernance de l'IA, un processus de développement de systèmes d'IA est un ensemble de pratiques visant à garantir que tous les projets d'IA résolvent les problèmes auxquels ils doivent répondre et respectent les principes éthiques de l'IA. En tant que processus intrinsèquement opérationnel, le développement de systèmes d'IA doit se conformer à la politique du parlement en matière d'IA et suivre les procédures de l'institution en matière de gestion et de sécurité des données.
Dans un contexte parlementaire, un processus de développement de systèmes d'IA est pertinent pour la gouvernance de l'IA en tant que moyen de réduire les risques éthiques et opérationnels. Ci-dessous se trouvent des détails sur la manière dont il procède.
Préserver la confidentialité pour les personnes concernées par les données
Les données à caractère personnel doivent être protégées non seulement dans les phases de développement, mais aussi dans les éléments produits par le système d'IA.
Assurer la transparence tout au long des phases de développement et de maintenance
Les systèmes d'IA sont souvent complexes, ce qui rend leurs processus décisionnels internes opaques. C'est pourquoi les pratiques doivent être examinées de près afin d'améliorer la transparence tout au long du cycle de vie du système d'IA, depuis la planification initiale du projet jusqu'à la mise hors service du système. Cette approche doit permettre d'expliquer plus facilement les éléments produits par le système d'IA et de s'assurer que les phases de développement respectent les règles du parlement et sont conformes à la réglementation.
Réduire les biais et les discriminations
Des techniques permettant d'identifier les groupes à protéger des biais doivent être appliquées tout au long du processus, de la planification au déploiement. Lorsque les systèmes d'IA sont opérationnels, un suivi continu contribue à limiter les nouveaux biais qui n'ont pas été observés lors de la phase de développement.
Instaurer la redevabilité
Grâce à des étapes systématiques de planification, de mise en œuvre, de test et d'amélioration, les pratiques sont déléguées et approuvées par les principales parties prenantes, les fonctions et responsabilités de chacun étant clairement définies. La fonctionnalité du système d'IA doit être documentée de manière à pouvoir être auditée.
Améliorer la robustesse et la sécurité
Le processus de développement des systèmes doit se concentrer sur l'amélioration de la robustesse et de la sécurité, grâce à une architecture de système privilégiant la cybersécurité et à des tests approfondis.
Conserver l'autonomie humaine
Les humains doivent jouer un rôle permanent de vérification afin de s'assurer que les éléments produits par le système d'IA sont fiables, à la fois pendant le développement et après le déploiement en environnement réel. Cette surveillance humaine garantit que le système continue d'adhérer aux principes éthiques pris en compte lors de la phase projet et elle permet d'identifier de nouveaux risques éthiques.
Garantir la conformité par rapport à la réglementation
Les systèmes d'IA doivent se conformer à diverses exigences légales et réglementaires, établies à la fois en interne et dans le pays ou la région du parlement.