Description du projet
Une IA consciente des valeurs pour les décisions morales humaines
Une IA consciente des valeurs est une IA qui remplit des fonctions morales humaines telles que l’acquisition et le maintien d’un système de valeurs et la prise de décisions menant à des actions moralement acceptables, la compréhension de l’intention qui les motive et les interactions appropriées à leur égard. Le projet VALAWAI, financé par le CEI, va développer une boîte à outils destinée à construire une IA consciente des valeurs basée sur deux piliers scientifiques qui intègrent une architecture pour la conscience et un cadre fondamental pour la prise de décisions morales. Le premier pilier s’inspire du modèle d’espace de travail neuronal global développé à partir de données neurophysiologiques et de données psychologiques. Le second s’appuie sur la psychologie, la cognition sociale et la science du cerveau social. Le projet se concentrera sur les réseaux sociaux, qui comptent plusieurs effets négatifs tels que la désinformation et la polarisation, sur les robots sociaux, qui peuvent faciliter la manipulation, et sur les protocoles médicaux.
Objectif
By Value-Aware AI we mean AI that includes a component performing the same function as human moral consciousness, namely the capacity to acquire and maintain a value system, use this value system to decide whether certain actions are morally acceptable and be aware of the value systems of its users so as to understand the intent and motivation of their actions and to properly and correctly engage with them.
The VALAWAI project will develop a toolbox to build Value-Aware AI resting on two pillars both grounded in science: An architecture for consciousness inspired by the Global Neuronal Workspace model developed on the basis of neurophysiological evidence and psychological data, and a foundational framework for moral decision-making based on psychology, social cognition and social brain science.
The project will demonstrate the utility of Value-Aware AI in three application areas for which a moral dimension urgently needs to be included: (i) social media, where we see many negative side effects such as disinformation, polarisation, and the instigation of asocial and immoral behavior, (ii) social robots, which are designed to be helpful or influence human behavior in positive ways but potentially enable manipulation, deceit and harmful behavior, and (iii) medical protocols, where VALAWAI tries to ensure medical decision making is value aligned.
The project contributes to the general goal of making EU-based AI more competitive by being more reliable, robust, ethically-guided, explainable and hence trustworthy. It does not make new proposals for guidelines and regulations (for which there is already considerable effort) but advances the state of the art in core AI technology so that ethics is embedded inside applications making them grounded in universal, European and personal values.
Champ scientifique
Mots‑clés
Programme(s)
- HORIZON.3.1 - The European Innovation Council (EIC) Main Programme
Régime de financement
HORIZON-EIC - HORIZON EIC GrantsCoordinateur
28006 Madrid
Espagne