Skip to main content
Weiter zur Homepage der Europäischen Kommission (öffnet in neuem Fenster)
Deutsch de
CORDIS - Forschungsergebnisse der EU
CORDIS

Advanced User-centric, Trustworthy and Privacy-preserving AI-powered Search Engine

Projektbeschreibung

Eine vertrauenswürdige, datenschutzfreundliche und nutzungszentrierte KI-gestützte Suchmaschine

Die jüngsten Fortschritte bei großen Sprachmodellen (LLMs) und KI-Lösungen haben zu einer wachsenden Nutzung von KI-gestützten Suchmaschinen (AI-Powered Search Engines, AIPSEs) wie Perplexity geführt. KI-Suchmaschinen könnten den europäischen grünen Deal erheblich voranbringen da sie wichtige Informationen aus verschiedenen Quellen zusammenfassen. Allerdings bergen aktuelle KI-Suchmaschinen ernsthafte Risiken, darunter Datenschutzbedenken und Antworten mit Verzerrungen, sodass sie für diese wichtigen Aufgaben ungeeignet sind. Mit Unterstützung durch das Marie-Skłodowska-Curie-Maßnahmenprogramm wird Projekt AURORA einen vertrauenswürdigen, nutzungsorientierten und datenschutzfreundlichen Prototyp entwickeln, der den Anforderungen der DSGVO und der EU-KI-Verordnung entspricht. Hierzu werden wesentliche Studien durchgeführt sowie Modelle und Datenschutzkonzepte entwickelt, um Falschinformationen zu unterbinden und den Datenschutz der Nutzerschaft zu gewährleisten.

Ziel

The European Green Deal aims to build a resource-efficient, competitive EU economy with net-zero greenhouse gas emissions, clean energy and sustainable industries. Achieving this requires quick and reliable access to information on climate change, energy production, and technological developments. AI-powered search engines (AIPSEs) like Perplexity, can automatically retrieve information from multiple sources and deliver synthesized answers to users—saving them time browsing various websites.

However, AIPSEs are still in their infancy and face critical security challenges, including generating biased or malicious responses, privacy leaks, and limited research in this area. For instance, Google’s AI Overviews generated dangerous responses like suggesting user eat rocks and glue (2024), and attackers can trick AIPSE into citing malicious content from phishing websites. Some AIPSEs track user histories for personalization, raising privacy risks; notably, a ChatGPT glitch exposed users' private conversations (2023).

AURORA (Advanced User-centric, tRustwOrthy and pRivacy-preserving AI-powered search engine) is my proposal to mitigate these challenges, which aims to develop a user-centric AIPSE that provides trustworthy responses while protecting user privacy, and adhering to GDPR and EU AI Act. AURORA includes: 1). a user study on how users perceive malicious responses generated by existing AIPSEs, to guide user-centric design (WP1); 2). a multi-agent debate model with ML-based filters to automatically block fabricated and malicious content (WP2), which is expected to block around 90% of malicious sources, and to reduce hallucinations by about 10%; 3). a local differential privacy scheme to protect user data (WP3). By preventing the spread of misinformation, blocking malicious responses, and protecting privacy, AURORA enables policymakers, researchers, and citizens to make informed decisions about energy, environmental policies, and sustainable practices.

Wissenschaftliches Gebiet (EuroSciVoc)

Schlüsselbegriffe

Programm/Programme

Thema/Themen

Finanzierungsplan

HORIZON-TMA-MSCA-PF-EF - HORIZON TMA MSCA Postdoctoral Fellowships - European Fellowships

Alle im Rahmen dieses Finanzierungsinstruments finanzierten Projekte anzeigen

Aufforderung zur Vorschlagseinreichung

(öffnet in neuem Fenster) HORIZON-MSCA-2025-PF

Alle im Rahmen dieser Aufforderung zur Einreichung von Vorschlägen finanzierten Projekte anzeigen

Koordinator

THE CHANCELLOR, MASTERS AND SCHOLARS OF THE UNIVERSITY OF OXFORD
Netto-EU-Beitrag
€ 260 347,92
Adresse
WELLINGTON SQUARE UNIVERSITY OFFICES
OX1 2JD Oxford
Vereinigtes Königreich
Region
South East (England) Berkshire, Buckinghamshire and Oxfordshire Oxfordshire
Aktivitätstyp
Higher or Secondary Education Establishments
Links
Gesamtkosten
Keine Daten

Beteiligte (1)