European Commission logo
polski polski
CORDIS - Wyniki badań wspieranych przez UE
CORDIS

MULTISPECTRAL INTELLIGENT VISION SYSTEM WITH EMBEDDED LOW-POWER NEURAL COMPUTING

Opis projektu

Wyśrubowanie możliwości przetwarzania wizualnego inspirowanego biologią

Przesył danych w internecie rośnie wykładniczo. Wprowadzanie sieci 5G w coraz większym tempie i zapewnianie podłączenia urządzeniom działającym na obrzeżach sieci – od produktów konsumenckich i samochodów po roboty fabryczne – sprawia, że opracowanie energooszczędnego, wysokowydajnego przetwarzania brzegowego staje się coraz bardziej palącą koniecznością. W niedalekiej przyszłości wiele urządzeń połączonych na obrzeżach sieci będzie działać w oparciu o sygnały pochodzące z badania otoczenia, obserwacji i dostosowywania się do zmian. Dotyczy to w równym stopniu tak pojazdów autonomicznych, jak i robotów fabrycznych poruszających się po zatłoczonym magazynie. W ramach finansowanego przez UE projektu MISEL powstanie niskoenergetyczny system czujników neuromorficznych z wbudowanym przetwarzaniem neuromorficznym, które będą naśladować sposób widzenia człowieka na poziomie komórkowym w równym stopniu, co na poziomie mózgu i przetwarzania dla układów połączonych. Jeśli plany się powiodą, będzie to prawdziwa innowacja w systemach brzegowych.

Cel

"MISEL aims at bringing artificial intelligence to the edge computing (decisions made on-device) through a low-power bio-inspired vision system with multi-spectral sensing and in sensor spatio-temporal neuromorphic processing based on complex events. The science-to-technology breakthrough is the heterogeneous integration of a neuromorphic computing scheme featuring three different abstraction levels (cellular, cerebellar and cortex processors) with high-density memory arrays and adaptive photodetector technology for fast operation and energy efficiency. The context-aware, low power and distributed computation paradigm supported by MISEL is promising alternative to the current approach relying on massive-data transfers and large computational resources, e.g. workstations or cloud servers. This answers to the challenges and related scope presented in the Work Programme towards ""more complex, brain mimicking low power systems"" ""exploiting a wider range of biological principles from the hardware level up"" by introducing the human eye like adaptivity with cellular processor and the data fusion, learning, reasoning, and “conscious” decisions performed by the cortex.

The stand-alone system fabricated in MISEL will be tested on timely and challenging applications such as distinguishing birds from drones through their spatio-temporal flying signature, and scene anomaly detection from a mobile platform. From the technology development and industrialization point of view, MISEL includes the whole value chain: materials research for back-end of line (BEOL) processing-compatible densely-packed ferroelectric non-volatile memories (FeRAMs) and intensity adaptive photodetectors, novel neuromorphic computing algorithms and circuit implementations, and system level benchmarking. This is all in line with the challenge and scope of ""outperforming conventional SoA with relevant metric"" and benchmarking ""challenging end-to-end scenarios of use"" for industrial adaptation.
"

Zaproszenie do składania wniosków

H2020-FETPROACT-2018-2020

Zobacz inne projekty w ramach tego zaproszenia

Szczegółowe działanie

H2020-FETPROACT-2020-01

Koordynator

TEKNOLOGIAN TUTKIMUSKESKUS VTT OY
Wkład UE netto
€ 1 432 172,50
Adres
TEKNIIKANTIE 21
02150 Espoo
Finlandia

Zobacz na mapie

Region
Manner-Suomi Helsinki-Uusimaa Helsinki-Uusimaa
Rodzaj działalności
Research Organisations
Linki
Koszt całkowity
€ 1 432 172,50

Uczestnicy (8)