European Commission logo
polski polski
CORDIS - Wyniki badań wspieranych przez UE
CORDIS

Telecommunications and Computer Vision Convergence Tools for Research Infrastructures

Opis projektu

Nowe narzędzia oparte na telekomunikacji i komputerowym rozpoznawaniu obrazów

Telekomunikacja i komputerowe rozpoznawanie obrazów należą do odrębnych dziedzin nauki. Zmieni się to wraz z powstaniem nowego wspólnego obszaru badawczego, będącego efektem pojawienia się komunikacji bezprzewodowej opartej na radiach wykorzystujących fale milimetrowe o zasięgu bezpośredniej widoczności. Pozwoliło to na wykorzystanie danych z komputerowego rozpoznawania obrazów do przewidywania dynamiki kanałów bezprzewodowych i pomocy w tworzeniu map przestrzennych o wysokiej rozdzielczości na potrzeby lokalizacji i wykrywania, podczas gdy dane/obrazowanie radiowe mogą zwiększyć odporność komputerowego rozpoznawania obrazów na okluzję i warunki słabego oświetlenia. W ramach finansowanego ze środków UE projektu CONVERGE opracowany zostanie innowacyjny zestaw narzędzi składający się z anten i stacji bazowych wspomaganych technologią rozpoznawania wizualnego, symulatora wizualno-radiowego i modelera środowiska trójwymiarowego, a także algorytmów uczenia maszynowego do przetwarzania danych multimodalnych, w tym sygnałów komunikacyjnych i strumieni wideo.

Cel

Telecommunications and computer vision have evolved as separate scientific areas. This is envisioned to change with the advent of wireless communications with radios characterised by line-of-sight ranges which could benefit from visual data to predict the wireless channel dynamics. Computer vision applications will also become more robust if helped by radio-based imaging. This new joint research field relies on wireless communications, computer vision, sensing and machine learning, and it has a high innovation potential because of the large domain of innovative applications it enables and the relevant know-how available in Europe. However, the full potential of this new area can only be evaluated if adequate Research Infrastructures (RI) and tools are available.

The main objective of the CONVERGE project is the development of an innovative toolset aligned with the motto “view-to-communicate and communicate-to-view”. This toolset is a world-first and consists of vision-aided large intelligent surfaces, vision-aided fixed and mobile base stations, a vision-radio simulator and 3D environment modeler, and machine learning algorithms for multimodal data including radio signals, video streams, RF sensing, and traffic traces. This toolset will be deployed into 7 RIs mostly aligned with the ESFRI SLICES-RI and improve their competitiveness.

CONVERGE will also provide the scientific community with open datasets of experimental and simulated data obtained with the toolset in the RIs, meet scientific and industrial requirements by addressing relevant 6G verticals, enhance the competitiveness of the involved companies, extend the European influence to world-wide recognised RIs, enable the creation of new RIs, contribute to the development of new environment-friendly tools, and help European Union to address its societal challenges.

Koordynator

INESC TEC - INSTITUTO DE ENGENHARIADE SISTEMAS E COMPUTADORES, TECNOLOGIA E CIENCIA
Wkład UE netto
€ 1 557 500,00
Adres
RUA DR ROBERTO FRIAS CAMPUS DA FEUP
4200 465 Porto
Portugalia

Zobacz na mapie

Region
Continente Norte Área Metropolitana do Porto
Rodzaj działalności
Research Organisations
Linki
Koszt całkowity
€ 1 557 500,00

Uczestnicy (11)

Partnerzy (4)