En el camp de la conducció autònoma, la fusió de sensors de càmera i radar s'ha consolidat com una configuració pràctica i eficient per a la percepció de l'entorn. No obstant això, els models existents solen entrenar-se amb supervisió específica per a cada tasca, cosa que limita la capacitat d'aprenentatge de representacions reutilitzables. Aquí és on sorgeix CRISP, un backbone espai-temporal càmera-radar que introdueix un enfocament innovador: el preentrenament basat en predicció de futurs punts LiDAR a partir d'imatges multicàmera i escombrats de radar. Durant aquesta fase, el LiDAR actua com a supervisió privilegiada, però en el model desplegat només es requereixen càmera i radar.
CRISP aconsegueix una representació unificada en vista d'ocell (BEV) mitjançant components com un codificador de radar millorat, atenció temporal autoreforçada amb informació radar, i un renderitzat multimodal amb portes d'innovació de modalitat. Aquests elements permeten injectar indicis de rang i Doppler del radar en la propagació temporal del BEV, així com integrar de forma selectiva evidència de càmera i radar. Els resultats experimentals en el conjunt de dades nuScenes demostren millores significatives en la predicció de núvols de punts a llarg termini i una transferència efectiva a tasques com detecció 3D, seguiment, mapatge en línia, predicció de moviment i planificació. Això suggereix que el preentrenament predictiu amb càmera-radar és una via prometedora per a representacions escalables en conducció autònoma sota configuracions de sensors pràctiques.
Aquest enfocament d'aprenentatge representacional no només és rellevant per a l'automoció, sinó que també inspira solucions en altres sectors on la fusió de dades heterogènies i el preentrenament eficient són clau. A Q2BSTUDIO, una empresa especialitzada en desenvolupament de programari a mida i aplicacions a mida, entenem la importància d'integrar tecnologies avançades com la intel·ligència artificial, els serveis cloud AWS i Azure, i la ciberseguretat per construir sistemes robustos i escalables. Els nostres serveis d'intel·ligència artificial per a empreses abasten des de la implementació d'agents IA fins a l'anàlisi predictiva amb Power BI, tot això recolzat per una infraestructura cloud segura.
La capacitat de CRISP per predir futurs escenaris a partir de dades de sensors té paral·lelismes directes amb les solucions d'intel·ligència de negoci que oferim: processar dades històriques per anticipar tendències i optimitzar decisions. Així com el model aprèn representacions reutilitzables per a múltiples tasques de conducció, les nostres plataformes permeten a les empreses extreure valor de les seves dades mitjançant ia per a empreses i eines de visualització com Power BI. A més, la seguretat de les dades és primordial; per això, integrem ciberseguretat a cada capa de les nostres solucions.
En definitiva, CRISP representa un avenç significatiu en la fusió càmera-radar per a conducció autònoma, demostrant que el preentrenament basat en forecasting pot generar representacions versàtils i transferibles. En el món empresarial, principis similars guien el desenvolupament de sistemes que uneixen serveis cloud AWS i Azure amb intel·ligència artificial avançada, permetent a les organitzacions innovar amb agilitat i seguretat. La col·laboració entre recerca puntera i aplicacions pràctiques és el que impulsa tant la conducció autònoma com la transformació digital de les empreses.

.jpg)

