L'avanç de la intel·ligència artificial a la vora computacional està redefinint com els robots interactuen amb el món real. NVIDIA ha presentat Cosmos 3 Edge, un model obert de 4 mil milions de paràmetres dissenyat específicament per executar-se en dispositius amb recursos limitats. Aquest model no només comprèn l'entorn, sinó que raona en temps real i genera accions robòtiques localment, eliminant la dependència de connexions al núvol. A Q2BSTUDIO, com a empresa de desenvolupament de programari i tecnologia, entenem l'impacte d'aquestes eines en la creació d'aplicacions a mida que integren intel·ligència artificial d'avantguarda.
Cosmos 3 Edge forma part de la família Cosmos 3, que inclou versions més grans com Nano (16B) i Super (64B). No obstant, Edge destaca per la seva eficiència: amb només una setzena part de la mida de Super, ofereix un rendiment comparable al d'un centre de dades en sistemes amb memòria restringida. Això és crucial per a entorns com fàbriques, magatzems i hospitals, on les màquines han d'operar sense latència ni connexió permanent. El model empra una arquitectura Mixture-of-Transformers amb dues torres: una autorregressiva per a raonament i comprensió, i una de difusió per a predicció i generació. Ambdues comparteixen capes d'atenció multimodal, alineant informació de llenguatge, vídeo, àudio i accions.
El nucli de Cosmos 3 Edge és la seva capacitat d'actuar com un model del món. Aprèn com canvia l'entorn al llarg del temps, representant objectes, moviments, relacions espacials i els efectes de les accions. Per exemple, un braç robòtic que ha d'agafar un objecte no només necessita reconèixer-lo, sinó també calcular la seva trajectòria, predir el contacte i ajustar la força. Aquest model integra tot en una representació compartida que permet entendre l'estat actual, simular futurs possibles i connectar aquests futurs amb accions concretes. La representació d'accions és comuna entre diferents tipus de robots: vehicles autònoms, càmeres, braços simples o duals, i fins i tot humanoides. Això facilita la transferència de polítiques entre plataformes.
En mode política, Cosmos 3 Edge prediu una acció juntament amb la seva conseqüència visual esperada. Funciona en ambdues direccions: pot anticipar l'efecte d'una acció o inferir l'acció a partir d'un canvi observat. Això el converteix en una eina poderosa per a l'entrenament i avaluació de robots, sense necessitat de simulacions complexes. A més, NVIDIA ha llançat versions post-entrenades per a tasques específiques, com Cosmos 3 Edge Policy (DROID) per a pick-and-place, que pot ajustar-se en clústers petits o en una NVIDIA DGX Station abans del desplegament.
El model està optimitzat per executar-se en hardware NVIDIA de vora, com les GPUs RTX PRO, GeForce RTX, i els mòduls Jetson T2000 i T3000. Suporta resolucions de control de 640×360 píxels i genera 32 accions per inferència a 15 Hz en temps real. Per a generació de vídeo, ofereix resolucions de 256p i 480p a 12-30 fps. Els desenvolupadors poden post-entrenar el model per a un sensor i un embotament específics en aproximadament un dia, utilitzant el kit d'eines Cosmos Framework.
A Q2BSTUDIO, veiem aquests avenços com una oportunitat per integrar intel·ligència artificial en projectes empresarials. La nostra experiència en sistemes d'IA ens permet ajudar empreses a adoptar models com Cosmos 3 Edge, combinant-los amb solucions al núvol AWS/Azure, ciberseguretat avançada i anàlisi de dades amb BI/Power BI. Per exemple, un robot en una fàbrica pot processar imatges localment i enviar alertes a un tauler a Azure, mentre que les dades s'analitzen amb Power BI per optimitzar la producció. Els agents d'IA autònoms també es beneficien d'aquesta capacitat de raonament al dispositiu, reduint latències i millorant la privacitat de les dades.
L'arribada de Cosmos 3 Edge marca una fita en la robòtica a la vora. La seva mida compacta, la seva arquitectura eficient i la seva capacitat de raonament multimodal el converteixen en una opció ideal per a aplicacions industrials, logístiques i de salut. Les empreses que busquen automatitzar processos poden aprofitar aquest model per crear sistemes més intel·ligents, segurs i ràpids. A Q2BSTUDIO, oferim serveis de desenvolupament de programari a mida, integració d'IA, migració al núvol, ciberseguretat i Business Intelligence perquè els nostres clients treguin el màxim profit d'aquestes tecnologies. Si la teva empresa necessita implementar solucions de robòtica intel·ligent amb Cosmos 3 Edge o qualsevol altra plataforma, contacta'ns per desenvolupar junts el futur de l'automatització.
