COVTrack++: Seguimiento Multiobjeto de Vocabulario Abierto en Videos Continuos

El seguimiento de múltiples objetos en vídeo ha sido durante años una disciplina limitada a categorías predefinidas, como personas, vehículos o animales domésticos. Este enfoque cerrado choca frontalmente con las necesidades del mundo real, donde los sistemas de visión artificial deben identificar y rastrear objetos arbitrarios, muchos de ellos nunca vistos durante el entrenamiento. La visión de vocabulario abierto rompe esa barrera al permitir que un modelo reconozca y siga cualquier entidad descrita en lenguaje natural, desde un extintor hasta una pieza de maquinaria industrial. Sin embargo, el camino hacia esta flexibilidad presenta dos grandes obstáculos: la escasez de vídeos con anotaciones continuas y la falta de un marco unificado que integre de forma inteligente la detección y la asociación de trayectorias.

COVTrack++ surge como respuesta a ambos desafíos. Por un lado, se ha construido C-TAO, el primer conjunto de datos de entrenamiento etiquetado de forma continua para seguimiento de vocabulario abierto, multiplicando por veintiséis la densidad de anotaciones respecto a la base original TAO. Esto permite capturar movimientos suaves y estados intermedios de los objetos, esenciales para que un modelo aprenda dinámicas reales. Por otro lado, la arquitectura del sistema integra tres módulos innovadores: Fusión Adaptativa Multiseñal (MCF) que combina pistas visuales, de movimiento y semánticas según el contexto; Agregación Jerárquica Multigranularidad (MGA) que aprovecha relaciones espaciales entre partes y objetos completos para mejorar la asociación cuando hay oclusiones; y Propagación Temporal de Confianza (TCP) que estabiliza las trayectorias recuperando detecciones parpadeantes mediante el refuerzo de candidatos de baja confianza desde objetos ya seguidos con alta certeza. El resultado es un salto cualitativo en métricas como TETA, AssocA y LocA, con una capacidad de generalización zero-shot validada en conjuntos como BDD100K.

Detrás de este avance se dibuja una oportunidad directa para el ecosistema empresarial. Las compañías que buscan ia para empresas necesitan soluciones que vayan más allá de los catálogos fijos: sistemas de videovigilancia que identifiquen cualquier objeto sospechoso, plataformas de logística que rastreen piezas no etiquetadas, o herramientas de control de calidad que detecten defectos nunca antes definidos. Aquí es donde Q2BSTUDIO aporta su experiencia en aplicaciones a medida, integrando técnicas de inteligencia artificial como las que propone COVTrack++ dentro de flujos de trabajo personalizados. Ya sea mediante la automatización de procesos con agentes de visión, la consultoría en servicios cloud aws y azure para escalar inferencias masivas, o la implantación de cuadros de mando con power bi que visualicen trayectorias anómalas, el objetivo es transformar la investigación en valor tangible.

La tendencia hacia modelos de vocabulario abierto exige además un acompañamiento en ciberseguridad, dado que los datos de vídeo y las decisiones automatizadas deben protegerse. Desde Q2BSTUDIO ofrecemos ciberseguridad para garantizar que los entornos donde operan estos sistemas sean robustos frente a ataques. Y para quienes deseen extraer inteligencia de sus datos de seguimiento, los servicios inteligencia de negocio permiten cruzar métricas de rendimiento con indicadores operativos, cerrando el círculo entre la visión artificial y la toma de decisiones estratégicas. COVTrack++ no es solo un hito académico: representa el tipo de innovación que, bien canalizada mediante software a medida, puede redefinir sectores enteros.