X-LogSMask: Expansió de Transformers per a Dades amb Estructura de Graf

ls Transformers han revolucionat el processament de dades seqüencials, però el seu mecanisme d'autoatenció completa no s'adapta bé a dades amb estructura de graf, on les interaccions són escasses i jeràrquiques. X-LogSMask proposa una màscara estructural logarítmica multicap que injecta la topologia del graf directament als logits d'atenció, permetent que cada cap tingui un radi estructural definit. Aquest enfocament, interpretable i simple, aconsegueix resultats d'avantguarda en múltiples benchmarks sense modificar l'arquitectura Transformer. A Q2BSTUDIO, desenvolupem solucions d'intel·ligència artificial per a empreses que integren tècniques avançades com aquesta, combinades amb aplicacions a mida i serveis cloud a AWS i Azure, per optimitzar l'anàlisi de dades complexes. A més, els nostres serveis d'intel·ligència de negoci amb Power BI i agents IA permeten extreure valor d'estructures relacionals de forma escalable. X-LogSMask demostra que màscares estructurals simples poden transformar l'autoatenció en un operador efectiu per a grafs, obrint noves possibilitats per a la ciberseguretat i l'automatització de processos.