IKUN proiektua: Industria Adimenduna iraultzeko Eredu Multimodal Handiak

Eusko Jaurlaritzaren ELKARTEK programak finantzatutako IKUN proiektuak aurrerapen esanguratsuak lortu ditu anomalia-detektaketan, kalitatearen bermarako datu sintetikoen sorkuntzan eta lantegiko operarioentzako elkarrizketa-laguntzaileen garapenean.

Proiektuaren helburu nagusia izan da Eredu Multimodal Handiak (MLLM) ekoizpen-fabriken errealitate zorrotzera ikertzea eta egokitzea. Erronka nagusia izan da, besteak beste, etiketatutako datu-bolumen handien gabezia gainditzea, horrela kalitate-sistemak hobetzea eta langileei aginte-koadroak kontsultatzeko eta makinekin elkarreragiteko interfaze naturalagoak eskaintzea. Testuinguru honetan, Vicomtech-ek proiektuaren garapen globala gidatu du, ereduak benetako funtzionamendu-baldintzetan sendoak direla bermatuz.

Proiektuaren emaitza nabarmenen artean daude datu-base multimodal konplexuen sorrera. Esaterako, fundizio-prozesuetako galdaketa-zorrotzetan eta mekanizazio-zentroetan anomaliak detektatzeko sistemak garatu dira, non 1,5 milioi sentsore-datu baino gehiago (Edge ingurunean prozesatuak) bereizmen handiko tresnen milaka irudirekin konbinatu diren.

Sentsore-datuen eta irudien konbinazioak industria-prozesuetan anomaliak detektatzeko gaitasuna hobetzen du.

Benetako akatsen adibide falta konpontzeko, taldeak difusio latenteko ereduak eta algoritmo sortzaileak erabili ditu akats bisualak modu sintetikoan sortzeko. Horrela, pintura-akatsen (krater edo laranja-azal efektuak), zirkuitu inprimatuetako (PCB) akatsen eta hondakin elektronikoen irudi hiperespektralen sorkuntza arrakastatsua lortu da.

Emaitzek erakusten dute datu sintetikoen sorkuntzak benetako akatsen eskasia dagoen eszenatokietan ereduak entrenatzea ahalbidetzen duela.

Aldi berean, IKUNek aurrerapen handia egin du operarioaren eta fabrikaren arteko elkarreraginean. Berreskuratze bidez indartutako sorkuntza-arkitekturatan (RAG) oinarritutako laguntzaile birtualak diseinatu dira, eskuliburu teknikoak integratzen dituztenak eta telemetria denbora errealean aztertzeko gai direnak. Sistema honek, besteak beste, eskaeraren arabera kodea sortu dezake OEE bezalako adierazleak kalkulatzeko eta makina-erremintaren hiztegi espezifikoa ulertzen du, ahots-ezagutzaren errore-tasa %33,33tik %9,56ra murriztuz industria-ingurune zaratatsuetan.

Lorpen horiek guztiak lau demostratzaileren bidez balioztatu dira: fundizioan eta mekanizazioan anomaliak detektatzea, eraikuntza-hondakinen sailkapena kamera hiperespektralekin, irudi sintetikoen sorkuntza eta elkarrizketa bidezko laguntza multimodala intzidentzia teknikoak ebazteko.

Vicomtech-ek gidatuta, IKUN proiektuko taldeak TECNALIA, IKERLAN, TEKNIKER eta AZTERLAN erakundeen ezagutza espezializatua izan du, baita Euskal Herriko Unibertsitatea (EHU), IKOR Technology Center I+G unitatea eta IMH Campus bitartekaritza-agentea ere. Ikerketa guztia ELKARTEK 2024 programak babestu eta finantzatu du, Eusko Jaurlaritzak bultzatuta.