V blogovom príspevku DeepMind, dcérska spoločnosť spoločnosti Google, hovorila o experimente s testovaním modelov umelej inteligencie na všeobecné a abstraktné myslenie. Odborníci vyvinuli generátor, ktorý kladie otázky na základe koncepcie progresie, farebných vlastností, tvarov alebo veľkostí a ich vzťahov. Podobné úlohy sa nachádzajú v IQ testoch na ľuďoch.
Presnosť testu IQ
Väčšina modelov odpovedala na otázky s presnosťou 75%. Pri tom výskumníci zistili silnú koreláciu medzi výkonom úlohy a schopnosťou identifikovať základné abstrakcie. Podarilo sa im zvýšiť efektivitu školiacimi algoritmami, aby vysvetlili svoje odpovede, ukázali, ktoré vzťahy a vlastnosti je potrebné v konkrétnej záležitosti zohľadniť.
Niektoré modely sú však zlé pri „prenose“študovaných vzťahov k novým vlastnostiam, napríklad ak sa vyškolila na identifikáciu logických sekvencií s ohľadom na farbu objektov av úlohe je potrebné vytvoriť vzťah podľa ich tvaru.
Tím zistil, že ak neurónová sieť správne extrapolovala svoje znalosti vzťahov na novú kombináciu hodnôt, potom sa presnosť úloh zvýšila na 87%. V prípade nesprávnej extrapolácie klesla na 32%.
Detailný vývoj výskumu a výsledky boli publikované vývojármi v článku.
Propagačné video:
Vo februári 2018 vývojári Facebook AI Research taktiež vyškolili umelú inteligenciu, aby vysvetlili jej činnosť. Táto technika vám vo všeobecnosti umožňuje sledovať logiku riešenia problému a identifikovať problémy, ktoré vám bránia vyrovnať sa s ním.