Vývojári vytvorili efektívnejší AI algoritmus, ktorý prekoná GPT-3 a využíva o 99,9 % menej parametrov

Výskumníci z Univerzity Ludwiga Maximiliána (ULM) v Mníchove vyvinuli textový generátor, ktorý dokáže prekonať najmodernejšie GPT-3 od OpenAI s využitím iba malého zlomku jeho parametrov. GPT-3 je systém umelej inteligencie, ktorý je schopný reagovať na takmer všetky zadania pomocou jedinečných, originálnych odpovedí, ktoré sú často prekvapivo presvedčivé. Je príkladom toho, čo môžu robiť vývojári so špičkovými algoritmami a softvérom, keď dostanú neobmedzený prístup k superpočítaču. Nový systém vyvinutý výskumníkmi ULM Timom Schickom a Hinrichom Schutzem je však oveľa efektívnejší. Podľa dokumentu uverejneného na predtlačovom serveri arXiv systém tejto dvojice prekonáva GPT-3 v teste SuperGLUE s iba 223 miliónmi parametrov, čo je rádovo menej. Parametre sú premenné používané na vyladenie modelov AI. V podstate platí, že na čím viac parametroch je model AI vycvičený, tým robustnejší by mal byť. {{BANNER|SIMPLE_BANNER_HOMEPAGE_2}} Keď je systém využívajúci o 99,9 % menej parametrov s ...