Jak nejlépe otestujete AI agenty – softwarové systémy, v nichž „myslí“ generativní inteligence, co se teď objevují jako houby po dešti – že mohou po dlouhou dobu nezávisle fungovat? Naučíte je hrát Dračí doupě, přesněji řečeno legendární Dungeons & Dragons, stěžejní fantasy hru na hrdiny a pramáti všech RPG her, které je Dračí doupě se svými následovníky povedeným a důstojným českým protějškem.
Je to vlastně jasné. Dračí doupě má složitá pravidla, dlouhé příběhy a zahrnuje komplikovanou týmovou spolupráci. Podle výzkumného týmu University of California San Diego to je ideální prostředí pro testování AI agentů poháněných velkými jazykovými modely (LLM), včetně interakcí mezi AI agenty a lidskými hráči.
Prithviraj Ammanabrolu a jeho spolupracovníci testovali hraní Dračího doupěte se třemi pokročilými LLM. V průběhu experimentu inteligence hrály „Pána jeskyně,“ také hráče a rovněž monstra. Vědci testovali hlavně, jak sami poeticky říkají, takticky bohaté souboje. Inteligence hrály proti sobě, a také s více než 2 tisíci zkušenými hráči, které vědci pro tento projekt získali.
Dračí doupě s inteligencemi se odehrávalo ve 27 scénářích, odvozených ze slavných bitevních scén Dungeons & Dragons: Goblin Ambush, Kennel in Cragmaw Hideout a Klarg’s Cave. Ukázalo se, že nejlépe hraje Claude 3.5 Haiku, těsně následovaný inteligencí GPT-4. Vzadu za nimi zůstal čínský DeepSeek-V3.
Nejzajímavější ale bylo, že se inteligence časem začaly samy od sebe chovat zvláštně. Skřeti si uprostřed boje vytvářeli osobnost a provokovali protivníky barvitými hláškami, jako například: „Heh – shiny man’s gonna bleed!“ Paladinové začali pronášet hrdinské projevy, když se dostali do palby nebo čelili protiútoku. Černokněžníci (warlock) se chovali obzvláště dramaticky, i když o nic zrovna nešlo.
##seznam_reklama##
Jako by inteligence vypadly z oka lidským hráčům, kteří si to doopravdy užívají. Ammanabrolu a spol. si nejsou jistí, proč to inteligence dělají. Berou to ale každopádně tak, že inteligence snažily vdechnout hře osobitost. V budoucnu hodlají hrát Dračí doupě i s dalšími inteligencemi a budou to celé příběhy, nikoliv jen souboje. Třeba si i vy brzo zahrajete svižné doupě s umělou inteligencí.
Video: Interactive and Situated Conversational AI in LIGHT
Video: Bringing Stories Alive: Generating Interactive Fiction Worlds
Video: How to Avoid Being Eaten by a Grue: Structured Exploration Strategies for Textual Worlds
Literatura