Pravidelne testujem nove modely LLM-iek na dvoch hernych benchmarkoch. Prave vysli 2 nove frontier modely, jeden od Anthropicu Fable 5.1 ktory je pokracovanim Fable 5 modelu ktory zanechal velky dojem, bol to prvy model ktory dokazal na par promptov urobit hratelne jednoduche 3D hry co bolo dovtedy nieco nepredstavitelne. Druhy model bol netrpezlivo ocakavany GPT 6 Astra, o ktorom sa uz co to popisalo o tom ako dokazal hacknut Huggingface. Tak som tieto 2 modely vzal a porovnal na 2 hrach ktorych vysledky si mozte pozret na dostupnych benchmarkoch. Trocha som dufal ze GPT 6 Astra sa vyrovna Fable 5.1 ale zial nedokazal v tejto discipline prekonat ani Fable 5. Ale aby som na Astru len nepisal v zlom, podla vsetkeho je vynikajuca v 3D modelovani a podla benchmarkov v tejto discipline lepsia nez samotny Fable 5.1. Vsak vysledok si mozte pozret na tomto priklade https://dubovskylabs.com/benchmarks/blender-viewer/index.html?model=bungalow/gpt-6-astra&lang=sk . Ale vratme sa k benchmarkom heir ktorymi testujem modely, ked som skusil Fable 5.1 na prvej jednoduchej hre s kde hram za psa zahanujceho stado oviec este nebola jeho sila taka vyrazna, zaradil som ho za Opus 5 ktory vytvoril mimoriadne peknu verziu tejto hry, avsak ked prisiel na rad GTA benchmark, tak mi doslova odpalilo dekel. To co vytvoril je proste genialne. Obrovske zive mesto s velkym poctom detailov, mesto s characterom s detailami ako jazda na bicykli, motorke, 2 dialnice sa krizujuce, bar s hrajucou hudbou a tancujucimi ludmi, typka co za peniaze tancuje na ulici, trhy, policajne zatarasy, ludia ktory ked sa zacnem bit nahodneho cloveka tak sa pustia ho branit, nahodne bitky pred barom, opity ludia pri baroch no proste nemam slov. Samozrejme to nebolo bez chyb, auta boli rozbite, mali graficke artefakty, na cestach vacsinou chybal asfalt, auta v noci nesvietili a mnozstvo dalsich chyb, ktore som sa rozhodol postupne poopravovat az som skoncil na 52 promptoch napisanych pocas jedneho vykendu. Vysledkom je velmi zabavna hratelna openworld hra na styl GTA, ktora obsahuje velke zijuce mesto ktore pripomina prve 3D hry GTA, nieco ako Vice city a GTA 3, samozrejme s prizmurenymi ocami nad zjednodusenymi modelmi postav a budov. Generovanie hry trvalo pri prvom prompte 1h 50minut a stalo to bez dane cca 50 eur. Pre zrovnanie GPT 6 astra svoju robotu robila 35 minut, cenu nepoznam robil to v ramci subscription, a spravila postatne jednoduchsiu hru s mensou mapou, a taky cinsky model KIMI K3 robil zadanie 4h a odhlahcil mi penazenku o 89 eur a vysledok nedosiahol ani GPT 6 Astra, prekonal ho aj GLM 5.3 flash ktory sa da rozbehnut lokalne na pocitacoch s 256GB RAM (napr. Macstudio). Fable 5.1 je proste genialny, ale zalezi ake zadanie mu date, co som si vsimol aj na inych ludoch co ho skusali, tak si dava viac zalezat na testovani, a robi zadania rozsiahlejsie. Pripomina mi to takovy genialny Opus 5, ktory ked vysiel tak bol najlepsim modelom na tvorbu hier, pretoze dokazal robit rozsiahle svety s velmi detailnymi modelmi, spominana hra so psom a oveckami je toho ukazkovym prikladom, velke prepradcovane mapy v 12 leveloch, napadite interagujuce postavy, hudba, a krasna grafika, vid https://dubovskylabs.com/projects/baa/claude-opus-5/index.html . Takovy Fable 5 nedokazal spravit tak rozsiahli prepracovany svet ako Opus 5, aj ked bol chytrejsi, ziaden model nedokazal spravit tak prepracovany svet ako opus 5, az doteraz. Opus 5 vsak bol takovy pracant, ale ked mal tazke zadanie napr. GTA prompt, tak sa sice snazil a skusal robit velmi posobivy svet ale nezvladol ho poskladat, budovy sa prekryvali, cesty nemali mosty cez rieku, postava bola rozbita, proste nebol tak genialny ako Fable 5. Preto Fable 5.1 vypada akoby si zobral prave tuto pracovitost Opusu 5 a spojil ho so svojou genialitou. Vsetky benchmarky a porovnania GTA mozete videt na strankach https://dubovskylabs.com/baa-benchmark/index.html a https://dubovskylabs.com/gta-benchmark/index.html . Samotna hra "GTA" ktoru vytvoril Fable 5.1 si rovno zahrate tu https://dubovskylabs.com/benchmarks/gta/apps/claude-fable-5-1/index.html .