[Ayla Mustafa]

Modelom AI świetnie idzie matematyka i programowanie

Chodzi Ci o modele LLM? Przecież one nawet nie potrafią osiągnąć poziomu kieszonkowego kalkulatora. Zadałeś kiedyś matematyczne pytanie LLM-owi?

Po wielokroć. Ale te modele nie są kalkulatorami. W pamięci ciężko im coś liczyć, jeśli nie użyją narzędzia programistycznego do obliczeń (a to potrafią już robić).
A co do do matmy ogółem. To jest znamienne: https://x.com/SebastienBubeck/status/195...62?lang=en

@Szachy
Ale te modele nie są wyspecjalizowane do gry w szachy. W dodatku ciężko im ogarniać całą planszę, skoro głównie operują na tekście, a nie w przestrzeni. ARC-AGI od Cholleta modele też nie umieją za dobrze robić, bo ARC-AGI to łamigłówki wizualne.
Ktoś, kto ledwo widzi, też miałby problem z szachami albo z ARC-AGI, ale nie odmawiamy niewidomym lub ledwo widzącym ludziom inteligencji.

Swoją drogą, pamiętam takie badanie, wedle którego modele AI tworzą wewnętrzne (geometryczne) reprezentacje planszy do gier, którą to planszę poznają tekstowo. Tylko muszę znaleźć nazwę badania i link do niego...

---

Mam.
Chodzi o pracę znaną jako „Emergent World Representations: Exploring a Sequence Model Trained on a Synthetic Task” („Othello-GPT”) autorstwa Kennetha Li i in..
Link: https://arxiv.org/pdf/2210.13382

---

Podsumowanie video dla powyższego artykułu. Polecam:
https://notebooklm.google.com/notebook/9...2081e9da01

---

Czyli modele tworzą wewnętrzne modele poznawanego świata.