The AI Scientist

The AI Scientist to autonomiczny agent badawczy stworzony przez Sakana AI we współpracy z FLAIR (University of Oxford) i University of British Columbia, opublikowany w sierpniu 2024. System jako pierwszy realizuje pełny cykl badań naukowych w obszarze uczenia maszynowego całkowicie bez udziału człowieka — generuje nowe pomysły badawcze, projektuje i uruchamia eksperymenty w kodzie, analizuje wyniki, tworzy wizualizacje, pisze pełnoprawne artykuły naukowe w formacie LaTeX oraz przeprowadza zautomatyzowaną recenzję na wzór konferencji NeurIPS.

System wykorzystuje frontierowe modele językowe (Claude 3.5 Sonnet, GPT-4o, DeepSeek, o1) jako silnik rozumowania oraz integruje się z agentem programistycznym Aider do iteracyjnej modyfikacji kodu eksperymentów. Każdy artykuł wygenerowany w pełni autonomicznie kosztuje około 15 USD. W styczniu 2025 ukazała się wersja v2, w której artykuł napisany przez The AI Scientist-v2 został przyjęty na warsztat ICLR 2025 — był to pierwszy w historii recenzowany artykuł w pełni napisany przez AI.

Jak działa

• Ideation: LLM generuje listę pomysłów badawczych na podstawie zalążka tematycznego (template) i przeszukuje Semantic Scholar, by odrzucić niepotrzebne duplikaty.
• Eksperymenty: agent kodujący Aider modyfikuje kod, uruchamia trening / ewaluację, zbiera wyniki i iteruje hipotezy.
• Pisanie: system generuje wykresy w matplotlib, opisuje wyniki i kompiluje kompletny artykuł w LaTeX wraz z bibliografią.
• Automated Reviewer: druga instancja LLM ocenia artykuł zgodnie z formularzem recenzenta NeurIPS, osiągając zgodność z ludzkimi recenzentami zbliżoną do ludzkiego baseline.