DISCOVERYWORLD

Automatisierte wissenschaftliche Entdeckung verspricht, den Fortschritt in verschiedenen wissenschaftlichen Bereichen zu beschleunigen. Die Entwicklung und Bewertung der Fähigkeit eines KI-Agenten für umfassendes wissenschaftliches Denken ist jedoch herausfordernd, da die Durchführung von Experimenten in der realen Welt oft prohibitively teuer oder unpraktisch ist. In dieser Arbeit stellen wir DISCOVERYWORLD vor, die erste virtuelle Umgebung zur Entwicklung und Benchmarking der Fähigkeit eines Agenten, vollständige Zyklen neuartiger wissenschaftlicher Entdeckung durchzuführen. DISCOVERYWORLD enthält eine Vielzahl unterschiedlicher Herausforderungen, die Themen wie Radiokohlenstoffdatierung, Raketentechnik und Proteomik abdecken, um die Entwicklung allgemeiner Entdeckungsfähigkeiten anstelle von aufgabenbezogenen Lösungen zu fördern. DISCOVERYWORLD selbst ist eine kostengünstige, simulierte, textbasierte Umgebung (mit optionaler 2D-Visualisierung). Sie umfasst 120 verschiedene Herausforderungsaufgaben, die sich über acht Themen erstrecken, wobei jedes Thema drei Schwierigkeitsgrade und mehrere parametrische Variationen aufweist. Jede Aufgabe erfordert von einem Agenten, Hypothesen zu bilden, Experimente zu entwerfen und durchzuführen, Ergebnisse zu analysieren und auf Schlussfolgerungen zu reagieren.