Labs Molt

Molt è prima agente e nativo di PyTorch. L'agente è il programma; il trainer è un singolo attore; la ricompensa è qualsiasi Python che scrivi all'interno di un Env o ChatAgent – valutatori, strumenti multi-turno, ambienti VLM, LLM-come-giudice. Tre componenti portano il resto – Ray per il posizionamento e le code asincrone, vLLM per il rollout, NVIDIA AutoModel + FSDP2 per l'addestramento in puro PyTorch. Questo è l'intero stack: ~9,2K righe di codice RL che scalano fino a una classe MoE da 1T su vLLM con TP / EP / CP – pensa a DeepSeek-V3 a --fsdp.ep_size 256, Adam CPU offload per i più grandi attori. Un'API per l'agente, un attore addestrabile, abbastanza chiaro da leggere dall'inizio alla fine.