O Text-to-Reward fornece um pipeline para treinar modelos de recompensa que mapeiam descrições de tarefas ou feedback baseado em texto em valores de recompensa escalar para agentes de RL. Aproveitando arquiteturas baseadas em transformadores e ajustando finamente com dados de preferência humana coletados, o framework aprende automaticamente a interpretar instruções em linguagem natural como sinais de recompensa. Os usuários podem definir tarefas arbitrárias por meio de prompts de texto, treinar o modelo e, posteriormente, incorporar a função de recompensa aprendida em qualquer algoritmo de RL. Essa abordagem elimina a necessidade de moldar manualmente recompensas, aumenta a eficiência de amostragem e permite que agentes sigam instruções complexas de múltiplas etapas em ambientes simulados ou do mundo real.

Selective Reincarnation introduz um mecanismo de treinamento dinâmico baseado em população, adaptado ao MARL. O desempenho de cada agente é avaliado regularmente em relação a limites predefinidos. Quando o desempenho de um agente cai abaixo de seus pares, seus pesos são redefinidos para os do agente com melhor desempenho atual, reencarnando-o com comportamentos comprovados. Essa abordagem mantém a diversidade ao redefinir apenas os menos eficazes, minimizando redefinições destrutivas enquanto direciona a exploração para políticas de alta recompensa. Permitindo herança direcionada de parâmetros de redes neurais, a plataforma reduz a variância e acelera a convergência em ambientes cooperativos ou competitivos. Compatível com qualquer algoritmo MARL baseado em gradiente de política, a implementação se integra facilmente aos fluxos de trabalho baseados em PyTorch e inclui hiperparâmetros configuráveis para frequência de avaliação, critérios de seleção e ajuste de estratégias de redefinição.