simple_rl é uma biblioteca minimalista em Python projetada para agilizar a pesquisa e educação em aprendizado por reforço. Ela fornece uma API consistente para definir ambientes e agentes, com suporte embutido para paradigmas comuns de RL, incluindo Q-learning, métodos de Monte Carlo e algoritmos de programação dinâmica como iteração de valores e de políticas. A estrutura inclui ambientes de exemplo como GridWorld, MountainCar e Multi-Armed Bandits, facilitando experimentação prática. Os usuários podem estender classes básicas para implementar ambientes ou agentes personalizados, enquanto funções utilitárias cuidam de registro, acompanhamento de desempenho e avaliação de políticas. A arquitetura leve de simple_rl e sua base de código clara a tornam ideal para prototipagem rápida, ensino dos fundamentos de RL e benchmarking de novos algoritmos em um ambiente reprodutível e de fácil compreensão.

CArtAgO (Infraestrutura Comum de Artefatos para Ambientes Abertos de Agentes) é uma estrutura leve e extensível para implementar infraestruturas de ambientes em sistemas multiagentes. Ela introduz o conceito de artefatos: entidades de primeira classe que representam recursos do ambiente com operações definidas, propriedades observáveis e interfaces de evento. Os desenvolvedores definem tipos de artefatos em Java, registram-nos em classes de ambiente e expõem operações e eventos para o consumo de agentes. Os agentes interagem com artefatos usando ações padrão (por exemplo, createArtifact, observe), recebem notificações assíncronas de mudanças de estado e se coordenam por meio de recursos compartilhados. O CArtAgO integra-se facilmente com plataformas de agentes como Jason, JaCaMo, JADE e Spring Agent, permitindo o desenvolvimento de sistemas híbridos. O framework fornece suporte embutido para documentação de artefatos, carregamento dinâmico e monitoramento em tempo de execução, facilitando prototipagem rápida de aplicações complexas baseadas em agentes.