simple_rl ist eine minimalistische Python-Bibliothek, die darauf ausgelegt ist, die Forschung und Bildung im Bereich des Verstärkungslernens zu vereinfachen. Es bietet eine konsistente API zur Definition von Umgebungen und Agents, mit integrierter Unterstützung für gängige RL-Paradigmen wie Q-Learning, Monte Carlo-Methoden und dynamische Programmieralgorithmen wie Wert- und Politik-Iteration. Das Framework umfasst Beispielumgebungen wie GridWorld, MountainCar und Multi-Armed Bandits, die praktische Experimente ermöglichen. Benutzer können Basisklassen erweitern, um eigene Umgebungen oder Agents zu implementieren, während Hilfsfunktionen das Logging, die Leistungsüberwachung und die Policy-Bewertung übernehmen. Die leichte Architektur und klare Codebasis von simple_rl machen es ideal für schnelles Prototyping, das Lehren von RL-Grundlagen und Benchmarking neuer Algorithmen in einer reproduzierbaren, leicht verständlichen Umgebung.

CArtAgO (Common ARTifact Infrastructure for AGents Open environments) ist ein leichtgewichtiges, erweiterbares Framework zur Implementierung von Umgebungsinfrastrukturen in Multi-Agenten-Systemen. Es führt das Konzept der Artefakte ein: erstklassige Entitäten, die Umweltressourcen mit definierten Operationen, beobachtbaren Eigenschaften und Event-Schnittstellen repräsentieren. Entwickler definieren Artifact-Typen in Java, registrieren sie in Umgebungsklassen und stellen Operationen sowie Events für die Nutzung durch Agenten bereit. Agenten interagieren mit Artefakten durch Standardaktionen (z.B. createArtifact, observe), erhalten asynchrone Benachrichtigungen über Zustandsänderungen und koordinieren sich über gemeinsame Ressourcen. CArtAgO integriert sich leicht mit Agentenplattformen wie Jason, JaCaMo, JADE und Spring Agent, um Hybridsysteme zu entwickeln. Das Framework bietet integrierte Unterstützung für Artefakt-Dokumentation, dynamisches Laden und Laufzeitüberwachung, was die schnelle Prototypentwicklung komplexer agentenbasierter Anwendungen erleichtert.