Multi-Agents System from Scratch fournit un ensemble complet de modules Python pour construire, personnaliser et évaluer des environnements multi-agents depuis le début. Les utilisateurs peuvent définir des modèles du monde, créer des classes d'agents avec des sens uniques et des capacités d'action, ainsi que mettre en place des protocoles de communication flexibles pour la coopération ou la compétition. Le framework prend en charge l'attribution dynamique des tâches, les modules de planification stratégique et le suivi des performances en temps réel. Son architecture modulaire permet une intégration facile d'algorithmes personnalisés, de fonctions de récompense et de mécanismes d'apprentissage. Avec des outils de visualisation et des utilitaires de journalisation intégrés, les développeurs peuvent surveiller les interactions des agents et diagnostiquer les motifs de comportement. Conçu pour l'extensibilité et la clarté, le système s'adresse aussi bien aux chercheurs explorant l'IA distribuée qu'aux éducateurs enseignant la modélisation par agents.

Selective Reincarnation introduit un mécanisme d'entraînement basé sur une population dynamique, adapté au renforcement multi-agent. La performance de chaque agent est régulièrement évaluée par rapport à des seuils prédéfinis. Lorsqu'un agent tombe en dessous de la performance de ses pairs, ses poids sont réinitialisés à ceux de l'agent actuel le mieux performant, le réincarnant ainsi avec des comportements éprouvés. Cette approche maintient la diversité en ne réinitialisant que les agents sous-performants, minimisant ainsi les resets destructeurs tout en orientant l'exploration vers des politiques à haute récompense. En permettant une héritage ciblé des paramètres du réseau neuronal, la pipeline réduit la variance et accélère la convergence dans des environnements multi-agent coopératifs ou compétitifs. Compatible avec tout algorithme MARL basé sur la gradient de politique, l'implémentation s'intègre parfaitement dans les workflows basés sur PyTorch et inclut des hyperparamètres configurables pour la fréquence d'évaluation, les critères de sélection et le réglage de la stratégie de reset.