Pits and Orbs是一個用Python實作的開源強化學習環境，提供回合制多代理格子世界，在其中代理追求目標並面臨環境危險。每個代理必須在可調整的格子上導航，避免隨機放置的陷阱（會懲罰或終止回合），並收集寶珠來獲得正向獎勵。該環境支援競爭和合作模式，讓研究者探索多樣學習場景。簡單的API可無縫整合如Stable Baselines或RLlib等流行RL框架。目前主要特色包括可調格子尺寸、動態陷阱與寶珠分佈、可配置的獎勵結構，以及選擇性註解訓練數據追踪。

PyGame Learning Environment（PLE）是一個開源的 Python 框架，旨在簡化在自訂遊戲場景中開發、測試和基準強化學習代理的流程。它提供一套輕量級的基於 Pygame 的遊戲，內建支持代理觀察、離散與連續動作空間、獎勵塑形和環境渲染。PLE 擁有一個易於使用的 API，與 OpenAI Gym 包裝器相容，可與 popular RL 函式庫（如 Stable Baselines 和 TensorForce）無縫整合。研究人員與開發者能夠客製化遊戲參數、實現新遊戲，並運用向量化環境以加快訓練速度。藉由活躍的社群貢獻與豐富的文件說明，PLE 成為一個多用途的平台，適用於學術研究、教育與現實應用原型設計。