WebSocket

OpenEnv 集成：连接外部环境到 RL 训练

Twinkle 的 envs 模块在异步外部环境（代码沙箱、浏览器、游戏引擎）和同步 RL 训练循环之间架起桥梁。本文介绍 Env 抽象、EnvTool 适配器以及 OpenEnv WebSocket 客户端的设计。