OpenAI 即将发布的 Astra 模型使用了一种名为 recurrent depth 的循环推理架构，即 looped transformer，允许同一信息反复经过同一组层。字节跳动与 Seed 团队此前已发布类似研究。该架构让小模型逼近大模型效果，但带来了安全隐忧：部分推理在隐藏状态进行，难以监控违规行为。OpenAI 已限制其使用程度，并保留可读思维链。