Ask HN：循环 Transformer 如何处理上下文窗口？

有用户在 Ask HN 提问，循环 Transformer 是否也会像推理 token 那样污染上下文、导致压缩机制快速触发。该用户称 GPT Astra 使用循环而非推理 token，并追问 Astra 这类循环 Transformer 是否存在同样问题。该帖暂无评论。