ABEJA Tech Blog

中の人の興味のある情報を発信していきます

2026-06-08から1日間の記事一覧

On-policy のはずが Off-policy になる:LLM 強化学習 の rollout mismatchと対策(rollout correction)

LLM

ABEJAでデータサイエンティストをしている服部です。 今回はGRPOなどのLLMの強化学習の中で実際に起こりうる少しマイナーだけど重要かもしれない強化学習のRollout時に発生するトピックについての記事です。 過去にもAgenticRLに関しての記事も書いてますの…