RLHF中的PPO算法——TRL库的PPOTrainer源码分析 - Longlong's Blog