OpenAI在6月27日推出CriticGPT，一款利用GPT-4检测自身错误的模型，旨在辅助人工智能训练师在强化学习中发现并纠正ChatGPT输出的细微问题。研究表明，使用CriticGPT后，训练师的表现提升60%，且能提供更全面的反馈。CriticGPT特别在评估复杂代码时有价值，尽管其建议并非总是完美，但明显优于无AI辅助。这一创新展示了OpenAI在RLHF领域的技术领导力。