即将离开知乎

您即将离开知乎，请注意您的账号和财产安全。

https://huggingface.co/blog/the_n_implementation_details_of_rlhf_with_ppo