使用ORPO微调Llama 3在几次实验之后,我编写了一个快速指南,介绍如何使用ORPO微调新的Llama 3 8B模型。希望你们会喜欢!🤗 模型:https://huggingface.co/mlabonne/OrpoLlama-3-8B💻 Colab:https://colab.research.google.com/drive/1eHNWg9gnaXErdAa8_mcvjMupbSS6rDvi?usp=sharing📝 文章:https://huggingface.co/blog/mlabonne/orpo-llama-3