Reinforcement Learning from AI Feedback. Variante de RLHF donde las preferencias las genera otro modelo en lugar de anotadores humanos, abaratando el alineamiento a costa de heredar los sesgos del modelo evaluador.
Términos cercanos
Para leer más: arxiv.org