50% off DataCamp Premium. 700+ courses, half price. Start learning today.
Cursusbeschrijving
Combineer de efficiëntie van Generatieve AI met de inzichten van menselijke expertise in deze cursus over Reinforcement Learning from Human Feedback. Je leert GenAI-modellen echt laten aansluiten bij menselijke waarden en voorkeuren, terwijl je praktisch aan de slag gaat met LLM’s. Ook navigeer je door de complexiteit van beloningsmodellen en leer je hoe je voortbouwt op LLM’s om AI te maken die niet alleen leert, maar zich ook aanpast aan situaties uit de echte wereld.
Vereisten
Lesprogramma
Cursusoverzicht
1
Fundamentele concepten
Dit hoofdstuk behandelt de basis van Reinforcement Learning with Human Feedback (RLHF), een techniek die menselijk input gebruikt om AI-modellen effectiever te laten leren. Begin met RLHF door te begrijpen hoe het verschilt van traditionele reinforcement learning en waarom menselijke feedback de prestaties van AI in uiteenlopende domeinen kan verbeteren.
- Introductie tot RLHF50 XP
- Tekstgeneratie met RLHF100 XP
- Gegenereerde tekst classificeren voor RLHF100 XP
- RL vs. RLHF50 XP
- Voorgetrainde LLM's verkennen50 XP
- Tokenizeer een tekstgegevensset100 XP
- Fine-tunen voor reviewclassificatie100 XP
- Data voorbereiden voor RLHF50 XP
- De voorkeursgegevensset voorbereiden100 XP
- Prompts extraheren50 XP
2
Menselijke feedback verzamelen
Ontdek in dit hoofdstuk hoe je systemen opzet om menselijke feedback te verzamelen. Leer best practices voor het verzamelen van hoogwaardige data, van paargewijze vergelijkingen tot uncertainty sampling, en verken strategieën om je dataverzameling te versterken.
3
Modellen afstemmen met menselijke feedback
In dit hoofdstuk duik je in de kern van trainen met Reinforcement Learning from Human Feedback. Je verkent fine-tuning met PPO, technieken voor efficiënt trainen en hoe je mogelijke afwijkingen van de doelstellingen van je metriek aanpakt.
4
Modelbeoordeling
Verken in dit laatste hoofdstuk van Reinforcement Learning from Human Feedback (RLHF) belangrijke technieken om modelprestaties te beoordelen en te verbeteren: van het verfijnen van metriek tot het integreren van diverse feedbackbronnen. Je krijgt een complete gereedschapskist om je modellen effectief te finetunen.
Reinforcement Learning from Human Feedback (RLHF)
Cursus
voltooid
