Карточка Junior Дообучение и LoRA спрашивают часто обновлено
Что пробовать сначала
Вопрос
В каком порядке пробуют промпт, RAG и дообучение?
Попробуйте сами
Ответьте про себя или вслух, потом откройте ответ и сверьтесь.
Показать ответ и разбор
Коротко
Сначала промпт и few-shot (дёшево и обратимо). Если не хватает знаний, RAG.
Ответ
Сначала промпт и few-shot (дёшево и обратимо). Если не хватает знаний, RAG. Если нужно изменить поведение (формат, стиль, узкий навык) или удешевить, дообучение. Знания через RAG, навыки через дообучение.
Разбор
Сначала промпт и few-shot (дёшево и обратимо). Если не хватает знаний, RAG. Если нужно изменить поведение (формат, стиль, узкий навык) или удешевить, дообучение. Знания через RAG, навыки через дообучение.
Ответьте сами, а не прочитайте
В тренажёре вопрос попадёт в повторения и вернётся, когда начнёт забываться. Плюс билеты с зачётом: 20 вопросов, не больше 2 ошибок.