Оценка на отложенном наборе — проверка готовой модели на примерах, которые отделили до обучения и в нём не использовали. Ответы на них показывают, перенеслось ли найденное соотношение за пределы обучающего набора. Набор расходуется по мере использования: чем чаще по его итогам правят модель, тем меньше он измеряет, потому что правки подгоняют её под сами задания.
92 карточки об устройстве искусственного интеллекта: на каких данных учат модели, из чего собрана сеть, как идёт обучение и почему работа языковой модели сведена к предсказанию следующего куска текста. Два раздела отвечают, отчего модель уверенно сообщает несуществующее и что с этим делают. Последний — чего у модели нет в принципе.