Модели рассуждений и цепочка мыслей
Коротко: Модели рассуждений перед ответом пишут более длинную цепочку мыслей, проходя промежуточные шаги. Это заметно улучшает результаты в математике, коде и логике, но тратит больше токенов и времени.
Подробнее: Ещё в 2022 году «цепочка мыслей» показала, что пошаговое мышление повышает точность. Сегодня это обучают обучением с подкреплением: модель получает задачи с проверяемым результатом…
Подробности
- Почему это помогает: каждый сгенерированный токен…
См. также: обучение с подкреплением, законы масштабирования