Крос-валідація та поділ даних: чесне тестування моделей

Коротко: Навчальні, валідаційні й тестові дані мають залишатися окремими; крос-валідація використовує дані кілька разів у змінних ролях, щоб надійніше оцінити якість.

Докладніше: Модель, виміряна на навчальних даних, — шахрай: вона бачила відповіді. Справжню якість (узагальнення) показують лише незнайомі дані.