O que caracteriza o sobreajuste (overfitting) em aprendizado de máquina?

O sobreajuste ocorre quando um modelo se ajusta excessivamente aos dados de treinamento, capturando ruídos e peculiaridades, resultando em baixa taxa de erro no treinamento e alta taxa de erro em dados não vistos.