Questão 36 — Aprendizado de Máquina — Avaliação de Modelos Preditivos (Inteligência Artificial) — Serviço de Seleção do Pessoal da Marinha (SSPM) · Marinha do Brasil 2023

Inteligência Artificial Aprendizado de Máquina — Avaliação de Modelos Preditivos

Serviço de Seleção do Pessoal da Marinha (SSPM) 2023

Marinha do Brasil · Quadro Técnico do Corpo Auxiliar da Marinha (CP-T) — Informática · Caderno Amarela

Gabarito disponível

Segundo Faceli (2021), assinale a opção INCORRETA referente à avaliação de modelos preditivos.

Selecione uma alternativa A) O uso das curvas de ROC são utilizados para avaliar classificadores em problemas não binários. B) Na Análise AUC (Area Under ROC Curve), ao se comparar dois algoritmos, aquele que possuir AUC mais próximo de 1 é considerado superior. C) Testes de hipóteses para comparação de desempenho são recomendados quando os desempenhos apresentados para outras métricas são equivalentes. D) Dentre os métodos de amostragem para obter estimativas de desempenho podem ser utilizados: validação cruzada, holdout e/ou bootstrap. E) As medidas de erro mais comumente utilizadas para problemas de regressão são o erro quadrático médio e a distância absoluta média.

Resolução comentada

A curva ROC é usada em problemas binários, e a afirmação A diz o contrário.

A afirmação de que curvas ROC avaliam classificadores em problemas 'não binários' é a incorreta, pois a ROC é definida de forma natural para problemas de duas classes.

Análise das alternativas

B) Correta: AUC mais próxima de 1 indica melhor desempenho. C) Correta segundo o gabarito. D) Correta: validação cruzada, holdout e bootstrap são métodos de amostragem. E) Correta: erro quadrático médio e distância absoluta média são medidas de regressão.

Referência: FACELI, K. et al. Inteligência Artificial: uma abordagem de aprendizado de máquina (2021).

Resolução comentada do VaiConcursos.