Questão nº 80
Questão de Engenharia Elétrica/Eletrônica · CEBRASPE PF 2025 (nº 80)
Julgue os seguintes itens, a respeito de validação e avaliação de modelos de aprendizagem.
Quanto mais a área sob a curva denominada ROC (receiver operating characteristic) se aproxima de 1, melhor é o desempenho de um modelo de aprendizagem para classificação.
Resposta comentada
O AUC (Area Under the ROC Curve) mede a probabilidade de o modelo classificar um exemplo positivo aleatório acima de um negativo aleatório. Quanto mais perto de 1, mais o modelo separa as classes; quanto mais perto de 0,5, mais ele chuta no escuro.
- Correta: Certo. AUC próxima de 1 indica que o modelo tem alta capacidade de discriminação entre classes, ou seja, para qualquer limiar de decisão, ele raramente erra ao ordenar positivos e negativos.
Fica de olho: A banca pode trocar "se aproxima de 1" por "se aproxima de 0,5" (que é o desempenho aleatório) ou por "se aproxima de 0" (que seria um modelo perfeitamente invertido, mas ainda "aprendeu" algo — só que ao contrário). Também pode afirmar que AUC = 1 significa acurácia de 100% em qualquer base, o que é falso se houver sobreajuste ou classes desbalanceadas.
Fonte: CEBRASPE PF 2025 Perito Criminal Federal - Engenharia Elétrica/Eletrônica. Reproduzida para fins de estudo.