Questão nº 14
Questão de Ciência de Dados · FGV CVM 2024 (nº 14)
Alexandre recebe a tarefa de treinar um sistema de detecção de fraudes no banco em que trabalha. Para isso, ele testa cinco modelos, M1, M2, M3, M4 e M5, que possuem, respectivamente, 2, 2, 2, 3 e 3 parâmetros. Alexandre realiza uma seleção bayesiana dos modelos, usando o critério de informação bayesiano.
Sabendo que o tamanho da amostra é 200 e que os valores maximizados das funções de verossimilhança dos modelos são 0,3; 0,4; 0,5; 0,3 e 0,5, respectivamente, Alexandre seleciona o modelo:
(se necessário, use ln(2) = 0,7; ln(3) = 1,1 e ln(5) = 1,6)
- AM1;
- BM2;
- CM3; (alternativa correta)
- DM4;
- EM5.
Resposta comentada
Gabarito Alternativa C
O Critério de Informação Bayesiano (BIC) é uma ferramenta para escolher o melhor modelo entre várias opções. Ele busca um equilíbrio entre o quão bem um modelo se ajusta aos dados (verossimilhança) e sua complexidade (número de parâmetros), penalizando modelos mais complexos. Um valor de BIC menor indica um modelo preferível.
A fórmula do BIC é:
Onde:
- é o valor maximizado da função de verossimilhança (quão bem o modelo explica os dados).
- é o número de parâmetros do modelo (sua complexidade).
- é o tamanho da amostra.
Primeiro, calculamos e os valores de usando as aproximações fornecidas:
Agora, calculamos o BIC para cada modelo:
-
M1: ,
-
M2: ,
-
M3: ,
-
M4: ,
-
M5: ,
Comparando os valores de BIC:
O menor valor de BIC é 12.0, que corresponde ao Modelo M3.
- (A) Incorreta: O BIC de M1 é 13.0, que é maior que o BIC de M3.
- (B) Incorreta: O BIC de M2 é 12.4, que é maior que o BIC de M3.
- (C) Correta: O modelo M3 apresenta o menor valor de BIC (12.0), indicando o melhor equilíbrio entre ajuste aos dados e complexidade, sendo, portanto, o modelo selecionado pelo critério.
- (D) Incorreta: O BIC de M4 é 18.3, que é o maior entre todos os modelos, indicando um modelo menos adequado.
- (E) Incorreta: O BIC de M5 é 17.3. Embora M5 tenha a mesma verossimilhança maximizada que M3 (0.5), ele possui mais parâmetros ( contra de M3), o que resulta em uma penalidade maior na fórmula do BIC, tornando-o menos preferível que M3. Esta é a armadilha: não basta ter a maior verossimilhança; a complexidade do modelo também é crucial no BIC.
Fonte: FGV CVM 2024 Analista CVM - Ciência de Dados (Perfil 7) (Caderno Tipo 1). Reproduzida para fins de estudo.