Questão 50 — Amazon AIF-C01 Simulado | AWS Certified AI Practitioner Questões e Respostas
Uma empresa implantou um modelo em produção. Após 4 meses, a qualidade da inferência do modelo piorou. A empresa deseja receber uma notificação se a qualidade da inferência do modelo diminuir. A empresa também quer garantir que o problema não se repita. Qual solução atenderá a esses requisitos?
- A. Treine novamente o modelo. Monitore o desvio do modelo usando o Amazon SageMaker Clarify.
- B. Treine novamente o modelo. Monitore o desvio do modelo usando o Amazon SageMaker Model Monitor.
- C. Crie um novo modelo. Monitore o desvio do modelo usando o Amazon SageMaker Feature Store.
- D. Crie um novo modelo. Monitore o desvio do modelo usando o Amazon SageMaker JumpStart.
Resposta correta:
B
Explicação
Explicação: A empresa precisa resolver a degradação na qualidade da inferência do modelo após 4 meses de produção e prevenir ocorrências futuras recebendo notificações. A reciclagem do modelo pode resolver a degradação atual, provavelmente causada pelo desvio de dados (mudanças na distribuição de dados ao longo do tempo). O Amazon SageMaker Model Monitor foi projetado para detectar e monitorar desvios de modelo, alertando a empresa quando a qualidade da inferência diminui, atendendo assim a ambos os requisitos. Extrato exato dos documentos de IA da AWS: Do guia do desenvolvedor do Amazon SageMaker: "O Amazon SageMaker Model Monitor permite monitorar modelos de aprendizado de máquina em produção quanto a desvios de dados, degradação do desempenho do modelo e outros problemas de qualidade. Ele pode detectar desvios nas distribuições de recursos e qualidade de inferência, enviando notificações quando desvios são detectados, permitindo que você tome ações corretivas, como retreinar o modelo." (Fonte: Guia do desenvolvedor do Amazon SageMaker, Monitoramento de modelos com SageMaker Model Monitor) Opção detalhada A: treinar novamente o modelo. Monitore o desvio do modelo usando o Amazon SageMaker Clarify. O SageMaker Clarify é usado para detecção de tendências e explicabilidade, não para monitorar desvios do modelo ou qualidade de inferência na produção. Esta opção não atende totalmente aos requisitos. Opção B: treinar novamente o modelo. Monitore o desvio do modelo usando o Amazon SageMaker Model Monitor.Esta é a resposta correta. O novo treinamento aborda a degradação atual, e o SageMaker Model Monitor pode detectar desvios futuros na qualidade da inferência, enviando notificações para evitar recorrências, conforme necessário. Opção C: Construir um novo modelo. Monitore o desvio do modelo usando o Amazon SageMaker Feature Store. O SageMaker Feature Store serve para gerenciar e compartilhar recursos, não para monitorar o desvio do modelo ou a qualidade da inferência. A construção de um novo modelo pode não ser necessária se a reciclagem puder resolver o problema. Opção D: Construir um novo modelo. Monitore o desvio do modelo usando o Amazon SageMaker JumpStart. O SageMaker JumpStart fornece modelos e soluções pré-treinados para implantação rápida, mas não oferece ferramentas específicas para monitorar o desvio do modelo ou a qualidade da inferência na produção. Referência: Guia do desenvolvedor do Amazon SageMaker: Monitoramento de modelos com SageMaker Model Monitor (https://docs.aws.amazon.com/sagemaker/latest/dg/model-monitor.html) Caminho de aprendizagem do AWS AI Practitioner: Módulo sobre monitoramento e manutenção de modelos Documentação da AWS: Abordando desvios de modelo na produção (https://aws.amazon.com/sagemaker/)