O modelo funciona. Ninguém o pode assinar.
Os modelos ficam retidos em pré-produção quando ninguém consegue dizer quem é o seu responsável, com base em que critérios foram verificados ou quem os pode passar a produção. O HONESTAS regista cada modelo com um responsável nomeado, fornece ao validador a evidência necessária e aplica um controlo de passagem a produção assinado por uma pessoa nomeada. Em produção, cada decisão fica associada à versão do modelo que utilizou.
A IA já está na carteira. Assinar por ela é a parte difícil.
A maioria das seguradoras já recorre a IA nalguma área. Os supervisores exigem que cada sistema tenha um responsável, documentação, supervisão humana e registos, e os modelos de tarifação de vida e saúde passam a ser de risco elevado ao abrigo do Regulamento IA. Um modelo pelo qual ninguém pode assinar fica em pré-produção — ou entra em produção sem o nome de ninguém associado.
Fontes: EIOPA, relatório sobre digitalização, 30 de abril de 2024 (inquérito de mercado de 2023) · Parecer da EIOPA sobre a governação da IA · Regulamento (UE) 2026/1744.
Registe-o, verifique-o e deixe que uma pessoa nomeada o passe a produção.
Os seus modelos permanecem no seu registo e são executados onde habitualmente correm. O HONESTAS regista quem é o responsável por cada um, com base em que critérios foi verificado e quem autorizou a sua entrada em produção.
Registar
Cada modelo do MLflow, SageMaker ou do seu próprio registo é registado com o respetivo responsável, finalidade, dados e versão. Um modelo que não esteja registado não pode ser utilizado numa decisão.
Validar
O validador recebe os testes retrospetivos (back-tests), as verificações de equidade, uma comparação com um segundo modelo e a origem dos dados, podendo voltar a executar cada teste.
O controlo de passagem a produção
O responsável solicita, um validador independente assina e um aprovador com a devida autoridade promove a produção. Ninguém pode aprovar o seu próprio modelo.
Em produção
Cada decisão fica associada à versão que utilizou. Quando um modelo sofre um desvio (drift) além do limite definido, abre-se uma sala para que o responsável o possa reentreinar, restringir ou retirar.
Cada modelo, cada versão e quem autorizou a sua entrada.
Estes são ecrãs do HONESTAS, apresentados com dados de exemplo da Northgate Mutual, uma organização fictícia.
Uma nova versão do modelo, em espera
A nova versão de um modelo de tarifação, célula a célula face à versão em produção, indicando quem a validou, quem a deve aprovar e quando entraria em produção.
- Todas as versões de cada valor guardadas
- Validado e depois aprovado por outra pessoa
- O autor não o pode aprovar
Cada botão de IA e a respetiva versão
Cada botão que pede ao assistente para realizar uma tarefa mostra a versão que executa e o respetivo custo. Um botão cujo resultado alimenta uma decisão de sinistro executa a mesma versão para todos.
- A versão de quem foi executada em cada clique
- Com que frequência o resultado foi utilizado sem alterações
- Uma marcação quando um modelo nunca foi verificado para a tarefa
Testado primeiro em registos de treino
Uma nova versão corre em paralelo com a atual em registos de treino, passando pelas mesmas verificações. Nada é enviado, arquivado ou selado até ser guardado e aprovado.
- Lado a lado nos mesmos registos
- Cada verificação, em cada rascunho
- Quanto custa cada versão
O que um botão executa, a partir do próprio botão
Clique com o botão direito em qualquer botão de IA e o menu indica o que faz, que competência e versão executa, que modelo responde e o custo da última execução.
- O modelo indicado e o motivo da sua escolha
- Apenas a empresa altera o modelo
- Uma referência para suporte em cada execução
A evidência de que um validador precisa, conservada desde a primeira versão.
Os registos de inscrição, validação e promoção estão ligados às normas que os exigem.
- Regulamento da IA da UE, risco elevadoRegulamento (UE) 2024/1689, Anexo III, ponto 5, alínea c)A avaliação de riscos e a tarifação nos seguros de vida e de saúde constituem IA de risco elevado a partir de 2 de dezembro de 2027.
- Regulamento da IA da UE, requisitosRegulamento (UE) 2024/1689, artigos 9.º a 15.ºGestão de riscos, governação de dados, documentação técnica, registos automáticos (logs), supervisão humana e exatidão.
- Validação em Solvência IIDiretiva 2009/138/CE, artigo 124.ºUm ciclo regular de validação dos modelos internos, com os respetivos resultados documentados.
- Parecer da EIOPA sobre IAGovernação e gestão de riscos de IA, 6 de agosto de 2025Expectativas dos supervisores quanto a dados, registos, equidade, explicabilidade e supervisão humana.
Datas do Regulamento IA conforme alteradas pelo Regulamento (EU) 2026/1744, o Digital Omnibus, publicado no Jornal Oficial a 24 de julho de 2026. Não constitui aconselhamento jurídico.
Meça a espera entre pronto e em produção.
Estas são as métricas que um diretor de modelos ou atuário responsável acompanha, lidas diretamente dos próprios registos de inscrição, validação e promoção.
- Em pré-produção
- Modelos prontos para entrar em serviço mas ainda não promovidos, e o tempo de espera de cada um.
- Responsável designado
- A proporção de modelos em serviço com um responsável atual e designado.
- Constatações em aberto
- Constatações da validação ainda em aberto e a respetiva antiguidade.
- Tempo de promoção
- Dias desde o pedido de validação até uma promoção assinada.
- Decisões associadas
- A proporção de decisões associadas de forma fixa à versão do modelo que utilizaram.
- Desvio (drift)
- Modelos que ultrapassaram o limiar de desvio e o tempo decorrido até à decisão do responsável.
- Aprovações recusadas
- Tentativas de aprovar o próprio modelo, recusadas no controlo de passagem.
Implementação de modelos, na prática.
Que registos de modelos consegue ler?
MLflow, SageMaker e o seu próprio registo. Cada execução e versão é conservada, juntamente com os dados e o código que lhe deram origem.
Os nossos modelos têm de ser transferidos?
Não. Permanecem onde são executados hoje. O HONESTAS conserva o registo, as evidências e o histórico de promoção, e verifica que uma decisão apenas invoca uma versão promovida.
Quem pode promover um modelo?
Um aprovador com poderes para esse modelo, após a assinatura de um validador independente. Quem desenvolveu o modelo não o pode aprovar, e o controlo de passagem recusa a operação se o tentar fazer.
O que acontece quando um modelo apresenta desvio?
É aberta uma sala para o respetivo responsável com as evidências do desvio. Este pode voltar a treinar, restringir ou retirar o modelo, sendo a decisão selada como qualquer outra.
Aprofundar
Traga o modelo que está à espera há mais tempo.
Faremos o registo consigo, mostraremos as evidências do validador e acompanharemos a passagem pelo controlo até uma promoção assinada.