Usar a rota escolhida no trabalho interno controlado. Manter a alternativa bloqueada.
A rota escolhida concluiu os oito casos. A alternativa só deve ser liberada depois que as respostas fora do tempo limite e a lentidão forem corrigidas e todos os casos passarem novamente.
O que aconteceu
Concluiu as oito tarefas.
Concluiu apenas cinco tarefas.
Três execuções não responderam a tempo.
3,30 segundos contra 55,81 segundos.
Leitura rápida
Entenda este relatório em 60 segundos
- 1O que testamos
Os mesmos oito fluxos, entradas e critérios para passar em duas rotas de nuvem.
- 2O que descobrimos
Uma verificação rápida funcionou, mas o conjunto completo de testes revelou três respostas fora do tempo limite e uma grande diferença no tempo de resposta.
- 3O que fazer
Manter a rota escolhida no uso interno. Corrigir e testar novamente a alternativa antes de qualquer lançamento.
Uma única tarefa bem-sucedida parecia tranquilizadora. O conjunto completo de testes contou outra história. A Construct torna essa diferença visível antes que o usuário a descubra.
Ver os detalhes técnicosTudo abaixo sustenta a decisão explicada acima. Estes detalhes servem para engenharia, revisão e reprodução do resultado.
01 · Limite do teste
Os resultados valem apenas para esta versão e este ambiente.
Sistema
Protótipo interno com um modelo de linguagem permitido, acessado por duas rotas de nuvem.
Finalidade
Criar rascunhos empresariais sempre sujeitos a revisão humana. O sistema não podia agir em serviços externos.
Versão testada
Versão interna configurada apenas para Vertex AI, testada em 22 de julho de 2026, com modelo e localização controlados no servidor.
Ambiente
Protótipo protegido em ambiente local isolado, com oito fluxos armazenados e entradas sintéticas.
02 · Resultados completos
A comparação detalhada
| Medida | Rota escolhida | Rota alternativa | O que significa |
|---|---|---|---|
| Tarefas iniciadas | 8 | 8 | Mesma carga |
| Resultados úteis e seguros | 8 / 8 | 5 / 8 | A alternativa não concluiu o conjunto |
| Timeouts do modelo | 0 | 3 | Bloqueador para a alternativa |
| Mediana da resposta | 3,30 segundos | 55,81 segundos | A escolhida foi cerca de 17× mais rápida |
| Maior tempo na escolhida | 48,03 segundos | — | Casos lentos ainda exigem tratamento |
03 · Ações
O que a equipe deve fazer agora
- 1Corrigir a capacidade e o limite de uso da rota alternativaAlta
Repetir os oito casos somente depois de entender por que houve respostas fora do tempo limite.
- 2Melhorar um critério literal demaisMédia
A resposta expressou o limite correto com outras palavras. O critério foi ampliado e a mudança registrada.
- 3Preparar o sistema para casos lentosMédia
Antes do uso público, a rota escolhida ainda precisa de fila de processamento, indicação de progresso, monitoramento e resposta a incidentes.
04 · Rastreabilidade
O que um revisor pode conferir
| ID | Registro | O que permite verificar |
|---|---|---|
| E-01 | Arquivo de avaliação por caso | Entradas, duração, utilidade e segurança |
| E-02 | Comparação das rotas | Quantidade de respostas fora do tempo limite e diferença no tempo de resposta |
| E-03 | Executor de testes versionado | Casos, verificações e resumo podem ser repetidos |
| E-04 | Registro de verificação da plataforma | Testes da aplicação e dos limites de segurança |
05 · Limites
O que este relatório não prova
Não aprova a produção
O ambiente era um protótipo interno, não o sistema público de produção.
Não é exaustivo
Oito casos não revelam toda falha possível nem todo resultado real.
Não é parecer jurídico ou teste de segurança
Não é teste de invasão, avaliação de conformidade ou aprovação regulatória.
Não vale automaticamente após mudanças
A conclusão pertence à versão, aos casos, à rota e ao ambiente testados.
Glossário sem jargão
- Rota
- O caminho técnico usado para chegar ao modelo.
- Timeout
- A resposta não chegou dentro do tempo combinado.
- Mediana
- O tempo central: metade das respostas foi mais rápida e metade, mais lenta.
- Conjunto de testes
- Todos os casos executados juntos, não apenas uma verificação rápida.
Construct
Quer uma resposta assim para seu agente de IA?
Experimente primeiro a demonstração pública. Para testar um sistema real, combinamos a decisão, os casos e o acesso seguro antes de começar.