8

Análise de Resultados Experimentais e Visualização

AI999第7课:AI Native 科研范式与 EvoX 实战切入
00:00

No experimento de planejamento de rotas multiobjetivo com robôs de armazém do EvoX,“obter uma vez uma solução de aparência boa” não equivale a um avanço real da otimização. Para julgar se uma execução é confiável, é preciso obter simultaneamente dois tipos de evidência: uma que descreve oprocesso de busca(as curvas de convergência de cada objetivo ao longo das gerações), e outra que descreve asolução final(a visualização das rotas e a tabela de métricas sob um layout de armazém fixo). As curvas respondem apenas se “a busca está se movendo”, enquanto as rotas e as métricas respondem se “o resultado pode ser utilizado”.

Análise de Resultados Experimentais e Visualização: Tendência de Convergência × Validação de RotasTendência de Convergência MultiobjetivoValor do objetivo0100200300400Gerações →Objetivo 1 Comprimento da rota ↓Objetivo 2 Consumo de energia ↓ (estagnação no meio/fim)Indicador de hipervolume ↑ (melhoria global)Linha laranja estabilizando ≠ convergência: é preciso cruzar logs e reexecuções para decidirComparação de rotas sob layout de armazém fixoInícioDestinoPrateleiraRota ótimaRota de comparaçãoMétricaRota ótimaRota de comparaçãoComprimento da rota128.4156.9Total de curvas69Custo global1.001.21Conclusão = tendência do processo + resultado final, ambos indispensáveis

1. Primeiro leia as curvas de convergência: o que está acontecendo no processo de busca

Ao traçar a curva de cada valor de objetivo em função das gerações, o que se observa é atendênciae não o valor de um ponto isolado. Na prática de engenharia, quatro padrões comuns precisam ser claramente distinguidos:

  • Melhoria contínua: a curva cai de forma estável nas fases inicial e intermediária (ou o indicador global sobe de forma estável), indicando que a população ainda está buscando de forma eficaz, com crossover e mutação gerando continuamente candidatos melhores.
  • Oscilação: a curva flutua para cima e para baixo sem uma direção clara de longo prazo, geralmente decorrente de ruído na avaliação, conflitos de restrições ou diversidade excessiva; é preciso revisar a função de avaliação e a configuração de parâmetros.
  • Estagnação: a curva permanece quase horizontal por um intervalo, mas ainda pode voltar a melhorar nas gerações seguintes; trata-se de uma “perda temporária de direção de melhoria”.
  • Convergência prematura: achatamento completo logo cedo, sem recuperação posterior; na maioria dos casos, é perda de diversidade da população ou compressão prematura do espaço de soluções.

2. Em seguida, observe a rota final sob o layout de armazém fixo

Sobreponha a rota ótima obtida pela evolução e a rota de comparação nomesmo mapa de armazém fixoe verifique três coisas: se o caminho é realmente alcançável, se o desvio de obstáculos é razoável e se o último trecho próximo ao destino é estável. O layout fixo é uma restrição fundamental — somente com o ambiente inalterado as diferenças de rota entre execuções e parâmetros podem ser atribuídas à própria otimização, e não a mudanças no mapa.

3. Sustente as conclusões com dados experimentais completos

Uma conclusão só é válida se for reproduzível. Salve e verifique: a configuração da execução e a semente aleatória, os logs de iteração, os valores de cada objetivo ao longo das gerações, a rota final e os resultados de avaliação. Quando necessário, confirme por reexecução ou verificação cruzada se a mesma conclusão se sustenta de forma estável. Se a curva deixar de melhorar visivelmente no final, combine com os logs completos para determinar se é convergência prematura, saturação da avaliação ou proximidade de uma solução utilizável; não tire conclusões com base em uma única captura de tela.

Erros de julgamento comuns
Uma curva que se achata suavemente cedo não significa automaticamente “encontrou a solução ótima”, nem “o algoritmo falhou”; da mesma forma, uma rota de aparência bonita não significa busca estável. Um resultado ótimo isolado pode ser uma melhoria real, mas também pode ser fruto de flutuação aleatória ou saturação da avaliação — a tendência do processo e o resultado final precisam se confirmar mutuamente.