Attività in classe: progettazione di un piano di valutazione per l'ottimizzazione multi-obiettivo dei parametri

Questa pagina è unprogetto di attività in classe: trasforma laportanza—resistenza, una coppia di obiettivi in tensione reciproca, in un piano di valutazione per l'ottimizzazione multi-obiettivo dei parametri, riproducibile, confrontabile e consegnabile al giudizio degli esperti. Il punto centrale non è far fornire al modello una risposta diretta, ma progettare un meccanismo di valutazione verificabile più volte: chi partecipa alla valutazione, con quali metriche, entro quali vincoli e budget, e secondo quali regole si conservano le soluzioni candidate.

L'attività simula un ciclo chiuso:generazione dei candidati → valutazione → confronto di benefici, costi e vincoli in base al feedback → conservazione delle soluzioni valide → registrazione e passaggio al ciclo successivo. Devi proporre un piano per un oggetto parametrizzato (ad esempio i parametri di un profilo alare) e rendere esplicito nel piano il compromesso tra portanza e resistenza: in una parola, trasformare il "conflitto" in "regole di valutazione attuabili".

Metriche, vincoli e budget

Obiettivo di portanzadefinito come massimizzazione del coefficiente di portanza o delle prestazioni di portanza;Obiettivo di resistenzadefinito come minimizzazione del coefficiente di resistenza o delle prestazioni di resistenza. Questi sono gli obiettivi originari in conflitto e devono essere presentati ciascuno su una colonna separata.
Metriche composte: metriche come il rapporto portanza/resistenza possono servire a spiegare e illustrare, ma non possono sostituire gli obiettivi originari in conflitto — altrimenti il compromesso verrebbe "appiattito" in anticipo da un unico rapporto.
Stratificazione dei vincoli: limiti dei parametri e vincoli geometrici e ingegneristici (come spessore relativo e intervallo del momento di beccheggio) sono di norma vincoli rigidi, la cui violazione comporta l'eliminazione; le preferenze di prestazione, di costo e simili sono definite preferenze soft e servono all'ordinamento.
Dichiarazione del budget: indica il numero di chiamate alla simulazione o al modello surrogato, il tempo e i limiti di potenza di calcolo, distinguendo le quote per la "valutazione surrogata" e per la "verifica ad alta fedeltà"; in caso contrario non è possibile confrontare equamente soluzioni diverse.

Processo di valutazione e generazione dei candidati

Il ciclo di valutazione si articola in sei passi:rappresentazione dei parametri → generazione dei candidati → calcolo della valutazione → aggregazione delle metriche → confronto delle soluzioni → archiviazione dei record. Le regole di generazione dei candidati determinano l'ampiezza dell'esplorazione: il campionamento iniziale copre l'intero spazio, perturbazione, incrocio e mutazione si occupano del affinamento locale, mentre la guida delle preferenze infittisce le aree di interesse degli esperti. I candidati devono distribuirsi su diverse regioni di compromesso portanza/resistenza, evitando che un'intera generazione collassi verso un'unica direzione di "alta portanza" o "bassa resistenza".

Regole di selezione e gruppo di candidati in output

La selezione può avvalersi della non-dominanza di Pareto, della somma ponderata, del filtraggio per soglia, dei punti di riferimento o dell'ordinamento delle preferenze. Qualunque sia la scelta, il risultato non deve essere "conservare solo la soluzione con il punteggio totale più alto": l'output deve essere un insieme di candidati che copre diversi compromessi, corredato di evidenze metriche, soddisfacimento dei vincoli, differenze tra i candidati e intervalli di incertezza, per consentire agli esperti di dominio di valutare se il compromesso è ragionevole.

Errori comuni

Combinare portanza e resistenza in un unico punteggio totale e poi massimizzarlo sembra una semplificazione, ma in realtà significa compiere in anticipo il compromesso al posto degli esperti attraverso la scelta dei pesi, perdendo anche la diversità dei candidati. L'approccio corretto è conservare più gruppi di candidati e lasciare la decisione su "quale scegliere" a valle dell'interfaccia di valutazione.

Consegna

Modello di piano di valutazione di una pagina: tabella delle metriche (con obiettivi originari e metriche ausiliarie), diagramma di flusso (ciclo chiuso in sei passi), regole di generazione dei candidati, regole di selezione, gruppo di candidati in output, nonché descrizione di rischi e incertezze. Registra inoltre parametri, definizione delle metriche, budget di valutazione, seed casuale, criteri di selezione e motivazioni dell'eliminazione, così che l'esplorazione successiva possa ereditarli direttamente.

Modello di piano di valutazione per l'attività in classe

L'immagine è il modello di piano di valutazione di una pagina per l'attività in classe: attorno ai due obiettivi indipendenti e in conflitto di portanza e resistenza, elenca la tabella delle metriche, il ciclo di valutazione in sei passi, le regole di generazione dei candidati, le regole di selezione e il gruppo di candidati in output. Richiede inoltre di dichiarare il budget di valutazione e di registrare seed casuale e motivazioni dell'eliminazione, rendendo il piano confrontabile, riproducibile e sottoponibile al giudizio degli esperti.

Domanda 1

Nel piano di valutazione di questa attività, come devono essere definiti portanza e resistenza come obiettivi di ottimizzazione?

Ottimizzare solo la portanza, rimandando la discussione sulla resistenza al momento dell'interpretazione dei risultati

Unirli in un unico punteggio di rapporto portanza/resistenza e massimizzare direttamente tale rapporto

Far designare di volta in volta dagli esperti uno dei due obiettivi al termine di ogni ciclo di valutazione

Definirli come obiettivi indipendenti: massimizzare il coefficiente di portanza e minimizzare il coefficiente di resistenza

Domanda 2

Per quanto riguarda la stesura di vincoli e budget di valutazione, quale delle seguenti opzioni soddisfa meglio i requisiti del piano richiesti dall'attività?

Allentare automaticamente i vincoli rigidi quando il budget è limitato, così che il processo di ottimizzazione arrivi a conclusione

Indicare solo i vincoli, lasciando che il budget venga deciso sul momento da chi esegue

Considerare anche il budget di valutazione come un obiettivo da minimizzare, confrontandolo alla pari con portanza e resistenza

Impostare spessore e intervallo del momento di beccheggio come vincoli rigidi, con eliminazione in caso di violazione, e indicare il numero di chiamate al surrogato o alla simulazione e i limiti di potenza di calcolo

Domanda 3

Per far sì che i candidati coprano diverse regioni di compromesso portanza/resistenza, cosa dovrebbero includere soprattutto le regole di generazione dei candidati?

Campionare fittamente solo nella regione ad alta portanza, per garantire che le soluzioni in output siano "belle"

Generare in modo completamente casuale, senza alcuna preferenza o limite dei parametri

Un campionamento iniziale che copra l'intero spazio, affiancato da perturbazione, incrocio e mutazione e dalla guida delle preferenze, in modo che i candidati si distribuiscano su più regioni di compromesso

Generare un solo candidato per ciclo e poi affinarlo progressivamente

Domanda 4

Al termine del primo ciclo di valutazione, cosa dovrebbe produrre soprattutto la fase di confronto delle soluzioni?

Un lungo elenco di tutti i candidati ordinati per punteggio dal più alto al più basso

Conservare solo l'unica soluzione con il punteggio di somma ponderata più alto

Un insieme di candidati non dominati che copre diversi compromessi portanza/resistenza, corredato delle divergenze e delle motivazioni tra i gruppi

Estrarre a caso un candidato e passarlo direttamente alla verifica

Domanda 5

Per consentire all'esplorazione successiva di ereditare i risultati di questo ciclo, cosa non deve assolutamente mancare nell'archivio dei record?

Registrare solo la forma della curva del punteggio complessivo

Registrare solo i valori dei parametri della soluzione finale selezionata

Rappresentazione e limiti dei parametri, definizione delle metriche, budget di valutazione, seed casuale, criteri di selezione e motivazioni delle eliminazioni

Registrare solo la precisione predittiva del modello surrogato

Caso: revisione del piano di valutazione multi-obiettivo per un profilo alare supercritico

Leggi il contesto e rispondi alle domande.

Il team ha elaborato un piano di valutazione per l'ottimizzazione multi-obiettivo di un profilo alare supercritico: gli obiettivi sono massimizzare il coefficiente di portanza e minimizzare il coefficiente di resistenza; i vincoli rigidi prevedono uno spessore relativo non inferiore al limite minimo e un coefficiente del momento di beccheggio entro l'intervallo consentito; un modello surrogato sostituisce gran parte delle simulazioni ad alta fedeltà e il budget di valutazione totale è fissato a N chiamate. Dopo il primo ciclo sono stati ottenuti 40 candidati; il team li ha ordinati per somma ponderata e ha conservato solo il profilo con il punteggio più alto per la verifica.

1. Quali problemi presenta questo piano nella "conservazione e diversità dei candidati"? Come modificheresti le regole di selezione?

Risposta:
Il problema è che l'ordinamento per somma ponderata conserva solo il punteggio più alto, il che equivale a dissolvere in anticipo il conflitto tra portanza e resistenza mediante un insieme di pesi prescelti: la diversità di Pareto va perduta, gli esperti non vedono l'intervallo di compromesso e la motivazione dei pesi stessi non è dichiarata. Indicazioni per la revisione: passare alla selezione per non-dominanza di Pareto, conservando come gruppo di candidati diversi candidati sul fronte che coprono diverse regioni di compromesso portanza/resistenza; se si deve usare la somma ponderata, fornire più insiemi di pesi o punti di riferimento, formare un gruppo di candidati, registrare le motivazioni di ciascun insieme di pesi e spiegare come si mantiene la diversità.

2. Per garantire che l'esplorazione del secondo ciclo possa ereditare i risultati del primo, quali elementi di registrazione e di interfaccia deve integrare il piano?

Risposta:
Sul piano dei record: rappresentazione e limiti dei parametri, definizione e unità delle metriche, distinzione tra vincoli rigidi e preferenze soft, budget di valutazione e numero effettivo di chiamate, versione del modello surrogato, seed casuale, criteri di selezione e motivazioni delle eliminazioni. Sul piano dell'interfaccia: ogni candidato deve essere corredato di evidenze metriche (valori di portanza e resistenza), soddisfacimento dei vincoli, intervallo di incertezza del modello surrogato e descrizione delle differenze tra i gruppi di candidati, offrendo agli esperti un'interfaccia di compromesso valutabile (punti di riferimento o ordinamento delle preferenze), così che il ciclo successivo possa adattare la strategia di campionamento e l'allocazione del budget sulla base di questi record.