ทบทวนกิจกรรมในชั้นเรียน: การตรวจสอบความสมเหตุสมผลของแผนการ权衡

หน้านี้เป็นการทบทวนผลลัพธ์ของกิจกรรมในชั้นเรียน "การออกแบบแผนการประเมินสำหรับการปรับพารามิเตอร์แบบหลายวัตถุประสงค์" โดยมีคำถามหลักเพียงข้อเดียว:แผนการ权衡ชุดนี้สมเหตุสมผลหรือไม่——它能ระบุตัวชี้วัดสำคัญที่ถูกละเลยและความขัดแย้งระหว่างวัตถุประสงค์ได้หรือไม่ และจากข้อมูลนั้นกำหนดทิศทางการปรับการตั้งค่าพารามิเตอร์ได้อย่างชัดเจน ทำให้แผนใกล้เคียงกับความต้องการในการตัดสินใจทางวิศวกรรมอย่างแท้จริง

1. ตรวจสอบความครอบคลุมโดยอิงกับการตัดสินใจทางวิศวกรรมจริงเป็น基準

การทบทวนไม่ใช่การรันการทดลองซ้ำ แต่เป็นการนำแผนการประเมินกลับไปตรวจสอบในสถานการณ์การตัดสินใจจริง: หากผู้เชี่ยวชาญในสาขาเป็นผู้ตัดสินใจ วัตถุประสงค์ ข้อจำกัด และความ偏好ที่แผนกำหนดไว้เพียงพอต่อการสนับสนุนการตัดสินใจหรือไม่ ดังนั้นขั้นตอนแรกคือการตรวจสอบความครอบคลุม——ให้ความสำคัญกับการค้นหาตัวชี้วัดสำคัญที่ถูกละเลยก่อน แทนที่จะรีบเปรียบเทียบว่าคะแนนสุดท้ายของใครสูงกว่า

• ความครอบคลุมของวัตถุประสงค์ปริมาณที่ผู้ตัดสินใจให้ความสำคัญจริง ๆ เข้าสู่ชุดวัตถุประสงค์ครบหรือไม่ เช่น ประสิทธิภาพ ต้นทุน ความน่าเชื่อถือ และความสามารถในการผลิต
• ข้อจำกัดและความ偏好ข้อจำกัดแบบตายตัว เช่น รูปทรงเรขาคณิต กระบวนการ ระยะความปลอดภัย ถูกเขียนเป็นข้อจำกัดอย่างชัดเจนหรือไม่ ความ偏好แสดงออกอย่างชัดแจ้งในรูปแบบน้ำหนักหรือจุดอ้างอิง หรือยังคงอยู่ในความรู้สึกส่วนตัว
• ราคาของการละเลยเมื่อชุดวัตถุประสงค์ไม่สมบูรณ์ การปรับให้เหมาะสมเป็นเพียงการปรับปรุงบนโมเดลที่ผิดต่อไป ยิ่งผลลัพธ์ "สวยงาม" มากเท่าไร ก็ยิ่งห่างจากความต้องการจริงมากขึ้นเท่านั้น

2. ระบุความขัดแย้งและความซ้ำซ้อนอย่างชัดแจ้ง

การทบทวนต้องแยกความแตกต่างระหว่างความสัมพันธ์สองประเภทที่ดูคล้ายกัน แต่มีวิธีจัดการตรงกันข้าม:ความขัดแย้งหมายความว่าตัวชี้วัดสองรายการผกผันกัน ควรเก็บไว้เป็นหลายวัตถุประสงค์ เพื่อให้ความสัมพันธ์ในการ权衡ปรากฏอย่างชัดแจ้งบนพรมแดนความซ้ำซ้อนหมายความว่าตัวชี้วัดสองรายการเปลี่ยนแปลงในทิศทางเดียวกัน ข้อมูลทับซ้อนกันสูง จะทำให้น้ำหนักของความต้องการเดียวกันถูกนับซ้ำ ควรควบรวมหรือลบรายการหนึ่งออก นอกจากนี้ยังต้องตรวจสอบว่ามีข้อจำกัดที่ถูกเข้าใจผิดว่าเป็นวัตถุประสงค์ หรือวัตถุประสงค์ใดถูกเขียนเป็นน้ำหนักโดยผิดพลาด

3. การตั้งค่าพารามิเตอร์สอดคล้องกับโครงสร้างของปัญหาหรือไม่

การตั้งค่าสำหรับการปรับพารามิเตอร์แบบหลายวัตถุประสงค์ต้องสอดคล้องกับขนาดของปัญหา ต้นทุนการประเมิน และความต้องการในการตัดสินใจ เมื่อทบทวนให้เปรียบเทียบทีละรายการ: ขนาดประชากรและจำนวนแผนตัวเลือกเพียงพอต่อการครอบคลุมช่วงการ权衡หรือไม่; งบประมาณการวนซ้ำสอดคล้องกับความแม่นยำของโมเดลตัวแทนหรือไม่; พารามิเตอร์ตัวดำเนินการ เช่น การกลายพันธุ์ การผสมข้าม และแรงกดดันในการคัดเลือก ทำให้การสำรวจและการใช้ประโยชน์เสียสมดุลหรือไม่; กลยุทธ์การสุ่มตัวอย่างลงทุนงบประมาณการจำลองที่มีอยู่อย่างจำกัดในพื้นที่ที่มีข้อมูลมากหรือไม่ การไม่สอดคล้องใด ๆ จะแสดงออกเป็น "มีผลลัพธ์ แต่ใช้งานไม่ได้"

4. ได้ทิศทางการปรับจากข้อสรุปของการทบทวน

• ความหลากหลายไม่เพียงพอ(ตัวเลือกกระจุกตัว การกระจายแออัด): ขยายขนาดประชากรหรือชุดผลลัพธ์ตัวเลือก
• ลู่เข้าเร็วเกินไป(สูญเสียการสำรวจตั้งแต่ระยะแรก): ปรับความเข้มของการกลายพันธุ์และแรงกดดันในการคัดเลือก ผ่อนคลายการรักษาชนชั้นยอด
• ต้นทุนการประเมินสูงเกินไปเพิ่มความแม่นยำของโมเดลตัวแทน ปรับปรุงการเพิ่มจุดและกลยุทธ์การสุ่มตัวอย่าง แทนที่จะลดขนาดการสำรวจ
• ความ偏好เบี่ยงเบนแก้ไขน้ำหนักหรือเลื่อนจุดอ้างอิง เพื่อให้คำตอบที่เลือกอยู่ในพื้นที่ที่ผู้ตัดสินใจให้ความสำคัญจริง ๆ
• ตัวชี้วัดถูกละเลยหรือขัดแย้งกันเพิ่มตัวชี้วัดที่ขาดหายไป รักษาความสัมพันธ์แบบผกผันไว้เป็นโครงสร้างหลายวัตถุประสงค์ แทนที่จะบีบอัดเป็นวัตถุประสงค์เดียวหรือตรวจสอบภายหลัง

5. เกณฑ์การตัดสินความสมเหตุสมผล

แผนการประเมินที่ผ่านเกณฑ์ไม่ได้หยุดอยู่แค่ "รันออกผลลัพธ์ได้" แต่ต้องตอบสนองสามข้อ:เปรียบเทียบได้——ผู้เชี่ยวชาญในสาขาสามารถเห็นการเลือกได้อย่างชัดเจนระหว่างตัวเลือก;เลือกได้——สามารถเลือกแผนจากพรมแดนตามความ偏好ได้;ทำซ้ำได้——บันทึกพารามิเตอร์ เมล็ดสุ่ม และกระบวนการอย่างครบถ้วน ผลลัพธ์สุดท้ายควรเป็นตัวเลือกที่หลากหลายซึ่งคำนึงถึงตัวชี้วัดแต่ละรายการ ไม่ใช่ "คำตอบที่ดีที่สุด" เพียงหนึ่งเดียวที่โดดเดี่ยว