<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=Windows-1252">
</head>
<body>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Dear Holly,<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
I'm not aware of a best practice for this.<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
One idea would be to evaluate the non-dominated set A according to the criteria for B, and vice-versa.<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
You could then compare the resulting fronts with standard metrics such as the hypervolume.<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Hope that helps!<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Best,<span id="ms-outlook-android-cursor"></span><br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Thomas<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
____________________________<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Thomas Wortmann, Ph.D. M.Sc. M.Arch<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Tenure-Track Professor, Chair for Computing in Architecture<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Faculty, International Max Planck Research School for Intelligent Systems<br>
<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
ICD – Institute for Computational Design and Construction<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Faculty for Architecture and Urban Planning  <br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
University of Stuttgart<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Keplerstr. 11<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
70174 Stuttgart<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Germany<br>
<br>
<br>
</div>
<div dir="auto" style="direction: ltr; margin: 0; padding: 0; font-family: sans-serif; font-size: 11pt; color: black; ">
Tel +49 (0) 711 685 81933</div>
<hr style="display:inline-block;width:98%" tabindex="-1">
<div id="divRplyFwdMsg" dir="ltr"><font face="Calibri, sans-serif" style="font-size:11pt" color="#000000"><b>From:</b> Bldg-sim <bldg-sim-bounces@lists.onebuilding.org> on behalf of Samuelson, Holly Wasilowski via Bldg-sim <bldg-sim@lists.onebuilding.org><br>
<b>Sent:</b> Wednesday, July 14, 2021 4:48:00 PM<br>
<b>To:</b> bldg-sim@lists.onebuilding.org <bldg-sim@lists.onebuilding.org><br>
<b>Cc:</b> Salimi, Shide <ssalimi@gsd.harvard.edu><br>
<b>Subject:</b> [Bldg-sim] ISO Precedent paper in multi-objective optimization: statistical comparison of two pareto sets</font>
<div> </div>
</div>
<style type="text/css" style="display:none">
<!--
p
        {margin-top:0;
        margin-bottom:0}
-->
</style>
<div dir="ltr">
<div style="background-color:#E77471; border:1px solid #003333; padding:.2em"><span style="font-size:10pt; font-family:serif; color:black; font-weight:bold; padding:.2em">External Email – Do not click on any links or open any attachments from an unknown sender.</div>
<p> </p>
</span>
<div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
Dear Building Sim,</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
Can any of you recommend a precedent paper for us?  In short, we want to compare two sets of optimal solutions in two different multi-objective optimizations, to determine whether the characteristics of the two sets are significantly different.</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
<br>
</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
Longer version:</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
We set up a multi-objective analysis and found a set of optimal solutions (buildings whose simulation results lie on the pareto front).  Then we did this again for slightly different objectives, i.e. different comfort criteria.  We now have two sets of "optimal"
 buildings. They have different characteristics, like insulation levels and window-to-wall ratios.  We want to determine if the differences between the two sets are significant. We have ideas of how to analyze this, but it would be great to see how others have
 done this in the past. This precedent research could be from any field using optimization, not just building science.</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
<br>
</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
If you have any leads for us, we'd appreciate it.</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
Thanks!</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
Holly</div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
<br>
</div>
<div>
<div id="x_Signature">
<div>
<div id="x_divtagdefaultwrapper" dir="ltr" style="font-size:12pt; color:#000000; background-color:#FFFFFF; font-family:Calibri,Arial,Helvetica,sans-serif">
<div style="font-family:Tahoma; font-size:13px">
<div style="font-family:Tahoma; font-size:13px">
<div style="font-family:Tahoma; font-size:13px">
<div style="font-family:Tahoma; font-size:13px"><font color="#888888">
<div><font color="#ff6600" face="Arial" size="1"><span style="color:rgb(12,136,42); font-size:10pt">Holly W. Samuelson | DDes | Registered Architect</span></font></div>
<div><font color="#999999" face="Arial" size="1"><span style="color:rgb(51,51,51); font-size:10pt">Associate Professor | Harvard Graduate School of Design</span></font></div>
<div><font color="#999999" face="Arial" size="1"><span style="color:rgb(51,51,51); font-size:10pt">Co-Head MDes Energy and Environment Program</span></font></div>
</font></div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</body>
</html>