<div dir="ltr"><div>20180402 NFD call discussed this issue.<br></div><div><br></div><div>Beichuan reveals that Ashiq is going to take over Jenkins in May 2018. During the transition, he is going to learn how to deploy macOS slaves, and then he can start swapping nodes to be more resilient.</div><div><br></div><div>There were also concerns about the Jenkins master being deployed at only one site, but there isn't a good solution yet.</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Mar 31, 2018 at 10:04 PM, Junxiao Shi <span dir="ltr"><<a href="mailto:shijunxiao@email.arizona.edu" target="_blank">shijunxiao@email.arizona.edu</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="auto">Dear folks</div><div dir="auto"><br></div><div dir="auto">Right now, all Jenkins slaves hosted at CSU are down. CSU hosts all OSX 10.12 and 10.13 slaves. Therefore, none of the build jobs can complete.</div><div dir="auto">This is not the first time that all slaves of a certain OS are failing at the same time, and most likely this would not be the last.</div><div dir="auto"><br></div><div dir="auto">How about deploying the nodes in a more resilient way?</div><div dir="auto"><b>For each OS version, there should be slaves in at least two different sites</b>.</div><div dir="auto">This ensures the build jobs can proceed when there is at most one failure.</div><div dir="auto"><br></div><div dir="auto">Yours, Junxiao</div></blockquote></div><br></div>