<div dir="ltr"><div class="gmail_default"><div class="gmail_default"><font face="arial, helvetica, sans-serif">FYI: I got the following regarding the power event on Saturday morning.</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><br></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">​---------- Forwarded message ----------</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">From: Fowler, Stephen Lee <<a href="mailto:steve.fowler@oregonstate.edu">steve.fowler@oregonstate.edu</a>></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">Date: Mon, Jul 2, 2018 at 10:26 AM</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">Subject: [Kerr_b210-announce] Saturday Power issue</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><br></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">All,</font></div><div class="gmail_default"><br></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><br></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">I learned after the fact that we had a power event on Saturday that affected power in B210.  I did see that the generator came on line, but I did not get any alerts from the other units in that power chain.  Further investigation revealed that one of the UPS suffered an inverter fault that is likely the cause of some systems losing power.  While we monitor the systems in B210 we did not receive any errors from the UPS themselves, so I was not aware there had been an issue. </font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><br></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">What is happening:</font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif"><br></font></div><div class="gmail_default"><font face="arial, helvetica, sans-serif">I have engaged the UPS maintenance service to investigate and repair the faulty UPS.  I will also be talking with them about the logging and notification failure of both units.</font></div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif"><br></div></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jun 30, 2018 at 9:21 AM, Lance Albertson <span dir="ltr"><<a href="mailto:lance@osuosl.org" target="_blank">lance@osuosl.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">All,</div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif"><br></div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">It seems as though we had some kind of a power event at approximately 6:21AM PDT (13:21 UTC). that affected some (but not all)  of our hosts. At this point I'm not entirely sure what happened but my guess that one of the power circuits went down and then came back online. This is confusing since the UPS should have prevented that. I'm going to be heading into the datacenter soon to do a visual inspection.</div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif"><br></div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">If you have any hosts that are offline and need me to help bring them back, please send an email to <a href="mailto:support@osuosl.org" target="_blank">support@osuosl.org</a> and I will take a look. Feel free to also reach out on IRC at #osuosl.</div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif"><br></div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">Thanks-</div><span class="HOEnZb"><font color="#888888"><div><br></div>-- <br><div class="m_-3283597083296719115gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><font face="arial, helvetica, sans-serif">Lance Albertson</font><div><div><font face="arial, helvetica, sans-serif">Director</font></div><div><span style="font-family:arial,helvetica,sans-serif">Oregon State University | </span><span style="font-family:arial,helvetica,sans-serif">Open Source Lab </span></div></div></div></div>
</font></span></div>
</blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><font face="arial, helvetica, sans-serif">Lance Albertson</font><div><div><font face="arial, helvetica, sans-serif">Director</font></div><div><span style="font-family:arial,helvetica,sans-serif">Oregon State University | </span><span style="font-family:arial,helvetica,sans-serif">Open Source Lab </span></div></div></div></div>
</div>