<html><head><meta http-equiv="content-type" content="text/html; charset=utf-8"></head><body dir="auto"><div dir="ltr"></div><div dir="ltr"><span style="background-color: rgba(255, 255, 255, 0);">Subject: Instability - I2 Core Services AL2S / IP / PX<br><br>Services: IP PX AL2S <br><br>Affected: Core Services AL2S / IP / PX<br><br>Description: The Internet2 network is experiencing widespread outages<br>of unknown origin. This is causing frequent iBGP and LSP resets at<br>various points across the footprint.  Network engineers are engaged<br>and actively investigating to isolate the source of the outage and<br>will provide an update as soon as the issue is better<br>understood. Internet2 is declaring a major incident and will share<br>updates on a regular cadence. </span></div><div dir="ltr"><span style="background-color: rgba(255, 255, 255, 0);"><br></span></div><div dir="ltr"><span style="background-color: rgba(255, 255, 255, 0);">Looks like this may have been the source of what we saw. </span></div><div dir="ltr"><span style="background-color: rgba(255, 255, 255, 0);"><br></span></div><div dir="ltr"><span style="background-color: rgba(255, 255, 255, 0);">Unfortunately until we got into full diagnostic swing, the pings to <a href="http://google.com">google.com</a> started flying again. </span></div><div dir="ltr"><br>On Dec 10, 2019, at 4:41 PM, Mike Bolitho <<a href="mailto:mikebolitho@gmail.com">mikebolitho@gmail.com</a>> wrote:<br><br></div><blockquote type="cite"><div dir="ltr"><div dir="ltr"><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">Yep. A traceroute would have been very helpful. </div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><font color="#000000" face="arial, helvetica, sans-serif"><br>- Mike Bolitho</font></div></div></div><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Dec 10, 2019 at 2:36 PM Ryan Chewning <<a href="mailto:ryan@chewning.us">ryan@chewning.us</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">To add onto what Richard is saying. when you include your region it's also helpful to provide any information about your upstream carriers or if you're multi-homed which carrier you're seeing the outage over.</div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Dec 10, 2019 at 4:31 PM Richard via Outages <<a href="mailto:outages@outages.org" target="_blank">outages@outages.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">    In my experience it has been helpful to say, hey, <a href="http://Cisco.com">Cisco.com</a> is down<br>
for me in the Chicago area. Is anyone else experiencing this?<br>
<br>
This way you keep list bloat down to a certain geographical area and can<br>
get more accurate information to and from the community.<br>
<br>
    Just my two cents and I hope it keeps list abuse down to a minimum.<br>
<br>
    Sincerely, Richard Golodner<br>
<br>
_______________________________________________<br>
Outages mailing list<br>
<a href="mailto:Outages@outages.org" target="_blank">Outages@outages.org</a><br>
<a href="https://puck.nether.net/mailman/listinfo/outages" rel="noreferrer" target="_blank">https://puck.nether.net/mailman/listinfo/outages</a><br>
</blockquote></div>
_______________________________________________<br>
Outages-discussion mailing list<br>
<a href="mailto:Outages-discussion@outages.org" target="_blank">Outages-discussion@outages.org</a><br>
<a href="https://puck.nether.net/mailman/listinfo/outages-discussion" rel="noreferrer" target="_blank">https://puck.nether.net/mailman/listinfo/outages-discussion</a><br>
</blockquote></div>
</div></blockquote></body></html>