<div dir="ltr">Update from CenturyLink:<div><br></div><div>Current status is customers are slowly being restored.  CenturyLink believes the issue is slowly recovering.  <br></div><div><br></div><div><div>Tentative RFO is that a route was added to a CenturyLink edge router causing the outage.<br></div><div><br></div><div>CenturyLink has removed the route and is waiting for customer feedback.</div><div><br></div><div>At this time, CenturyLink does not consider the issue resolved but is seeing recovery on several customers.</div></div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jun 11, 2016 at 5:06 PM, Dino Panagiotopoulos <span dir="ltr"><<a href="mailto:dino.panagiotopoulos@gmail.com" target="_blank">dino.panagiotopoulos@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">It appears to have resolved now but we have not received an RFO from CenturyLink. There was a global ticket opened with them.<span class="HOEnZb"><font color="#888888"><div><br></div><div>Dino</div></font></span></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jun 11, 2016 at 4:18 PM, trey valenta <span dir="ltr"><<a href="mailto:t@trey.net" target="_blank">t@trey.net</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">I too am experiencing the same issue. There's limited connectivity<br>
from that datacenter because some NTP packets are getting routed. But I<br>
haven't any more details and haven't gotten any expanation as to where<br>
things are broken.<br>
<br>
Trey<br>
<div><div><br>
On Sat, Jun 11, 2016 at 04:00:47PM -0400, Dino Panagiotopoulos via Outages wrote:<br>
> Hi Folks,<br>
><br>
> We are experiencing a large outage right now with Qwest/CenturyLink which<br>
> they claim is isolated to one of our datacenters in the Bay Area but I have<br>
> a feeling that it is much larger than they are claiming. All of my<br>
> traceroutes to our datacenter fail once it enters the Centurylink/Qwest<br>
> network through any IX.<br>
><br>
> Is anyone else seeing issues via CenturyLink/Qwest?<br>
><br>
> traceroute<br>
> Protocol [ip]: ip<br>
> Target IP address: 66.35.XXX.XX<br>
> Source address:<br>
> Numeric display [n]: n<br>
> Timeout in seconds [3]: 1<br>
> Probe count [3]: 2<br>
> Minimum Time to Live [1]: 1<br>
> Maximum Time to Live [30]: 30<br>
> Port Number [33434]:<br>
> Loose, Strict, Record, Timestamp, Verbose[none]:<br>
> Type escape sequence to abort.<br>
> Tracing the route to 66.35.XXX.XX<br>
> VRF info: (vrf in name/id, vrf out name/id)<br>
>   1 <a href="http://ae8-40G.ar5.JFK1.gblx.net.ae8-40G.ar5.JFK1.gblx.net" rel="noreferrer" target="_blank">ae8-40G.ar5.JFK1.gblx.net.ae8-40G.ar5.JFK1.gblx.net</a> (67.17.92.226)<br>
> 76 msec 80 msec<br>
>   2 <a href="http://jfk-brdr-04.inet.qwest.net" rel="noreferrer" target="_blank">jfk-brdr-04.inet.qwest.net</a> (63.235.40.57) 120 msec 112 msec<br>
>   3  *  *<br>
>   4  *  *<br>
>   5  *  *<br>
>   6  *  *<br>
>   7  *  *<br>
>   8  *  *<br>
<br>
</div></div>> _______________________________________________<br>
> Outages mailing list<br>
> <a href="mailto:Outages@outages.org" target="_blank">Outages@outages.org</a><br>
> <a href="https://puck.nether.net/mailman/listinfo/outages" rel="noreferrer" target="_blank">https://puck.nether.net/mailman/listinfo/outages</a><br>
<br>
</blockquote></div><br></div>
</div></div></blockquote></div><br></div>