<HTML>
<HEAD>
<TITLE>Re: [outages] Denver Level3 problems?</TITLE>
</HEAD>
<BODY>
<FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'>An internal source has informed me there was an issue with a Data Center in the Denver area in which something “blew up” and this caused a chain effect with anything going through Denver to any other pop in the USA.   <BR>
<BR>
The problem since has been resolved and was for a very short period.<BR>
<BR>
Brad<BR>
<BR>
<BR>
<BR>
On 5/18/10 2:32 PM, "Joseph Jackson" <<a href="jjackson@aninetworks.net">jjackson@aninetworks.net</a>> wrote:<BR>
<BR>
</SPAN></FONT><BLOCKQUOTE><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><FONT COLOR="#1F497D">We also saw issues with customer end points that took level 3 around the same time but in NYC – LA and DFW POPS.<BR>
 <BR>
Joseph<BR>
 <BR>
 <BR>
</FONT><BR>
</SPAN></FONT><FONT SIZE="2"><FONT FACE="Tahoma, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:10pt'><B>From:</B> <a href="outages-bounces@outages.org">outages-bounces@outages.org</a> [<a href="mailto:outages-bounces@outages.org">mailto:outages-bounces@outages.org</a>] <B>On Behalf Of </B>Sean Clark<BR>
<B>Sent:</B> Tuesday, May 18, 2010 11:53 AM<BR>
<B>To:</B> Jayson Baker; randal k<BR>
<B>Cc:</B> <a href="outages@outages.org">outages@outages.org</a><BR>
<B>Subject:</B> Re: [outages] Denver Level3 problems?<BR>
</SPAN></FONT></FONT><FONT FACE="Times New Roman"><SPAN STYLE='font-size:12pt'> <BR>
</SPAN></FONT><FONT COLOR="#1F497D"><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'>We had many customer complaints and all our  IP SLA tests spiked between 1110 and 1135 est for Level 3 in our Denver market.  But we also saw the problems in DAL on our level 3 peer (SLA test as well). Some event happened in the Denver area on level 3, we have opened a ticket with them and they reported to us they have had a lot of customer call in for the same thing. They have not given us an RFO yet…<BR>
 <BR>
 <BR>
</SPAN></FONT></FONT><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><BR>
</SPAN></FONT><FONT SIZE="2"><FONT FACE="Tahoma, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:10pt'><B>From:</B> <a href="outages-bounces@outages.org">outages-bounces@outages.org</a> [<a href="mailto:outages-bounces@outages.org">mailto:outages-bounces@outages.org</a>] <B>On Behalf Of </B>Jayson Baker<BR>
<B>Sent:</B> Tuesday, May 18, 2010 12:31<BR>
<B>To:</B> randal k<BR>
<B>Cc:</B> <a href="outages@outages.org">outages@outages.org</a><BR>
<B>Subject:</B> Re: [outages] Denver Level3 problems?<BR>
</SPAN></FONT></FONT><FONT FACE="Times New Roman"><SPAN STYLE='font-size:12pt'> <BR>
We've been having issues staying connected to Google Chat for the last hour or so.<BR>
</SPAN></FONT><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><BR>
</SPAN></FONT><FONT FACE="Times New Roman"><SPAN STYLE='font-size:12pt'>And it just so happens we're connected through you.  :-)<BR>
</SPAN></FONT><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><BR>
</SPAN></FONT><FONT FACE="Times New Roman"><SPAN STYLE='font-size:12pt'><BR>
Best Wishes,<BR>
Jayson A. Baker<BR>
Peak Internet<BR>
</SPAN></FONT><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><BR>
</SPAN></FONT><FONT FACE="Times New Roman"><SPAN STYLE='font-size:12pt'>On Tue, May 18, 2010 at 9:51 AM, randal k <<a href="rkohutek@gmail.com">rkohutek@gmail.com</a>> wrote:<BR>
Did anybody else see Denver Level3 service take a hit this morning? Our logs indicated nothing, but we saw various blackholing all over their network for ~20 minutes, starting around 9:15am MST.<BR>
<BR>
Everybody have a great day -<BR>
<FONT COLOR="#888888">Randal<BR>
</FONT><BR>
_______________________________________________<BR>
Outages mailing list<BR>
<a href="Outages@outages.org">Outages@outages.org</a><BR>
<a href="https://puck.nether.net/mailman/listinfo/outages">https://puck.nether.net/mailman/listinfo/outages</a><BR>
 <BR>
</SPAN></FONT><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><BR>
<HR ALIGN=CENTER SIZE="3" WIDTH="95%"></SPAN></FONT><FONT SIZE="2"><FONT FACE="Consolas, Courier New, Courier"><SPAN STYLE='font-size:10pt'>_______________________________________________<BR>
Outages mailing list<BR>
<a href="Outages@outages.org">Outages@outages.org</a><BR>
<a href="https://puck.nether.net/mailman/listinfo/outages">https://puck.nether.net/mailman/listinfo/outages</a><BR>
</SPAN></FONT></FONT></BLOCKQUOTE><FONT SIZE="2"><FONT FACE="Consolas, Courier New, Courier"><SPAN STYLE='font-size:10pt'><BR>
</SPAN></FONT></FONT><FONT FACE="Calibri, Verdana, Helvetica, Arial"><SPAN STYLE='font-size:11pt'><BR>
Bradley D. Bopp<BR>
Director Of  Engineering<BR>
<a href="http://www.nationalnet.com">http://www.nationalnet.com</a><BR>
<a href="http://as22384.peeringdb.net">http://as22384.peeringdb.net</a><BR>
<BR>
NationalNet is committed to the highest level of Customer Service available in the Web Hosting business.  If you have any questions, comments or concerns feel free to contact us at 678-247-7000 ext 1 (or toll-free, 888-4-NATNET).<BR>
 <BR>
</SPAN></FONT>
</BODY>
</HTML>