<div dir="ltr">Thanks Team Cymru.  Thanks LONI - ASN 32440 for your work to discover the problem.<div><br></div><div>-bb</div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Tue, Jul 16, 2013 at 5:16 PM, Don Napier <span dir="ltr"><<a href="mailto:dnapier@cymru.com" target="_blank">dnapier@cymru.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class="im">-----BEGIN PGP SIGNED MESSAGE-----<br>
Hash: SHA1<br>
<br>
</div><div><div class="h5">On 7/16/13 1:29 PM, Don Napier wrote:<br>
><br>
><br>
> On 7/16/13 7:29 AM, Ben Bartsch wrote:<br>
>> FYI - got a call from a customer last night about a Xerox site<br>
>> unreachable through us.  Found the prefix coming from Cymru.<br>
>> Instructed our NOC to work with them to resolve.  Cymru first<br>
>> claimed they were not sending it because it was not a bogon.<br>
>> Once we proved it was coming from them, they woke somebody up at<br>
>> our request and found it listed as a 'bad route', whatever that<br>
>> means. Their workaround was to shut down the peering to us.<br>
><br>
>> Anybody else use Cymru and have this issue?  Our 2 peering<br>
>> addresses are 38.229.66.20 and 193.231.140.82<br>
><br>
>> Thanks.<br>
><br>
>> -ben<br>
><br>
> Hello Outages list!<br>
><br>
> We have identified a hardware problem associated with the full<br>
> bogons peering sessions that were taken offline roughly 12 hours<br>
> ago. The service has been disabled and at this time we do not have<br>
> an ETA on when service will be restored.<br>
><br>
> We will issue updates at approximately 8am, 12pm, and 5pm EST<br>
> until this outage is resolved.<br>
><br>
> For the finer details please read below.<br>
><br>
> 8pm EST 7/15/13, Team Cymru was notified of a couple problems with<br>
> our Bogon service. At this time we did not know the severity and<br>
> scope of the larger problem.<br>
><br>
> 11pm EST 7/15/13 the issue was escalated from Operations to<br>
> Engineering.<br>
><br>
> 1am EST 7/16/13, we confirmed the propagation of incorrect<br>
> prefixes. Workarounds failed to fully mitigate the issue, so all<br>
> sessions were disabled. This ceased the propagation of incorrect<br>
> prefixes.<br>
><br>
> ~2am EST 7/16/13, we sent out notices to everyone we have current<br>
> contact details on regarding the outage.<br>
><br>
> 12:15pm EST 7/16/13, we are working on replacing / reconfiguring<br>
> hardware to resolve this outage.<br>
><br>
> On behalf of Team Cymru, I would like to apologize for this outage.<br>
> we are actively working on getting the Bogons back online for<br>
> distribution.<br>
><br>
> In the interim, we are having listing updates periodically, it is<br>
> located here:<br>
><br>
> <a href="https://www.team-cymru.org/Services/Bogons/" target="_blank">https://www.team-cymru.org/Services/Bogons/</a><br>
><br>
> For those who are using our service, thank you! Be assured we are<br>
> working towards resolution.<br>
><br>
> Sincerely,<br>
><br>
> Don Napier Team Cymru Research NFP<br>
<br>
</div></div>Hello Outages,<br>
<br>
Service was restored tonight at about EST 530PM 7/16/13.  We replaced<br>
the faulty hardware (a router in this case) at our data center.  The<br>
Bogon feeds should be flowing properly now.<br>
<br>
In the future, status of the Bogon Reference Project will be listed at:<br>
<br>
<a href="https://www.team-cymru.org/Services/Bogons/index.html" target="_blank">https://www.team-cymru.org/Services/Bogons/index.html</a><br>
<br>
Thanks you for your patience,<br>
<div class="im"><br>
Don Napier<br>
Team Cymru Research NFP<br>
-----BEGIN PGP SIGNATURE-----<br>
Version: GnuPG/MacGPG2 v2.0.18 (Darwin)<br>
Comment: GPGTools - <a href="http://gpgtools.org" target="_blank">http://gpgtools.org</a><br>
<br>
</div>iQEcBAEBAgAGBQJR5cZWAAoJEKgi/9FGk+IZhQ4IAJmdfHYkGyFq/pCLRpd29fFu<br>
knSeZ13/5TWPMpE1kiXFJv+rtkIFVcI0855nW8XpE6f5c7VvI+6NqMw1HXcY5twD<br>
6gnD0rUAwesFTpTMk36iU0+REsKWCsXuItCjMtKr7S3kLNjSQ8ymwRSeh+Fbgqp6<br>
TYqyhjOwHsuFboII4iy18cg3Y4Gi1hP+sWOhTTSkvEEBxAQTM6xs0ENKXbPAsHkY<br>
6tf/R31fREpg0HUcpUewYBv5jYrfUV2/e0Brr9ACkExhb9JxA3vNqBW8y+RXW7yu<br>
66Om3LkD/4f3Wud04GohQRvr+vFe8cwK5ePTlSDX/S+kE677ItWaHLhwFyix/QI=<br>
=7QMB<br>
-----END PGP SIGNATURE-----<br>
</blockquote></div><br></div>