<div dir="ltr">Google is aware this has recurred over the last 3 days and we are digging into it. <div><br></div><div>If you happen to have crisper start-stop times than ~09:20-09:50 EST for any of the last three days, that might well help us narrow it down.</div><div><div>Thanks to those who have come via <a href="mailto:noc@google.com">noc@google.com</a> (our master ticket: b/176930179).<br></div><div></div></div><div><div><br></div><div>Phil Sykes</div></div><div>(day job: Google Networking SRE)</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Jan 6, 2021 at 2:55 PM mike tancsa via Outages <<a href="mailto:outages@outages.org">outages@outages.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Seems to be sporadic.  When trying to resolve via <a href="http://ns2.google.com" rel="noreferrer" target="_blank">ns2.google.com</a> which I<br>
see as<br>
<br>
% host <a href="http://ns2.google.com" rel="noreferrer" target="_blank">ns2.google.com</a>.<br>
<a href="http://ns2.google.com" rel="noreferrer" target="_blank">ns2.google.com</a> has address 216.239.34.10<br>
<br>
and I see via me-gtt-google ( 3257 15169)<br>
<br>
% traceroute -n -q1 -I 216.239.38.10<br>
traceroute to 216.239.38.10 (216.239.38.10), 64 hops max, 48 byte packets<br>
 1  67.43.128.6  8.145 ms<br>
 2  205.211.164.33  7.990 ms<br>
 3  67.43.129.247  42.967 ms<br>
 4  69.174.3.205  31.794 ms<br>
 5  74.125.147.196  30.198 ms<br>
 6  74.125.244.146  41.023 ms<br>
 7  172.253.64.254  59.708 ms<br>
 8  72.14.232.70  41.107 ms<br>
 9  *<br>
10  108.170.225.193  61.710 ms<br>
11  *<br>
12  *<br>
13  *<br>
<br>
I am getting timeouts or very slow responses<br>
<br>
% date;host <a href="http://www.gmail.com" rel="noreferrer" target="_blank">www.gmail.com</a> 216.239.38.10;date<br>
Wed Jan  6 09:44:17 EST 2021<br>
;; connection timed out; no servers could be reached<br>
Wed Jan  6 09:44:27 EST 2021<br>
%<br>
<br>
I dont think its packet loss  /  a transport issue<br>
<br>
% ping -q -i.1 -c 10 216.239.34.10<br>
PING 216.239.34.10 (216.239.34.10): 56 data bytes<br>
<br>
--- 216.239.34.10 ping statistics ---<br>
10 packets transmitted, 10 packets received, 0.0% packet loss<br>
round-trip min/avg/max/stddev = 33.021/60.500/93.991/16.585 ms<br>
<br>
However, routing is asymmetric as its coming back via Torix in Toronto,<br>
Canada.<br>
<br>
But I dont see any packet loss on the pings.<br>
<br>
    ---Mike<br>
<br>
On 1/6/2021 9:35 AM, mike tancsa via Outages wrote:<br>
> It seems to be resolved (excuse the pun), but I was getting DNS timeouts<br>
> on various google domains just now.  downforme,<br>
> <a href="https://downdetector.ca/status/gmail/" rel="noreferrer" target="_blank">https://downdetector.ca/status/gmail/</a> etc all noted it too so it didnt<br>
> seem specific to my ASN.  By the time I got a pcap going, it seemed to<br>
> be back to normal<br>
><br>
>     ---Mike<br>
><br>
><br>
> _______________________________________________<br>
> Outages mailing list<br>
> <a href="mailto:Outages@outages.org" target="_blank">Outages@outages.org</a><br>
> <a href="https://puck.nether.net/mailman/listinfo/outages" rel="noreferrer" target="_blank">https://puck.nether.net/mailman/listinfo/outages</a><br>
><br>
<br>
_______________________________________________<br>
Outages mailing list<br>
<a href="mailto:Outages@outages.org" target="_blank">Outages@outages.org</a><br>
<a href="https://puck.nether.net/mailman/listinfo/outages" rel="noreferrer" target="_blank">https://puck.nether.net/mailman/listinfo/outages</a><br>
</blockquote></div>