<div dir="ltr">Thanks Ryan, I´ll check it out<br></div><br><div class="gmail_quote"><div dir="ltr">Em seg, 3 de dez de 2018 às 15:22, Ryan Ratliff (rratliff) <<a href="mailto:rratliff@cisco.com">rratliff@cisco.com</a>> escreveu:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">



<div style="word-wrap:break-word;line-break:after-white-space">
There most certainly will be, but what it is depends on the hardware. It’s a server so there will be some type of management agent that has probably been trying to get somebody’s attention for a few weeks.
<div><br>
</div>
<div>I wouldn’t be surprised if there is a non-green led or two if you look at the disks themselves.</div>
<div><br>
<div>-Ryan </div>
<div><br>
<blockquote type="cite">
<div>On Dec 3, 2018, at 12:18 PM, Nilson Costa <<a href="mailto:nilsonlino@gmail.com" target="_blank">nilsonlino@gmail.com</a>> wrote:</div>
<br class="m_-1197814176377174798Apple-interchange-newline">
<div>
<div dir="ltr" style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<div>Is there anyway to troubleshoot the disks to see which one is on defect?</div>
<div><br>
</div>
<div>Regards<br>
</div>
</div>
<br style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<div class="gmail_quote" style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<div dir="ltr">Em seg, 3 de dez de 2018 às 15:08, Ryan Ratliff (rratliff) <<a href="mailto:rratliff@cisco.com" target="_blank">rratliff@cisco.com</a>> escreveu:<br>
</div>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-style:solid;border-left-color:rgb(204,204,204);padding-left:1ex">
<div style="word-wrap:break-word;line-break:after-white-space">
<div>
<blockquote type="cite">
<div>#1  0x044a9935 in raise () from /lib/tls/libc.so.6</div>
<div>#2  0x044ab399<font color="#ff2600"><span class="m_-1197814176377174798Apple-converted-space"> </span>in abort () f</font>rom /lib/tls/libc.so.6</div>
<div>#3  0x0842e457 in preabort () at ProcessCMProcMon.cpp:80</div>
<div>#4  0x0842fe7c in CMProcMon::verifySdlRouterServices () at ProcessCMProcMon.cpp:720</div>
</blockquote>
</div>
<div><br>
</div>
<div>The ccm process is killing itself because it isn’t getting enough resources.</div>
<br>
<blockquote type="cite">Nov 29 17:26:12 CMBL-03-01 local7 2 : 1: CMBL-03-01.localdomain: Nov 29 2018 19:26:12.340 UTC :  %UC_CALLMANAGER-2-CallManagerFailure: %[HostName=CMBL-03-01][IPAddress=192.168.183.3][Reason=4][<font color="#ff2600">Text=CCM
 Intentional Abort:</font><span class="m_-1197814176377174798Apple-converted-space"> </span>SignalName: SIPSetupInd, DestPID: SIPD[1:100:67:7]][AppID=Cisco CallManager][ClusterID=StandAloneCluster][NodeID=CMBL-03-01]: Indicates an internal failure in Unified CM</blockquote>
<div><br>
</div>
<div>So much good info in the syslog.</div>
<div>Here’s a super-useful tidbit.</div>
<div><br>
</div>
<div>
<blockquote type="cite">
<div>Nov 28 03:59:23 CMBL-03-01 local7 2 : 1543: CMBL-03-01.localdomain: Nov 28 2018 05:59:23.840 UTC :  %UC_RTMT-2-RTMT_ALERT: %[<font color="#ff2600">AlertName=CallProcessingNodeCpuPegging][AlertDetail= Processor load over configured threshold
 for configured duration of time .</font><span class="m_-1197814176377174798Apple-converted-space"> </span>Configured high threshold is 90 % tomcat (2 percent) uses most of the CPU.   </div>
<div> Processor_Info: </div>
<div>  </div>
<div> For processor instance 1: %CPU= 99, %User= 2, %System= 2, %Nice= 0, %Idle= 0,<span class="m_-1197814176377174798Apple-converted-space"> </span><font color="#ff2600">%IOWait= 97</font>, %softirq= 0, %irq= 0. </div>
<div>  </div>
<div> For processor instance _Total: %CPU= 93, %User= 2, %System= 1, %Nice= 0, %Idle= 7,<span class="m_-1197814176377174798Apple-converted-space"> </span><font color="#ff2600">%IOWait= 90,</font><span class="m_-1197814176377174798Apple-converted-space"> </span>%softirq= 0, %irq= 0. </div>
<div>  </div>
<div> For processor instance 0: %CPU= 86, %User= 2, %System= 1, %Nice= 0, %Idle= 14,<span class="m_-1197814176377174798Apple-converted-space"> </span><font color="#ff2600">%IOWait= 83</font>, %softirq= 0, %irq= 0. </div>
<div>  </div>
<div> For processor instance 3: %CPU= 87, %User= 2, %System= 2, %Nice= 0, %Idle= 13,<span class="m_-1197814176377174798Apple-converted-space"> </span><font color="#ff2600">%IOWait= 83,</font><span class="m_-1197814176377174798Apple-converted-space"> </span>%softirq= 0, %irq= 0. </div>
<div>  </div>
<div> For processor instance 2: %CPU= 99, %User= 4, %System= 1, %Nice= 0, %Idle= 0,<span class="m_-1197814176377174798Apple-converted-space"> </span><font color="#ff2600">%IOWait= 96</font>, %softirq= 0, %irq= 0. </div>
<div> ][AppID=Cisco AMC Service][ClusterID=][NodeID=CMBL-03-01]: RTMT Alert</div>
</blockquote>
<br>
</div>
<div>Looking back just a bit further, and there are a TON of these.</div>
<div><br>
</div>
<div>
<blockquote type="cite">Nov 15 21:22:00 CMBL-03-01 local7 2 : 582: CMBL-03-01.localdomain: Nov 15 2018 23:22:00.256 UTC :  %UC_RTMT-2-RTMT_ALERT: %[<font color="#ff2600">AlertName=HardwareFailure</font>][AlertDetail=     At Thu Nov 15 21:22:00
 BRST 2018 on node 192.168.183.3, the following HardwareFailure events generated:  hwStringMatch : Nov 15 21:21:26 CMBL-03-01 daemon 4 Director Agent:<span class="m_-1197814176377174798Apple-converted-space"> </span><font color="#ff2600">LSIESG_DiskDrive_Modified 500605B0027C6D50
 Command timeout on PD<span class="m_-1197814176377174798Apple-converted-space"> </span></font>01(e0xfc/s1) Path 500000e116ac4ce2, CDB: 2a 00 10 98 b9 9d 00 00 08 00 Sev: 3. AppID : Cisco Syslog Agent ClusterID :  NodeID : CMBL-03-01  TimeStamp : Thu Nov 15 21:21:26 BRST 2018  
 hwStringMatch : Nov 15 21:21:26 CMBL-03-01 daemon 4 Director Agent: LSIESG_AlertIndication 500605B0027C6D50 Command timeout on PD 01(e0xfc/s1) Path 500000e116ac4ce2, CDB: 2a 00 10 98 b9 9d 00 00 08 00 Sev: 3. AppID : Cisco Syslog Agent ClusterID :  NodeID
 : CMBL-03-01  TimeStamp : Thu Nov 15 21:21:27 BRST 2018   hwStringMatch : Nov 15 21:21:26 CMBL-03-01][AppID=Cisco AMC Service][ClusterID=][NodeID=CMBL-03-01]: RTMT Alert</blockquote>
</div>
<div><br>
</div>
<div>You’ve lost or are in the middle of losing at least one disk drive. It probably lost them all at the same time on the 13th and the OS marked the entire filesystem readonly. </div>
<div><br>
<div>-Ryan<span class="m_-1197814176377174798Apple-converted-space"> </span></div>
<div><br>
<blockquote type="cite">
<div>On Dec 3, 2018, at 9:28 AM, Nilson Costa <<a href="mailto:nilsonlino@gmail.com" target="_blank">nilsonlino@gmail.com</a>> wrote:</div>
<br class="m_-1197814176377174798m_5367405631049074372Apple-interchange-newline">
<div>
<div dir="ltr">
<div>Hello All,</div>
<div><br>
</div>
<div>I´m deploying a new CUCM on a customer that has an old one working just as call routing for a Genesys system for call center.</div>
<div><br>
</div>
<div>As you can see the picture below, they have some MGCP Gateways connected to this CUCM where the calls come in and via some CTI route points, controlled by Genesys, route the call to to 2 Avaya PBX or to a another CUCM<br>
</div>
<div><br>
</div>
<div>
<div>
<div><span id="m_-1197814176377174798m_5367405631049074372cid:ii_jp8eli1x1"><image.png></span><br>
</div>
</div>
</div>
<div>On november 13th they lost access to Tomcat on the Publisher, when we looked at the server several services were restarting including Cisco CallManager, just on the Publisher.</div>
<div>We decided to reboot the whole cluster, but after the reboot we are facing some wierd issues that are not that relevant, I think, but there is one which we are really worried</div>
<div><br>
</div>
<div>The Cisco CallManager process are still restarting ramdomly and generating some coredumps I´m attaching this logs here also I´m attaching the syslogs from the publisher.</div>
<div><br>
</div>
<div>Can anybody here on the group help me finding out what is triggering the Cisco CallManager restart?</div>
<div><br>
</div>
<div>--<span class="m_-1197814176377174798Apple-converted-space"> </span><br>
<div dir="ltr" class="m_-1197814176377174798m_5367405631049074372gmail_signature" data-smartmail="gmail_signature">
<div dir="ltr">Nilson Lino da Costa Junior<br>
</div>
</div>
</div>
</div>
<span id="m_-1197814176377174798m_5367405631049074372cid:f_jp8erze32"><coredump.txt></span><span id="m_-1197814176377174798m_5367405631049074372cid:f_jp8erzej3"><publiser-syslog-29-11.txt></span>_______________________________________________<br>
cisco-voip mailing list<br>
<a href="mailto:cisco-voip@puck.nether.net" target="_blank">cisco-voip@puck.nether.net</a><br>
<a href="https://puck.nether.net/mailman/listinfo/cisco-voip" target="_blank">https://puck.nether.net/mailman/listinfo/cisco-voip</a><br>
</div>
</blockquote>
</div>
<br>
</div>
</div>
</blockquote>
</div>
<br clear="all" style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<br style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<span style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none;float:none;display:inline!important">--<span class="m_-1197814176377174798Apple-converted-space"> </span></span><br style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<div dir="ltr" class="m_-1197814176377174798gmail_signature" data-smartmail="gmail_signature" style="font-family:ArialMT;font-size:14px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">
<div dir="ltr">Nilson Lino da Costa Junior</div>
</div>
</div>
</blockquote>
</div>
<br>
</div>
</div>

</blockquote></div><br clear="all"><br>-- <br><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr">Nilson Lino da Costa Junior<br></div></div>