<html><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; ">In addition to what Wes said Scott, I just want to add that this alert is a pretty important especially when it remains active for an extended period of time. Here is some more background on how the alert works;<div><br></div><div>The alert relies on Database Layer Monitor (DBMON) being up running and in short summary it is designed to proactively warn customers of Database Change Notify issues which could lead to critical failures if left undetected. Dbmon is responsible for setting a Performance counter named&nbsp;\DB Change
Notification Server\QueueDelay. This counter starts to increment and counts the seconds since the last time a Change Notify Message was processed. Basically if the system due to the example reasons Wes gave stops to process Change Notify messages we start to count. The counter value is in seconds. If the count reaches 2 min we raise this Alert. The alert is raised once every 30 min by default.</div><div><br></div><div>During heavy utilization or as you have experienced an application crashes this alert can be raised but you may not need to take any immediate action. If the you see the alert getting raised persistently then I would start to worry about things and inspect the Platform CLI output "show tech notify". If you have RTMT alert central up this Alert's In Safe range field can tell you if the system have started to process Change Notify Messages again.</div><div><br></div><div>Hope this helps further understand this Alert,</div><div><br><div> <span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0; "><div style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; "><div style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div><span class="Apple-style-span" style="font-family: Verdana; "><span style="font-size: 12px; ">--&nbsp;<br><font color="#0000ff"><b>Baha Akman<br></b></font><br></span><font size="2"><span style="font-size: 10px; ">Software Q/A Engineer<br>Cisco Systems, Inc.<br>(919) 991-5628<br><a href="mailto:baha@cisco.com">baha@cisco.com</a></span></font></span></div></div></span></div></span> </div><br><div><div>On Feb 9, 2009, at 4:36 PM, Voll, Scott wrote:</div><br class="Apple-interchange-newline"><blockquote type="cite"><span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0; "><div bgcolor="white" lang="EN-US" link="blue" vlink="purple"><div class="Section1"><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">I’m guessing then it had to do with MWI / AD / Exchange/ Unity.&nbsp; We had some issues that just got resolved.<o:p></o:p></span></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); "><o:p>&nbsp;</o:p></span></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">Thanks Wes,<o:p></o:p></span></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); "><o:p>&nbsp;</o:p></span></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">Scott<o:p></o:p></span></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); "><o:p>&nbsp;</o:p></span></div><div><div style="border-right-style: none; border-bottom-style: none; border-left-style: none; border-width: initial; border-color: initial; border-top-style: solid; border-top-color: rgb(181, 196, 223); border-top-width: 1pt; padding-top: 3pt; padding-right: 0in; padding-bottom: 0in; padding-left: 0in; "><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><b><span style="font-size: 10pt; font-family: Tahoma, sans-serif; color: windowtext; ">From:</span></b><span style="font-size: 10pt; font-family: Tahoma, sans-serif; color: windowtext; "><span class="Apple-converted-space">&nbsp;</span>Wes Sisk [<a href="mailto:wsisk@cisco.com" style="color: blue; text-decoration: underline; ">mailto:wsisk@cisco.com</a>]<span class="Apple-converted-space">&nbsp;</span><br><b>Sent:</b><span class="Apple-converted-space">&nbsp;</span>Monday, February 09, 2009 1:29 PM<br><b>To:</b><span class="Apple-converted-space">&nbsp;</span>Voll, Scott<br><b>Cc:</b><span class="Apple-converted-space">&nbsp;</span>Cisco VoIPoE List<br><b>Subject:</b><span class="Apple-converted-space">&nbsp;</span>Re: [cisco-voip] [RTMT-ALERT-CMPUB-Cluster] DBChangeNotifyFailure<o:p></o:p></span></div></div></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><o:p>&nbsp;</o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; ">If you use Extension Mobility or stare at MWI then DB change delayed is a concern. That means your EM login or Red light will be delayed.<br><br>What can cause it?<br>Clustering over the WAN<br>Processes restarting (changes are held until timeout or process consumes off the queue again)<br>High number of change notifications (MWI refresh, AD User Sync)<br><br>/Wes<br><br>On Monday, February 09, 2009 3:37:50 PM, Voll, Scott<span class="Apple-converted-space">&nbsp;</span><a href="mailto:Scott.Voll@wesd.org" style="color: blue; text-decoration: underline; ">&lt;Scott.Voll@wesd.org></a><span class="Apple-converted-space">&nbsp;</span>wrote:<br><br><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">What would cause the DB change to be delayed?&nbsp; &nbsp;&nbsp;Something to worry about or not?&nbsp; CM 6.1.2.1106</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">&nbsp;</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">I’ve only received one or two of these.</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">&nbsp;</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">Thanks</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">&nbsp;</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="color: rgb(31, 73, 125); ">Scott</span><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><b><span style="font-size: 10pt; font-family: Tahoma, sans-serif; ">&nbsp;</span></b><o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><b><span style="font-size: 10pt; font-family: Tahoma, sans-serif; ">&nbsp;</span></b><o:p></o:p></div><div style="border-right-style: none; border-bottom-style: none; border-left-style: none; border-width: initial; border-color: initial; border-top-style: solid; border-top-color: windowtext; border-top-width: 1pt; padding-top: 3pt; padding-right: 0in; padding-bottom: 0in; padding-left: 0in; "><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><b><span style="font-size: 10pt; font-family: Tahoma, sans-serif; ">Subject:</span></b><span style="font-size: 10pt; font-family: Tahoma, sans-serif; "><span class="Apple-converted-space">&nbsp;</span>[RTMT-ALERT-CMPUB-Cluster] DBChangeNotifyFailure</span><o:p></o:p></div></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; ">&nbsp;<o:p></o:p></div><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="font-size: 12pt; font-family: 'Times New Roman', serif; ">DBChangeNotify queue delay over 2 minutes. Current DB ChangeNotify queue delay (135) is over 120-sec threshold. The alert is generated on Mon Feb 09 10:20:34 PST 2009 on node 10.200.102.20.</span><o:p></o:p></div><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; "><o:p>&nbsp;</o:p></pre><pre style="text-align: center; margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; "><hr size="4" width="90%" align="center">

</pre><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; "><o:p>&nbsp;</o:p></pre><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; ">_______________________________________________<o:p></o:p></pre><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; ">cisco-voip mailing list<o:p></o:p></pre><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; "><a href="mailto:cisco-voip@puck.nether.net" style="color: blue; text-decoration: underline; ">cisco-voip@puck.nether.net</a><o:p></o:p></pre><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; "><a href="https://puck.nether.net/mailman/listinfo/cisco-voip" style="color: blue; text-decoration: underline; ">https://puck.nether.net/mailman/listinfo/cisco-voip</a><o:p></o:p></pre><pre style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 10pt; font-family: 'Courier New'; color: black; ">&nbsp; <o:p></o:p></pre><div style="margin-top: 0in; margin-right: 0in; margin-left: 0in; margin-bottom: 0.0001pt; font-size: 11pt; font-family: Calibri, sans-serif; color: black; "><span style="font-size: 12pt; font-family: 'Times New Roman', serif; "><o:p>&nbsp;</o:p></span></div></div>_______________________________________________<br>cisco-voip mailing list<br><a href="mailto:cisco-voip@puck.nether.net" style="color: blue; text-decoration: underline; ">cisco-voip@puck.nether.net</a><br><a href="https://puck.nether.net/mailman/listinfo/cisco-voip" style="color: blue; text-decoration: underline; ">https://puck.nether.net/mailman/listinfo/cisco-voip</a><br></div></span></blockquote></div><br></div></body></html>