<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">
<html>
<head>
  <meta content="text/html;charset=ISO-8859-1" http-equiv="Content-Type">
</head>
<body bgcolor="#ffffff" text="#000000">
Hi Chris,<br>
<br>
In general all crashes are a result of a defect.  There are a few
exceptions such as intentional aborts (code red, cpu starvation, etc..).<br>
<br>
Given that we know to search for product defects.  Cisco provide
BugToolkit for that purpose.  BugToolkit displays the defect headline
and Release-note.  The information provided there is of varying
quality, but it is a starting point.<br>
<br>
Then it's just semantics:<br>
1. login to bug toolkit<br>
2. select your product (communications manager)<br>
3. select your version or leave it as ANY<br>
4. enter your keyword search - CQBE_Parser::qbeGet is the last "cisco"
function. functions after that (libcs*) are linux core libraries.<br>
5. click search and wait. BugToolkit isn't the fastest.  But in this
instance it does successfully find CSCso02381.<br>
<br>
This is a typical fist step for troubleshooting any crash.  If the
output is fruitful then you're done.  You may change the search
criteria some, such as version string or check similar products.  After
that the next step would be careful inspection of any traces produced
by the process leading up to the crash.<br>
<br>
/Wes<br>
<br>
Lewis, Chris wrote:
<blockquote
 style="border: medium none  ! important; padding-left: 0px ! important; padding-right: 0px ! important; margin-left: 0px ! important; margin-right: 0px ! important;"
 cite="mid:6F86181EE7C6F94F9360249562D85BAB37C280359A@EVPRODEXCH02.magnetar.com"
 type="cite">
  <meta http-equiv="Content-Type" content="text/html; ">
  <meta name="ProgId" content="Word.Document">
  <meta name="Generator" content="Microsoft Word 12">
  <meta name="Originator" content="Microsoft Word 12">
  <link rel="File-List" href="cid:filelist.xml@01CB86FE.702996A0">
  <link rel="Edit-Time-Data" href="cid:editdata.mso">
<!--[if !mso]>
<style>
v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style>
<![endif]--><!--[if gte mso 9]><xml>
 <o:OfficeDocumentSettings>
  <o:AllowPNG/>
  <o:DoNotRelyOnCSS/>
  <o:TargetScreenSize>1024x768</o:TargetScreenSize>
 </o:OfficeDocumentSettings>
</xml><![endif]--><!--[if gte mso 9]><xml>
 <w:WordDocument>
  <w:Zoom>110</w:Zoom>
  <w:TrackMoves/>
  <w:TrackFormatting/>
  <w:EnvelopeVis/>
  <w:ValidateAgainstSchemas/>
  <w:SaveIfXMLInvalid>false</w:SaveIfXMLInvalid>
  <w:IgnoreMixedContent>false</w:IgnoreMixedContent>
  <w:AlwaysShowPlaceholderText>false</w:AlwaysShowPlaceholderText>
  <w:DoNotPromoteQF/>
  <w:LidThemeOther>EN-GB</w:LidThemeOther>
  <w:LidThemeAsian>X-NONE</w:LidThemeAsian>
  <w:LidThemeComplexScript>X-NONE</w:LidThemeComplexScript>
  <w:Compatibility>
   <w:DoNotExpandShiftReturn/>
   <w:BreakWrappedTables/>
   <w:SplitPgBreakAndParaMark/>
   <w:Don
tVertAlignCellWithSp/>
   <w:DontBreakConstrainedForcedTables/>
   <w:DontVertAlignInTxbx/>
   <w:Word11KerningPairs/>
   <w:CachedColBalance/>
  </w:Compatibility>
  <w:BrowserLevel>MicrosoftInternetExplorer4</w:BrowserLevel>
  <m:mathPr>
   <m:mathFont m:val="Cambria Math"/>
   <m:brkBin m:val="before"/>
   <m:brkBinSub m:val="--"/>
   <m:smallFrac m:val="off"/>
   <m:dispDef/>
   <m:lMargin m:val="0"/>
   <m:rMargin m:val="0"/>
   <m:defJc m:val="centerGroup"/>
   <m:wrapIndent m:val="1440"/>
   <m:intLim m:val="subSup"/>
   <m:naryLim m:val="undOvr"/>
  </m:mathPr></w:WordDocument>
</xml><![endif]--><!--[if gte mso 9]><xml>
 <w:LatentStyles DefLockedState="false" DefUnhideWhenUsed="true" 
  DefSemiHidden="true" DefQFormat="false" DefPriority="99" 
  LatentStyleCount="267">
  <w:LsdException Locked="false" Priority="0" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Normal"/>
  <w:LsdException Locked="false" Priority="9" SemiHidden="false" 
   Unhide
WhenUsed="false" QFormat="true" Name="heading 1"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 2"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 3"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 4"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 5"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 6"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 7"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 8"/>
  <w:LsdException Locked="false" Priority="9" QFormat="true" Name="heading 9"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 1"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 2"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 3"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 4"/>
  <w:LsdException Locked="false" Priority="39" Name
="toc 5"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 6"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 7"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 8"/>
  <w:LsdException Locked="false" Priority="39" Name="toc 9"/>
  <w:LsdException Locked="false" Priority="35" QFormat="true" Name="caption"/>
  <w:LsdException Locked="false" Priority="10" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Title"/>
  <w:LsdException Locked="false" Priority="1" Name="Default Paragraph Font"/>
  <w:LsdException Locked="false" Priority="11" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Subtitle"/>
  <w:LsdException Locked="false" Priority="22" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Strong"/>
  <w:LsdException Locked="false" Priority="20" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Emphasis"/>
  <w:LsdException Locked="false" Priority="59" SemiHidden="false" 
   Unhid
eWhenUsed="false" Name="Table Grid"/>
  <w:LsdException Locked="false" UnhideWhenUsed="false" Name="Placeholder Text"/>
  <w:LsdException Locked="false" Priority="1" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="No Spacing"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shading"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Grid"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 2"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1"/>
  <w:LsdException Locked="false" Priority="66" 
SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 2"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 2"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Dark List"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful List"/>
  <w:LsdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shadi
ng Accent 1"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List Accent 1"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Grid Accent 1"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1 Accent 1"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 2 Accent 1"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1 Accent 1"/>
  <w:LsdException Locked="false" UnhideWhenUsed="false" Name="Revision"/>
  <w:LsdException Locked="false" Priority="34" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="List Paragraph"/>
  <w:LsdException Locked="false" Priority="29" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Quote"/>
  <w:LsdException Loc
ked="false" Priority="30" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Intense Quote"/>
  <w:LsdException Locked="false" Priority="66" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 2 Accent 1"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1 Accent 1"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 2 Accent 1"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3 Accent 1"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Dark List Accent 1"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading Accent 1"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful List Accent 1"/>
  <w:L
sdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid Accent 1"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shading Accent 2"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List Accent 2"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Grid Accent 2"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1 Accent 2"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 2 Accent 2"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1 Accent 2"/>
  <w:LsdException Locked="false" Priority="66" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 2 Accent 2
"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1 Accent 2"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 2 Accent 2"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3 Accent 2"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Dark List Accent 2"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading Accent 2"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful List Accent 2"/>
  <w:LsdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid Accent 2"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shading
 Accent 3"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List Accent 3"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Grid Accent 3"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1 Accent 3"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 2 Accent 3"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1 Accent 3"/>
  <w:LsdException Locked="false" Priority="66" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 2 Accent 3"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1 Accent 3"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Med
ium Grid 2 Accent 3"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3 Accent 3"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Dark List Accent 3"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading Accent 3"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful List Accent 3"/>
  <w:LsdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid Accent 3"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shading Accent 4"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List Accent 4"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Nam
e="Light Grid Accent 4"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1 Accent 4"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 2 Accent 4"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1 Accent 4"/>
  <w:LsdException Locked="false" Priority="66" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 2 Accent 4"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1 Accent 4"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 2 Accent 4"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3 Accent 4"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUse
d="false" Name="Dark List Accent 4"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading Accent 4"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful List Accent 4"/>
  <w:LsdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid Accent 4"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shading Accent 5"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List Accent 5"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Grid Accent 5"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1 Accent 5"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideW
henUsed="false" Name="Medium Shading 2 Accent 5"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1 Accent 5"/>
  <w:LsdException Locked="false" Priority="66" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 2 Accent 5"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1 Accent 5"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 2 Accent 5"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3 Accent 5"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Dark List Accent 5"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading Accent 5"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false"
 
   UnhideWhenUsed="false" Name="Colorful List Accent 5"/>
  <w:LsdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid Accent 5"/>
  <w:LsdException Locked="false" Priority="60" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Shading Accent 6"/>
  <w:LsdException Locked="false" Priority="61" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light List Accent 6"/>
  <w:LsdException Locked="false" Priority="62" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Light Grid Accent 6"/>
  <w:LsdException Locked="false" Priority="63" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 1 Accent 6"/>
  <w:LsdException Locked="false" Priority="64" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Shading 2 Accent 6"/>
  <w:LsdException Locked="false" Priority="65" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium List 1 Accent 6"/>
  <w:LsdException Locked="false" Priority="66" SemiHidd
en="false" 
   UnhideWhenUsed="false" Name="Medium List 2 Accent 6"/>
  <w:LsdException Locked="false" Priority="67" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 1 Accent 6"/>
  <w:LsdException Locked="false" Priority="68" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 2 Accent 6"/>
  <w:LsdException Locked="false" Priority="69" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Medium Grid 3 Accent 6"/>
  <w:LsdException Locked="false" Priority="70" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Dark List Accent 6"/>
  <w:LsdException Locked="false" Priority="71" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Shading Accent 6"/>
  <w:LsdException Locked="false" Priority="72" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful List Accent 6"/>
  <w:LsdException Locked="false" Priority="73" SemiHidden="false" 
   UnhideWhenUsed="false" Name="Colorful Grid Accent 6"/>
  <w:LsdException Locked="false" Priority="19"
 SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Subtle Emphasis"/>
  <w:LsdException Locked="false" Priority="21" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Intense Emphasis"/>
  <w:LsdException Locked="false" Priority="31" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Subtle Reference"/>
  <w:LsdException Locked="false" Priority="32" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Intense Reference"/>
  <w:LsdException Locked="false" Priority="33" SemiHidden="false" 
   UnhideWhenUsed="false" QFormat="true" Name="Book Title"/>
  <w:LsdException Locked="false" Priority="37" Name="Bibliography"/>
  <w:LsdException Locked="false" Priority="39" QFormat="true" Name="TOC Heading"/>
 </w:LatentStyles>
</xml><![endif]-->
  <style>
<!--
 /* Font Definitions */
 @font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;
        mso-font-alt:"Calisto MT";
        mso-font-charset:0;
        mso-generic-font-family:roman;
        mso-font-pitch:variable;
        mso-font-signature:-1610611985 1107304683 0 0 415 0;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;
        mso-font-alt:"Century Gothic";
        mso-font-charset:0;
        mso-generic-font-family:swiss;
        mso-font-pitch:variable;
        mso-font-signature:-520092929 1073786111 9 0 415 0;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;
        mso-font-alt:Arial;
        mso-font-charset:0;
        mso-generic-font-family:swiss;
        mso-font-pitch:variable;
        mso-font-signature:-520081665 -1073717157 41 0 66047 0;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;
        mso-font-charset:0;
        mso-generic-font-family:modern;
        mso-font-pitch:fixed;
        mso-font-signature:-520092929 1073806591 9 0 415 0;}
 /* Style Definitions */
 p.MsoNormal, li.MsoNormal, div.MsoNormal
        {mso-style-unhide:no;
        mso-style-qformat:yes;
        mso-style-parent:"";
        margin:0cm;
        margin-bottom:.0001pt;
        mso-pagination:widow-orphan;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        mso-fareast-font-family:Calibri;
        color:black;}
a:link, span.MsoHyperlink
        {mso-style-noshow:yes;
        mso-style-priority:99;
        color:blue;
        text-decoration:underline;
        text-underline:single;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-noshow:yes;
        mso-style-priority:99;
        color:purple;
        text-decoration:underline;
        text-underline:single;}
pre
        {mso-style-noshow:yes;
        mso-style-priority:99;
        mso-style-link:"HTML Preformatted Char";
        margin:0cm;
        margin-bottom:.0001pt;
        mso-pagination:widow-orphan;
        font-size:10.0pt;
        font-family:"Courier New";
        mso-fareast-font-family:Calibri;
        color:black;}
span.HTMLPreformattedChar
        {mso-style-name:"HTML Preformatted Char";
        mso-style-noshow:yes;
        mso-style-priority:99;
        mso-style-unhide:no;
        mso-style-locked:yes;
        mso-style-link:"HTML Preformatted";
        font-family:Consolas;
        mso-ascii-font-family:Consolas;
        mso-hansi-font-family:Consolas;
        mso-bidi-font-family:Consolas;
        color:black;}
span.EmailStyle19
        {mso-style-type:personal;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:Calibri;
        color:#1F497D;}
span.EmailStyle20
        {mso-style-type:personal;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:Calibri;
        color:#1F497D;}
span.EmailStyle21
        {mso-style-type:personal;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:Calibri;
        color:#1F497D;}
span.EmailStyle22
        {mso-style-type:personal;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:Calibri;
        color:#1F497D;}
span.EmailStyle23
        {mso-style-type:personal;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        mso-ansi-font-size:11.0pt;
        mso-bidi-font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-fareast-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:"Times New Roman";
        color:#1F497D;}
span.EmailStyle24
        {mso-style-type:personal;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        mso-ansi-font-size:11.0pt;
        mso-bidi-font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-fareast-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:"Times New Roman";
        color:#1F497D;}
span.EmailStyle25
        {mso-style-type:personal-reply;
        mso-style-noshow:yes;
        mso-style-unhide:no;
        mso-ansi-font-size:11.0pt;
        mso-bidi-font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        mso-ascii-font-family:Calibri;
        mso-fareast-font-family:Calibri;
        mso-hansi-font-family:Calibri;
        mso-bidi-font-family:"Times New Roman";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        mso-default-props:yes;
        font-size:10.0pt;
        mso-ansi-font-size:10.0pt;
        mso-bidi-font-size:10.0pt;}
@page Section1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;
        mso-header-margin:36.0pt;
        mso-footer-margin:36.0pt;
        mso-paper-source:0;}
div.Section1
        {page:Section1;}
-->
  </style><!--[if gte mso 10]>
<style>
 /* Style Definitions */ 
 table.MsoNormalTable
        {mso-style-name:"Table Normal";
        mso-tstyle-rowband-size:0;
        mso-tstyle-colband-size:0;
        mso-style-noshow:yes;
        mso-style-priority:99;
        mso-style-qformat:yes;
        mso-style-parent:"";
        mso-padding-alt:0cm 5.4pt 0cm 5.4pt;
        mso-para-margin:0cm;
        mso-para-margin-bottom:.0001pt;
        mso-pagination:widow-orphan;
        font-size:10.0pt;
        font-family:"Times New Roman","serif";}
</style>
<![endif]--><!--[if gte mso 9]><xml>
 <o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
 <o:shapelayout v:ext="edit">
  <o:idmap v:ext="edit" data="1" />
 </o:shapelayout></xml><![endif]-->
  <div class="Section1">
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Thanks Wes.<o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"><o:p> </o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">I am on 6.1.4.2190-3<o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"><o:p> </o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">How did you search
for the BugID<span style="">  </span>from that?<o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"><o:p> </o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">If you don’t know
the Bug exists in the first place how do
you know where to search?<span style="">  </span><o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"><o:p> </o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Chris<o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"><o:p> </o:p></span></font></p>
  <div>
  <div
 style="border-style: solid none none; border-color: rgb(181, 196, 223) -moz-use-text-color -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext; font-weight: bold;"
 lang="EN-US">From:</span></font></b><font color="black" face="Tahoma"
 size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext;"
 lang="EN-US"> Wes Sisk [<a class="moz-txt-link-freetext" href="mailto:wsisk@cisco.com">mailto:wsisk@cisco.com</a>] <br>
  <b><span style="font-weight: bold;">Sent:</span></b> 17 November 2010
19:48<br>
  <b><span style="font-weight: bold;">To:</span></b> Lewis, Chris<br>
  <b><span style="font-weight: bold;">Cc:</span></b>
<a class="moz-txt-link-abbreviated" href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a><br>
  <b><span style="font-weight: bold;">Subject:</span></b> Re:
[cisco-voip] FW: FW:
FW: [RTMT-ALERT-CMPUB-Cluster] CoreDumpFileFound<o:p></o:p></span></font></p>
  </div>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"><o:p> </o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;">What version
are you on?<br>
  <br>
Core dumps are read from bottom to top.<br>
  <br>
receiveLoop..qbeGet exactly matches the backtrace in the Release-note
of
CSCso02381 that is visible in Cisco Bug Toolkit.  That looks like a
good
starting point.<br>
  <br>
/Wes<br>
  <br>
Lewis, Chris wrote: <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">As per Wes below,
can anyone shed some
light on how to work out the backtrace results:</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">This is what I had
on one of my nodes
today:</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">backtrace</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> ===================================</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> #0  0x00362a92 in
strncpy ()
from /lib/tls/libc.so.6</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#1  0x00a2cf38 in
OK_BOD_strncpy ()
from /lib/csa/libcsa.so.6</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#2  0x00a2a570 in
strncpy () from
/lib/csa/libcsa.so.6</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#3  0x080b272b in
CQBE_Parser::qbeGet (pMsgBuf_=0x14ffe000, pParsedMsg_=0x14fed5ec,
pQbeString_=0x2e312e36, pNextOffset_=0x14fed46c) at qbeparser.cpp:410</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#4  0x080b4e06 in
CTIQBE::ProviderOpenCompletedEvent::qbeGet (this=0x80b272b,
pMsgBuf_=0x14ff15c0, pNextOffset_=0x14fed46c) at qbeparser.cpp:2847</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#5  0x080b94cc in
CQBE_Parser::qbeParse (this=0x14ff15a0, pInputMsg_=0x14ff15c0,
inputMsgLength_=89, pParsedMsg_=0x14fed5a0, parsedMsgBufferSize_=16384)
at
qbeparser.cpp:5558</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#6  0x08095261 in
CCtiInterface::receiveLoop (this=0x0) at ctireceiver.cpp:428</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#7  0x00000000 in ??
()</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">CHris</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <div>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext; font-weight: bold;"
 lang="EN-US">From:</span></font></b><font color="black" face="Tahoma"
 size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext;"
 lang="EN-US"> Wes Sisk [<a moz-do-not-send="true"
 href="mailto:wsisk@cisco.com">mailto:wsisk@cisco.com</a>] <br>
  <b><span style="font-weight: bold;">Sent:</span></b> 17 November 2010
16:01<br>
  <b><span style="font-weight: bold;">To:</span></b> Lewis, Chris<br>
  <b><span style="font-weight: bold;">Cc:</span></b> <a
 moz-do-not-send="true" href="mailto:Scott.Voll@wesd.org">Scott.Voll@wesd.org</a><br>
  <b><span style="font-weight: bold;">Subject:</span></b> Re: FW:
[cisco-voip] FW:
[RTMT-ALERT-CMPUB-Cluster] CoreDumpFileFound</span></font><o:p></o:p></p>
  </div>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"> <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;">Hi Chris,<br>
  <br>
Please post this to cisco-voip list or the Cisco Support Community. 
It's
best to discuss in open forum so all can contribute and benefit.<br>
  <br>
/Wes<br>
  <br>
Lewis, Chris wrote: <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Hi Scott/Wes,</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">How did you work out
the
backtrace?  I have a similar issue and was wondering how you knew it
was
that specific Bug?</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Chris</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <div>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext; font-weight: bold;"
 lang="EN-US">From:</span></font></b><font color="black" face="Tahoma"
 size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext;"
 lang="EN-US"> <a moz-do-not-send="true"
 href="mailto:cisco-voip-bounces@puck.nether.net">cisco-voip-bounces@puck.nether.net</a>
[<a moz-do-not-send="true"
 href="mailto:cisco-voip-bounces@puck.nether.net">mailto:cisco-voip-bounces@puck.nether.net</a>]
  <b><span style="font-weight: bold;">On Behalf Of </span></b>Wes Sisk<br>
  <b><span style="font-weight: bold;">Sent:</span></b> 27 January 2010
19:40<br>
  <b><span style="font-weight: bold;">To:</span></b> Voll, Scott<br>
  <b><span style="font-weight: bold;">Cc:</span></b> Cisco VoIP (<a
 moz-do-not-send="true" href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a>)<br>
  <b><span style="font-weight: bold;">Subject:</span></b> Re:
[cisco-voip] FW:
[RTMT-ALERT-CMPUB-Cluster] CoreDumpFileFound</span></font><o:p></o:p></p>
  </div>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"> <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;">RTMT check boxes:<br>
trace and log central<br>
collect files<br>
"select ccm services/applications" -> cisco extended functions,
cisco extended functions report<br>
"select system services/applications" -> cisco corefile recovery
tool<br>
  <br>
/Wes<br>
  <br>
On Wednesday, January 27, 2010 2:17:24 PM, Voll, Scott <a
 moz-do-not-send="true" href="mailto:Scott.Voll@wesd.org"><Scott.Voll@wesd.org></a>
wrote:<br style="">
<!--[if !supportLineBreakNewLine]--><br style="">
<!--[endif]--><o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Wes—</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">I feel like a dip
shmoe for
asking…. But how do I get the:</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Core files and CEF
traces?</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Scott</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <div>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext; font-weight: bold;">From:</span></font></b><font
 color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext;">
Wes Sisk [<a moz-do-not-send="true" href="mailto:wsisk@cisco.com">mailto:wsisk@cisco.com</a>]
  <br>
  <b><span style="font-weight: bold;">Sent:</span></b> Wednesday,
January 27, 2010
11:00 AM<br>
  <b><span style="font-weight: bold;">To:</span></b> Voll, Scott<br>
  <b><span style="font-weight: bold;">Cc:</span></b> Cisco VoIP (<a
 moz-do-not-send="true" href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a>)<br>
  <b><span style="font-weight: bold;">Subject:</span></b> Re:
[cisco-voip] FW:
[RTMT-ALERT-CMPUB-Cluster] CoreDumpFileFound</span></font><o:p></o:p></p>
  </div>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"> <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;">Good news: you're not the only one seeing
this on
6.1.4 which is supposed to already contain the fix<br>
bad news: no root cause yet so more investigation is required<br>
  <br>
best bet is to open a TAC case with the backtrace, version, core file,
and cef
traces.  it is possible the fix did not get merged properly. but that
is
still a discussion that needs to come out of a specific tac case.<br>
  <br>
/Wes<br>
  <br>
On Wednesday, January 27, 2010 1:42:15 PM, Voll, Scott <a
 moz-do-not-send="true" href="mailto:Scott.Voll@wesd.org"><Scott.Voll@wesd.org></a>
wrote:<br>
  <br style="">
<!--[if !supportLineBreakNewLine]--><br style="">
<!--[endif]--><o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">6.1.4.2000.2</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <div>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext; font-weight: bold;">From:</span></font></b><font
 color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext;">
Wes Sisk [<a moz-do-not-send="true" href="mailto:wsisk@cisco.com">mailto:wsisk@cisco.com</a>]
  <br>
  <b><span style="font-weight: bold;">Sent:</span></b> Wednesday,
January 27, 2010
10:40 AM<br>
  <b><span style="font-weight: bold;">To:</span></b> Voll, Scott<br>
  <b><span style="font-weight: bold;">Cc:</span></b> Cisco VoIP (<a
 moz-do-not-send="true" href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a>)<br>
  <b><span style="font-weight: bold;">Subject:</span></b> Re:
[cisco-voip] FW:
[RTMT-ALERT-CMPUB-Cluster] CoreDumpFileFound</span></font><o:p></o:p></p>
  </div>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"> <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;">you didn't include what version you are
running ;)<br>
  <br>
Looks like<br>
CSCso02381    CEF core due to invalid incoming QBE message
header <br>
  <br>
I just updated the RNE to include the include the backtrace, check bug
toolkit
in 24-48 hours.<br>
  <br>
Looks like it's fixed in 6.1(3.3206.1), 6.1(4), and 7.0(1).  What
version
are you running?<br>
  <br>
/Wes<br>
  <br>
On Wednesday, January 27, 2010 12:14:32 PM, Voll, Scott <a
 moz-do-not-send="true" href="mailto:Scott.Voll@wesd.org"><Scott.Voll@wesd.org></a>
wrote:<br>
  <br>
  <br style="">
<!--[if !supportLineBreakNewLine]--><br style="">
<!--[endif]--><o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Where do I find this
“backtrace”
in the bug toolkit?</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Here is my backtrace:</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#0  0x0032ca92 in
strncpy () from
/lib/tls/libc.so.6</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#1  0x00e17f38 in
OK_BOD_strncpy ()
from /lib/csa/libcsa.so.6</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#2  0x00e15570 in
strncpy () from
/lib/csa/libcsa.so.6</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#3  0x080b26eb in
CQBE_Parser::qbeGet
(pMsgBuf_=0x1756f000, pParsedMsg_=0x1755e5ec, pQbeString_=0x2e312e36,
pNextOffset_=0x1755e46c) at qbeparser.cpp:410</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#4  0x080b4dc6 in
CTIQBE::ProviderOpenCompletedEvent::qbeGet (this=0x80b26eb,
pMsgBuf_=0x175625c0, pNextOffset_=0x1755e46c) at qbeparser.cpp:2847</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#5  0x080b948c in
CQBE_Parser::qbeParse (this=0x175625a0, pInputMsg_=0x175625c0,
inputMsgLength_=89, pParsedMsg_=0x1755e5a0, parsedMsgBufferSize_=16384)
at
qbeparser.cpp:5542</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#6  0x08095221 in
CCtiInterface::receiveLoop (this=0x0) at ctireceiver.cpp:428</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">#7  0x00000000 in ??
()</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Scott</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <div>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext; font-weight: bold;">From:</span></font></b><font
 color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; color: windowtext;">
Wes Sisk [<a moz-do-not-send="true" href="mailto:wsisk@cisco.com">mailto:wsisk@cisco.com</a>]
  <br>
  <b><span style="font-weight: bold;">Sent:</span></b> Wednesday,
January 27, 2010
8:46 AM<br>
  <b><span style="font-weight: bold;">To:</span></b> Voll, Scott<br>
  <b><span style="font-weight: bold;">Cc:</span></b> Cisco VoIP (<a
 moz-do-not-send="true" href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a>)<br>
  <b><span style="font-weight: bold;">Subject:</span></b> Re:
[cisco-voip] FW:
[RTMT-ALERT-CMPUB-Cluster] CoreDumpFileFound</span></font><o:p></o:p></p>
  </div>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"> <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;">yep, it means your cef process generated a
core
dump.  i.e. it crashed.  this is the equivalent of windows dr.watson
and user.dmp.<br>
  <br>
First level diagnosis:<br>
from the CLI use 'utils core list' to identify the core file and then
'utils
core analyze' to generate the backtrace from the core file.  you
*should*
be able to search for the backtrace in bug toolkit to find the relevant
defect.
if btk is not cooperating then open a tac case and provide your CM
version and
the backtrace.  That is adequate to identify the defect for known
crashes.<br>
  <br>
Second level diagnosis:<br>
If the backtrace does not match a known signature then we have to
diagnose the
core.  That requires:<br>
- the actual cef core file (core files may be very large)<br>
- the backtrace from the core file<br>
- cef traces for 1 hour leading up to the failure<br>
- possibly other traces such as cm SDI/SDL for the same timeframe<br>
  <br>
/Wes<br>
  <br>
  <br>
On Wednesday, January 27, 2010 10:41:41 AM, Voll, Scott <a
 moz-do-not-send="true" href="mailto:Scott.Voll@wesd.org"><Scott.Voll@wesd.org></a>
wrote:<br>
  <br>
  <br>
  <br style="">
<!--[if !supportLineBreakNewLine]--><br style="">
<!--[endif]--><o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">I’m not finding much
on a Google
search.  Any idea what this means?</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">I’m guessing a Cisco
Extended Function
crashed on my first node, but not quite sure what needs to be done or
if this
is a tac case.</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">From a TAC point of
view which RTMT logs
should I be getting if I need to open a ticket?</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">This is the first
time I’ve seen
this error.</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Thanks</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">Scott</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);">PS. CM 6.1.4-2000.2</span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="#1f497d" face="Calibri" size="2"><span
 style="font-size: 11pt; color: rgb(31, 73, 125);"> </span></font><o:p></o:p></p>
  <div
 style="border-style: solid none none; border-color: -moz-use-text-color; border-width: 1pt medium medium; padding: 3pt 0cm 0cm;">
  <p class="MsoNormal"><b><font color="black" face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif"; font-weight: bold;">From:</span></font></b><font
 face="Tahoma" size="2"><span
 style="font-size: 10pt; font-family: "Tahoma","sans-serif";">
  <a moz-do-not-send="true" href="mailto:RTMT_Admin@wesd.org">RTMT_Admin@wesd.org</a>
[<a moz-do-not-send="true" href="mailto:RTMT_Admin@wesd.org">mailto:RTMT_Admin@wesd.org</a>]
  <br>
  <b><span style="font-weight: bold;">Sent:</span></b> Wednesday,
January 27, 2010
6:06 AM<br>
  <b><span style="font-weight: bold;">To:</span></b> Voll, Scott<br>
  <b><span style="font-weight: bold;">Subject:</span></b>
[RTMT-ALERT-CMPUB-Cluster]
CoreDumpFileFound</span></font><o:p></o:p></p>
  </div>
  <p class="MsoNormal"><font color="black" face="Calibri" size="2"><span
 style="font-size: 11pt;"> <o:p></o:p></span></font></p>
  <p class="MsoNormal"><font color="black" face="Times New Roman"
 size="3"><span
 style="font-size: 12pt; font-family: "Times New Roman","serif";">CoreDumpFileFound
TotalCoresFound : 1 CoreDetails : The following lists up to 6 cores
dumped by
corresponding applications. Core1 : Cisco Extended Functions
(core.13530.11.cef.1264601139) AppID : Cisco Log Partition Monitoring
Tool
ClusterID : NodeID : CM1 . The alarm is generated on Wed Jan 27
06:05:44 PST
2010. </span></font><o:p></o:p></p>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"><o:p> </o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"><o:p> </o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;">

<hr align="center" size="4" width="90%">

</span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"><o:p> </o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"><o:p> </o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;">  <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;">  <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;">  <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"> <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">_______________________________________________<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">cisco-voip mailing list<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><a moz-do-not-send="true"
 href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a><o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><a moz-do-not-send="true"
 href="https://puck.nether.net/mailman/listinfo/cisco-voip">https://puck.nether.net/mailman/listinfo/cisco-voip</a><o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">  <o:p></o:p></span></font></pre>
  <p class="MsoNormal"><font color="black" face="Times New Roman"
 size="3"><span
 style="font-size: 12pt; font-family: "Times New Roman","serif";"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="black" face="Times New Roman"
 size="3"><span
 style="font-size: 12pt; font-family: "Times New Roman","serif";"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="black" face="Times New Roman"
 size="3"><span
 style="font-size: 12pt; font-family: "Times New Roman","serif";"> </span></font><o:p></o:p></p>
  <p class="MsoNormal"><font color="black" face="Times New Roman"
 size="3"><span
 style="font-size: 12pt; font-family: "Times New Roman","serif";"> </span></font><o:p></o:p></p>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">The information contained in this message and its attachments <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">is intended only for the private and confidential use of the <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">intended recipient(s).  If you are not the intended recipient <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">(or have received this e-mail in error) please notify the <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">sender immediately and destroy this e-mail. Any unauthorized <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">copying, disclosure or distribution of the material in this e-<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">mail is strictly prohibited.<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">  <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">The information contained in this message and its attachments <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">is intended only for the private and confidential use of the <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">intended recipient(s).<span style="">  </span>If you are not the intended recipient <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">(or have received this e-mail in error) please notify the <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">sender immediately and destroy this e-mail. Any unauthorized <o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">copying, disclosure or distribution of the material in this e-<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">mail is strictly prohibited.<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><span style="">  </span><o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><o:p> </o:p></span></font></pre>
  <pre style="text-align: center;"><font color="black"
 face="Courier New" size="2"><span style="font-size: 10pt;">

<hr align="center" size="4" width="90%">

</span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><o:p> </o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">_______________________________________________<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;">cisco-voip mailing list<o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><a moz-do-not-send="true"
 href="mailto:cisco-voip@puck.nether.net">cisco-voip@puck.nether.net</a><o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><a moz-do-not-send="true"
 href="https://puck.nether.net/mailman/listinfo/cisco-voip">https://puck.nether.net/mailman/listinfo/cisco-voip</a><o:p></o:p></span></font></pre>
  <pre><font color="black" face="Courier New" size="2"><span
 style="font-size: 10pt;"><span style="">  </span><o:p></o:p></span></font></pre>
  </div>
  <pre>The information contained in this message and its attachments 
is intended only for the private and confidential use of the 
intended recipient(s).  If you are not the intended recipient 
(or have received this e-mail in error) please notify the 
sender immediately and destroy this e-mail. Any unauthorized 
copying, disclosure or distribution of the material in this e-
mail is strictly prohibited.
  </pre>
</blockquote>
</body>
</html>