<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0in;
        mso-margin-bottom-alt:auto;
        margin-left:0in;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
span.hoenzb
        {mso-style-name:hoenzb;}
span.EmailStyle19
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri",sans-serif;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D">Hello All,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D">Here at SPoRT, we run an experimental land surface model product over CONUS at ~3km resolution.&nbsp; We utilize the MRMS hourly gauge-corrected radar QPE product
 in the 3 most recent days for driving the soil model.&nbsp; We saw the same type of polygon blockage pattern in our web graphics from Saturday 8 September, as the remnants of tropical storm Gordon traversed western Kentucky/southern Illinois.&nbsp; The degraded MRMS
 product clearly affected out output quality as well.&nbsp; (see an animation of hourly near-surface soil moisture with MRMS contours overlaid from 8 September at
<a href="https://weather.msfc.nasa.gov/cgi-bin/basicLooper.pl?category=lis_CONUS&amp;initialize=first&amp;regex=rsoim0-10_20180908*.gif">
https://weather.msfc.nasa.gov/cgi-bin/basicLooper.pl?category=lis_CONUS&amp;initialize=first&amp;regex=rsoim0-10_20180908*.gif</a>).
<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D">Sincerely,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D">Jonathan Case @ NASA/SPoRT Center<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif;color:#1F497D"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif">From:</span></b><span style="font-size:11.0pt;font-family:&quot;Calibri&quot;,sans-serif"> ncep.list.idp.mrms.users-bounces@lstsrv.ncep.noaa.gov &lt;ncep.list.idp.mrms.users-bounces@lstsrv.ncep.noaa.gov&gt;
<b>On Behalf Of </b>Kenneth Howard - NOAA Federal<br>
<b>Sent:</b> Sunday, September 9, 2018 9:56 AM<br>
<b>To:</b> NOAA SDM &lt;sdm@noaa.gov&gt;<br>
<b>Cc:</b> Holly Reckel - NOAA Federal &lt;holly.reckel@noaa.gov&gt;; Kevin Conaty &lt;kevin.conaty@noaa.gov&gt;; _NWS NCF Supervisors &lt;nws.ncf.supervisors@noaa.gov&gt;; Carrie Langston &lt;carrie.langston@noaa.gov&gt;; Shellene Cope - NOAA Federal &lt;shellene.cope@noaa.gov&gt;; Jeff
 Brogden - NOAA Affiliate &lt;jeff.brogden@noaa.gov&gt;; Patrick O'Reilly &lt;patrick.oreilly@noaa.gov&gt;; Jian Zhang &lt;jian.zhang@noaa.gov&gt;; ncep.list.idp.mrms.users@lstsrv.ncep.noaa.gov; Susan Murphy &lt;susan.murphy@noaa.gov&gt;; NCO &lt;toc.nwstg@noaa.gov&gt;; _NWS ER OHRFC &lt;nws.er.ohrfc@noaa.gov&gt;;
 Curt Janota &lt;curt.janota@noaa.gov&gt;; Alan Gerard - NOAA Federal &lt;alan.e.gerard@noaa.gov&gt;; Vanessa Martinez - NOAA Affiliate &lt;vanessa.martinez@noaa.gov&gt;<br>
<b>Subject:</b> Re: [Ncep.list.idp.mrms.users] OPEN - TID: 809080283 - IDP - URGENT: Paducah radar data not being used in MRMS (since at least12z)?<o:p></o:p></span></p>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<div>
<div>
<p class="MsoNormal">From the NSSL perspective the best option to handle the situation would be to remove KPAH from MRMS processes, and let other neighboring radars (KLSX,KVWX, KHPX, and KNQA) fill in.&nbsp; Yes, there would be some slight degradation of products
 in the KPAH area but this may be significantly better then the current 'hole',&nbsp;<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<div>
<p class="MsoNormal">For MRMS v12, we'll have an automated ARJ failure identification scheme and a corresponding QC mitigation to avoid the issue being currently experienced.&nbsp;<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<div>
<p class="MsoNormal">Our apology this is currently occurring in the MRMS operational system.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<div>
<p class="MsoNormal">Ken<o:p></o:p></p>
</div>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<div>
<p class="MsoNormal">On Sun, Sep 9, 2018 at 6:29 AM, NOAA SDM &lt;<a href="mailto:sdm@noaa.gov" target="_blank">sdm@noaa.gov</a>&gt; wrote:<o:p></o:p></p>
<blockquote style="border:none;border-left:solid #CCCCCC 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-right:0in">
<div>
<div>
<p class="MsoNormal">To all,<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<div>
<p class="MsoNormal">A summary of what IDP Onboarding has provided concerning this urgent ticket.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<div>
<div>
<p class="MsoNormal">This is a recap of this morning's phone conversations.&nbsp; Initially we thought this was an MRMS ingest issue so we restarted processing on KPAH radar (vm-lnx-mrms-sr17a). This is before we got the email saying it is a hardware failure at
 the site.&nbsp;&nbsp;&nbsp; Since some of the data is coming in for the KPAH radar,&nbsp; MRMS does not know it has to fill in from the other radars.&nbsp;&nbsp; In order for them to fill in we need to remove KPAH from MRMS completely. This requires a config file change and a restart of
 MRMS processing on that VM.&nbsp;&nbsp; The problem with this is that it would cause WFO Paducah&nbsp; to lose the local radars products for KPAH which are still coming in. Based on this I understand you do not want us to make the change and we will stand down.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<p class="MsoNormal">Randy<o:p></o:p></p>
</div>
</div>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
<div>
<p class="MsoNormal">On 9 September 2018 at 11:53, NCO &lt;<a href="mailto:toc.nwstg@noaa.gov" target="_blank">toc.nwstg@noaa.gov</a>&gt; wrote:<o:p></o:p></p>
<blockquote style="border:none;border-left:solid #CCCCCC 1.0pt;padding:0in 0in 0in 6.0pt;margin-left:4.8pt;margin-right:0in">
<p class="MsoNormal">Ticket Properties<br>
Ticket Number: 809080283<br>
Opened: 2018-09-08 19:54:10<br>
Status: OPEN<br>
Category: IDP<br>
<br>
Description: URGENT:&nbsp; &nbsp;Paducah radar data not being used in MRMS (since at least12z)?&nbsp;
<br>
<br>
2018-09-09 11:52:28 GMT At 1146z, Mark F, e-mailed further clarification:<br>
But even with the PAH down for maintenance UFN, this shouldn't leave a hole in the product. Radars go down throughout the country fairly often, and when this happens, MRMS data is filled in from surrounding radars. But with the PAH outage, this fill-in from
 other radars is not happening like it usually does, and THIS is where the problem exists -- where the MRMS product is created. I hope this clarifies things. //JOHN//
<br>
<br>
<br>
===================<br>
2018-09-09 11:37:31 GMT [NCO-MCL] NCO called the Lead Forecaster at PAH and he reported that the issue is with the Radar itself. Since there is weather in the area, technician would like to wait until weather cleared before working on the radar further.
<br>
<br>
<br>
===================<br>
2018-09-09 11:32:06 GMT At 1120z, On-Call IDP Sys Eng, Vanessa called with update that she is researching to see what options may exist, if any, at the systems level, to enhance MRMS output. At this time, it remains uncertain. Vanessa is also going to consult
 with Senior IDP Eng for additional input. //JOHN// <br>
<br>
<br>
===================<br>
2018-09-09 11:01:42 GMT At 1050z, NCO-Tech Control consulted with SDM, and then called IDP oOn-Call System Eng, Vanessa M. Informed Vanessa this ticket has been upgraded to URGENT, based on input from Sr Meteorologist from Wilmington OH, RFC, and we are interested
 in determining what type of action, if any, can be performed on MRMS system, to allow whole to be filled by surrounding Radar's, short of Radar repair outside of RADAR repair, at KPAH. Vanessa will take a look to determine what actions can be performed and
 will report back. //JOHN// <br>
<br>
<br>
===================<br>
2018-09-09 10:44:08 GMT At 1028z, received e-mail update from RFC Senior Meteorologist, Mark, F:<br>
Well, I don't know who Scott talked to, but it IS critical to OHRFC!! We've got the biggest event we've had in a very long time and this is affecting one of our most important products that multiple agencies depend on. How can this not be considered critical??!
 //JOHN// <br>
<br>
<br>
===================<br>
2018-09-08 20:54:42 GMT 2021Z - Received email notification from the SDM: NCF called and also reported the same to the SDM. There are no MRMS issues in BB. Sent an E-mail to IDP on boarding support. 2007Z - Talked to Scott at NCF and he reported that after
 receiving feedback from several RFC sites it was deemed non-critical and could wait until Monday.<br>
(SEC) <br>
<br>
<br>
===================<br>
2018-09-08 20:02:46 GMT 1857Z - Received email notification from Ray Davis: i there,<br>
I bet that someone has already reported this, but just in case... The KPAH dual-pole radar products seem to be missing, and MRMS seems to be preventing the surrounding radars to fill in the void. The problem appears to have started sometime after 12z this morning.
 Could you check into this?<br>
<br>
The KPAH hole didn't appear after we processed our grids up through 12z, but it appears that MRMS is now backfilling previously saved grids with bad data. The Following FTM was issued from the WFO in reference to this site: KPAH 062106 FTMPAH Message Date:
 Sep 06 2018 21:10:57 THE KPAH RADAR IS OPERATIONAL WITH DEGRADED DUAL POL PRODUCTS. DUAL POL PRODUCTS SHOULD BE USED WITH CAUTION. REPAIRS WILL BE MADE TO THE RADAR EARLY NEXT WEEK.<br>
<br>
(SEC) <br>
<br>
<br>
===================<o:p></o:p></p>
</blockquote>
</div>
<p class="MsoNormal"><span style="color:#888888"><br>
<br clear="all">
<br>
<span class="hoenzb">-- <o:p></o:p></span></span></p>
<div>
<div>
<div>
<p class="MsoNormal"><span style="color:#888888">Senior Duty Meteorologist<br>
NOAA/NWS/NCEP/NCO/OMB</span><o:p></o:p></p>
</div>
</div>
</div>
</div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><br>
_______________________________________________<br>
Ncep.list.idp.mrms.users mailing list<br>
<a href="mailto:Ncep.list.idp.mrms.users@lstsrv.ncep.noaa.gov">Ncep.list.idp.mrms.users@lstsrv.ncep.noaa.gov</a><br>
<a href="https://www.lstsrv.ncep.noaa.gov/mailman/listinfo/ncep.list.idp.mrms.users" target="_blank">https://www.lstsrv.ncep.noaa.gov/mailman/listinfo/ncep.list.idp.mrms.users</a><o:p></o:p></p>
</blockquote>
</div>
<p class="MsoNormal"><br>
<br clear="all">
<o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p>&nbsp;</o:p></p>
</div>
<p class="MsoNormal">-- <o:p></o:p></p>
<div>
<div>
<div>
<p class="MsoNormal"><b><span style="font-size:7.5pt;font-family:&quot;Arial&quot;,sans-serif;color:#444444">Kenneth W. Howard</span></b><span style="color:#444444"><br>
</span><i><span style="font-size:7.5pt;color:#444444">Program Manager and Research Meteorologist</span></i><span style="font-size:7.5pt;color:#444444">,&nbsp;</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:7.5pt;color:#444444">Stormscale Hydro Meteorology Group (SHMET), WRDD &nbsp;</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span style="font-size:7.5pt;color:#444444">National Severe Storms Laboratory</span><span style="color:#444444"><br>
</span><span style="font-size:7.5pt;color:#444444">120 David L Boren Blvd, Norman, OK 73072<br>
Phone:&nbsp;<a href="tel:(405)%20325-6485" target="_blank"><span style="color:#1155CC">(405) 535&nbsp;</span></a>9863&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; Email: kenneth.howard<a href="mailto:jian.zhang@noaa.gov" target="_blank"><span style="color:#1155CC">@noaa.gov</span></a></span><o:p></o:p></p>
</div>
</div>
</div>
</div>
</div>
</body>
</html>