<div dir="ltr">Dear users of the global dump archive,<div><br></div><div>Below are updates on some important ongoing and upcoming global dump archive (GDA) changes. Most changes are for the WCOSS GDAs, although all users should know of the source change for GFS production dump data (first item below).</div><div><br></div><div><b><font color="#9900ff"><a href="https://en.wiktionary.org/wiki/too_long;_didn%27t_read#English">TL;DR</a>: New GFS production dump file pickup source as of 2019061212 (tomorrow!), no change on user end required. Also new phase 3 GDA coming soon to WCOSS users!</font></b><br><div><br></div><div><u><b>GFS production dump pickup location change with FV3GFS implementation June 12th 2019 12z</b></u></div><div><br></div><div>Tomorrow Wednesday June 12th the new FV3GFS will be implemented into operations on the Dells. As of 12z that day (2019061212) the GDA will follow GFS production and begin picking up production dump data from the Dell GFS prod location and no longer pick up from the Cray GFS prod location. <b>This should be a seamless change for users with no need to change the path of your $DMPDIR variables on WCOSS (yet).</b></div><div><br></div><div><font color="#9900ff">For anyone running in real-time please note that the 12z data may arrive late in the GDAs that day if there are any issues. Please let me know if you are running a real-time FV3GFS experiment on the Dells so I may know who to contact if there are issues during the switch to the new production location.</font></div><div><br></div><div>The new production dump data will also populate the Theia GDA from 2019061212 forward. <b>No change needed for Theia users.</b></div><div><br></div><div><u><b>Migration of primary WCOSS GDA from phase 1 to phase 3 (also directory structure change!)</b></u></div><div><br></div><div>Additionally the migration of the WCOSS GDA from phase 1/2/Cray to phase 3/Cray is still ongoing. The new phase 3 GDA job is running in test mode and I am continuing to populate the phase 3 GDA area with data from phase 1. It will take another few weeks to complete the migration of the 25TBs of data in the primary part of the GDA. </div><div><br></div><div>The oldest GDA dump files are still in place on the Cray and phase 2. The Cray portion of the GDA will remain past the retirement of phase 1/2. As was done on phase 1 the Cray dump folders will be symlinked to from the primary phase 3 GDA location. Users will continue to point to the primary $DMPDIR to get any of the available dump data. More on the future of the phase 2 portion of the GDA below.</div><div><br></div><div>The biggest part of this phase 1 to phase 3 change is the structure of the GDA. The new phase 3 GDA will mimic the production directory structure changes introduced with the FV3GFS:</div><div><br></div><div>current GDA:</div><div><br></div><div>$DMPDIR/<font color="#ff00ff">YYYYMMDD</font><font color="#38761d">CC</font>/${CDUMP}${SUFFIX}/$FILE.$CDUMP.<font color="#ff00ff">YYYYMMDD</font><font color="#38761d">CC</font></div><div><br></div><div>new GDA:</div><div><br></div><div>$DMPDIR/${CDUMP}${SUFFIX}.<font color="#ff00ff">YYYYMMDD</font>/<font color="#38761d">CC</font>/$CDUMP.t<font color="#38761d">CC</font>z.$FILE</div><div><br></div><div>....where SUFFIX is nothing for production data, &quot;nr&quot; for non-restricted data, &quot;p&quot; for pre-production data, and &quot;x&quot; for experimental data.</div><div><br></div><div>Any needed workflow changes to global-workflow will be announced and committed to the master when the new phase 3 GDA is ready for use.</div><div><br></div><div><u><b>Retiring phase 1/2 GDA and parallel naming conventions for dump files</b></u></div><div><br></div><div>When the migration of data is complete and the phase 3 GDA job is stable I will proceed with retiring the phase 1/2 GDA and making the phase 3 GDA the primary one on WCOSS. Notices with more details will be sent when this is going to occur. My aim is that this change will also be seamless to users.</div><div><br></div><div>There are two big parts of this retirement:</div><div><br></div><div>1) The age-off of the oldest dump data currently living on phase 2 (2015010100 - mid-2016). <font color="#9900ff">If you have plans to run FV3GFS experiments on WCOSS for the oldest data please try to complete them before the retirement of the phase 1/2 parts of WCOSS. I will set a date to remove them later this year.</font></div><div><br></div><div>2) Retirement of parallel naming conventions for dump filenames</div><div><br></div><div>old (parallel naming convention): $FILE.$CDUMP.YYYYMMDDCC</div><div>new (production naming convention): $CDUMP.tCCz.$FILE</div><div><br></div><div>#2 is already in the FV3GFS (global-workflow master). <font color="#9900ff">Please check your scripts to make sure the production naming convention is being used now. The production naming convention is already supported in the current phase 1 GDA.</font></div><div><br></div><div><b>That&#39;s it for now! Let me know if you have any questions about the above. Additional notices will be sent in the coming weeks/months.</b><br clear="all"><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><font color="#000000"><br></font></div><div><font color="#000000">Thanks everyone!</font></div><div dir="ltr"><font color="#000000"><br></font></div><div dir="ltr"><font color="#000000">Kate Friedman<br>NOAA/NWS/NCEP/EMC Engineering and Implementation Branch</font><br></div></div></div></div></div></div></div></div>