<div dir="ltr"><div>Hi all,</div><div><br></div><div><div dir="ltr" class="gmail-m_-5248152021431055752gmail_signature"><div dir="ltr"><div><div>I am having a memory problem during the IO process. The error message is "<span style="font-family:monospace,monospace">forrtl: severe (41): insufficient virtual memory</span>." Since there is no virtual memory on the machine that I am using (stampede2), this means FLASH uses too much memory.</div><div><br></div><div>The memory problem usually occurs during the writing of particle files. The last few lines of the log file look like:</div><div><div><br></div><div><span style="font-family:monospace,monospace"> [ 08-29-2018  04:56:37.695 ] [IO_writePlotfile] open: type=plotfile name=Sim_hdf5_plt_cnt_0585<br> [ 08-29-2018  04:56:48.700 ] [IO_writePlotfile] close: type=plotfile name=Sim_hdf5_plt_cnt_0585<br> [ 08-29-2018  04:56:48.707 ] [IO_writeParticles] open: type=particles name=Sim_hdf5_part_0585<br> [ 08-29-2018  04:56:48.708 ] [IO_writeParticles]: done called Particles_updateAttributes()<br></span></div></div><div><div><br></div><div>I am running MHD AMR simulation and do have a large number of passive particles. However, if I log into the computing node during the simulation, the memory usage is usually less than 60% of the available memory. But it seems the memory usage suddenly jumps and exceeds the limit during the writing of output files. Does FLASH use much more memory during IO? I am using FLASH4.5 with <span class="gmail-gr_ gmail-gr_62 gmail-gr-alert gmail-gr_spell gmail-gr_inline_cards gmail-gr_disable_anim_appear gmail-ContextualSpelling gmail-ins-del gmail-multiReplace" id="gmail-62">Intel</span> MPI compiler and serial HDF5.</div></div><div><br></div><div>The problem is not reproducible and does not happen very often. If I restart the simulation from the last available checkpoint file, it will not crash at the same time.</div><div><br></div><div>I would appreciate if you have any thoughts on how to identify the problem or solve it. Thank you!<br></div><div><br></div><div>Sincerely,</div><div>Yi-Hao<br></div></div></div></div></div></div>