<html><head><base href="x-msg://731/"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><span class="Apple-style-span" style="border-collapse: separate; font-family: Monaco; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: -webkit-auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; font-size: medium; "><div><div style="font-family: 'Times New Roman'; font-size: 12pt; color: rgb(0, 0, 0); "><span>There is a zombie process on cookie's GPU. You can take a look with nvidia-smi -a<br>Utilization is 99%, meaning no work can be done on the GPU until it is free. Which will be never until cookie is rebooted. nvidia-smi for sdk 4.0 does not have the capability of resetting the GPU on the fly, however the sdk 4.1 version will have it. Until then...<br><br>Not sure when is a good time for a reboot. I know Krishna has a pbound job running, so I'd like to get a consensus of cookie users.<br><br>Let me know. Thanks.<br><span name="x"></span><br>Daniel Lowell<br>(630)252-0092<br><br><span name="x"></span><br></span><br></div></div></span></body></html>