<div dir="ltr"><div class="gmail_default" style="font-family:verdana,sans-serif">Hello,</div><div class="gmail_default" style="font-family:verdana,sans-serif"><br></div><div class="gmail_default" style="font-family:verdana,sans-serif">

I just started a cluster of 20 c3.8xlarge instances, which have 32 virtual cores in each.  In my understanding, each instance should have 32 slots available  to run the jobs by default. But after running it for a while, I found a lot of nodes are not running at the full speed. </div>
<div class="gmail_default" style="font-family:verdana,sans-serif"><br></div><div class="gmail_default" style="font-family:verdana,sans-serif">Following as an example, you can see node016 has only 13 jobs running and node017 has 9 jobs running, while node018 has 32 jobs running. I have another ~10000 jobs waiting in the queue, so it is not a matter of running out of jobs.</div>
<div class="gmail_default" style="font-family:verdana,sans-serif"><br></div><div class="gmail_default" style="font-family:verdana,sans-serif">Can anyone give me a hint what is going on here?</div><div class="gmail_default" style="font-family:verdana,sans-serif">
<br></div><div class="gmail_default" style="font-family:verdana,sans-serif">Thanks!</div><div class="gmail_default" style="font-family:verdana,sans-serif">Jin</div><div class="gmail_default" style="font-family:verdana,sans-serif">
<br></div><div class="gmail_default" style="font-family:verdana,sans-serif"><br></div><div class="gmail_default" style="font-family:verdana,sans-serif">
<div class="gmail_default">all.q@node016                  BIP   0/13/32        148.35   linux-x64     a</div><div class="gmail_default">    784 0.55500 job.part.a sgeadmin     r     07/17/2014 11:25:59     1        </div>
<div class="gmail_default">    982 0.55500 job.part.a sgeadmin     r     07/17/2014 14:43:59     1        </div><div class="gmail_default">   1056 0.55500 job.part.a sgeadmin     r     07/17/2014 16:34:44     1        </div>
<div class="gmail_default">   1057 0.55500 job.part.a sgeadmin     r     07/17/2014 16:34:44     1        </div><div class="gmail_default">   1058 0.55500 job.part.a sgeadmin     r     07/17/2014 16:34:59     1        </div>
<div class="gmail_default">   1121 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div><div class="gmail_default">   1122 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div>
<div class="gmail_default">   1123 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div><div class="gmail_default">   1124 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div>
<div class="gmail_default">   1125 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div><div class="gmail_default">   1126 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div>
<div class="gmail_default">   1127 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div><div class="gmail_default">   1128 0.55500 job.part.a sgeadmin     r     07/17/2014 17:22:44     1        </div>
<div class="gmail_default">---------------------------------------------------------------------------------</div><div class="gmail_default">all.q@node017                  BIP   0/9/32         83.86    linux-x64     a</div>
<div class="gmail_default">    568 0.55500 job.part.a sgeadmin     r     07/17/2014 04:01:14     1        </div><div class="gmail_default">   1001 0.55500 job.part.a sgeadmin     r     07/17/2014 15:07:29     1        </div>
<div class="gmail_default">   1002 0.55500 job.part.a sgeadmin     r     07/17/2014 15:07:29     1        </div><div class="gmail_default">   1072 0.55500 job.part.a sgeadmin     r     07/17/2014 16:53:29     1        </div>
<div class="gmail_default">   1116 0.55500 job.part.a sgeadmin     r     07/17/2014 17:19:29     1        </div><div class="gmail_default">   1117 0.55500 job.part.a sgeadmin     r     07/17/2014 17:19:29     1        </div>
<div class="gmail_default">   1118 0.55500 job.part.a sgeadmin     r     07/17/2014 17:19:44     1        </div><div class="gmail_default">   1119 0.55500 job.part.a sgeadmin     r     07/17/2014 17:19:59     1        </div>
<div class="gmail_default">   1120 0.55500 job.part.a sgeadmin     r     07/17/2014 17:19:59     1        </div><div class="gmail_default">---------------------------------------------------------------------------------</div>
<div class="gmail_default">all.q@node018                  BIP   0/32/32        346.00   linux-x64     a</div><div><br></div></div></div>