<div dir="ltr">Check this out that I just found !&nbsp;<div><a href="http://forum.openvz.org/index.php?t=msg&amp;th=607&amp;">http://forum.openvz.org/index.php?t=msg&amp;th=607&amp;</a><br></div><div><br></div><div>so my beancounters are not showing any failcnt for&nbsp;<span style="background-color:rgb(250,250,250);color:rgb(0,0,0);font-size:13px;white-space:pre-wrap">privvmpages, but I do have failcnt on </span><font color="#000000"><span style="white-space:pre-wrap">numproc</span></font></div>

<div><font color="#000000"><span style="white-space:pre-wrap">which is interesting.</span></font></div><div><ul style="margin:1ex 2em;color:rgb(85,85,85);font-family:&#39;Helvetica Neue&#39;,Helvetica,Tahoma,Arial,Helvetica,sans-serif;font-size:15px">

<li style="margin:0.6ex 0px 0.8ex"><tt style="padding:0px 3px;border:1px solid rgb(204,204,204);background-color:rgb(239,239,239);color:rgb(102,102,102);font-weight:bold">numproc</tt>&nbsp;- The maximal number of processes and threads the VE may create.</li>

</ul><div><br></div></div><div><font color="#555555" face="Helvetica Neue, Helvetica, Tahoma, Arial, Helvetica, sans-serif"><span style="font-size:15px">increase this limit and see if you can make it happen again.</span></font></div>

<div><span style="color:rgb(0,0,0);font-family:Verdana,Geneva,Lucida,&#39;Lucida Grande&#39;,Arial,Helvetica,sans-serif;font-size:13px;background-color:rgb(244,244,244)">vzctl set &lt;VZUID&gt; --numproc=6000 --save</span><font color="#555555" face="Helvetica Neue, Helvetica, Tahoma, Arial, Helvetica, sans-serif"><span style="font-size:15px"><br>

</span></font></div><div><font color="#555555" face="Helvetica Neue, Helvetica, Tahoma, Arial, Helvetica, sans-serif"><span style="font-size:15px"><br></span></font></div><div><font color="#555555" face="Helvetica Neue, Helvetica, Tahoma, Arial, Helvetica, sans-serif"><span style="font-size:15px"><br>

</span></font></div><div><font color="#555555" face="Helvetica Neue, Helvetica, Tahoma, Arial, Helvetica, sans-serif"><span style="font-size:15px"><br></span></font></div><div><font color="#000000"><span style="white-space:pre-wrap"><br>

</span></font></div><div><font color="#000000"><span style="white-space:pre-wrap"><br></span></font></div><div><font color="#000000"><span style="white-space:pre-wrap"><br></span></font></div><div><font color="#000000"><span style="white-space:pre-wrap"><br>

</span></font></div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On 29 March 2014 19:09, jay binks <span dir="ltr">&lt;<a href="mailto:jaybinks@gmail.com" target="_blank">jaybinks@gmail.com</a>&gt;</span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Take &nbsp;a look in your FS logs..<div>Im pretty sure you will see the whimsical &amp; Awesome log message :</div>

<div>







<p><i>LUKE: I&#39;m hit, but not bad.<br>LUKE&#39;S VOICE: Artoo, see what you can do with it. Hang on back there....</i></p></div><div>this is in thread_launch_failure in switch_core_session.c ( around line 1714 )<br>
</div><div>and around this code you can easily see the following&nbsp;</div><div>







<p>sess_count = switch_core_session_count();<br><span>if</span> (sess_count &gt; <span>110</span>) {<br>switch_core_session_limit(sess_count - <span>10</span>);</p></div><div>as you can see, it bumps 10 off your SPS, every time thread_launch_failure is called.</div>


<div><br></div><div>thread_launch_failure is called whenever switch_thread_create fails to create a thread.</div><div>which basically means apr_thread_create&nbsp;</div><div><br></div><div>I have seen this myself with MUCH lower SPS on openVZ machines, but since your seeing it also im now hoping we can nut this out :)</div>


<div>im going to dig a little more and see what I can find.</div><div><br></div><div>what openVZ kernel are you using out of interest ?</div><div>ive seen this on a fairly old, but stable&nbsp;2.6.32-19-pve</div><div><br></div>


<div>let me know what you find !&nbsp;</div><div><br></div>







<div><br></div>







<div><br></div></div><div class="gmail_extra"><div><div class="h5"><br><br><div class="gmail_quote">On 28 March 2014 04:30, Muhammad Naseer Bhatti <span dir="ltr">&lt;<a href="mailto:nbhatti@gmail.com" target="_blank">nbhatti@gmail.com</a>&gt;</span> wrote:<br>


<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Yes, i was thinking on same lines. Its running over OpenVZ kernel.<br>
I am now going to try replicate this in a physical env.<br>
<br>
Sent from my iPad<br>
<div><div><br>
&gt; On Mar 27, 2014, at 9:11 PM, William King &lt;<a href="mailto:william.king@quentustech.com" target="_blank">william.king@quentustech.com</a>&gt; wrote:<br>
&gt;<br>
&gt; Is your FS instance running in a virtual environment?<br>
&gt;<br>
&gt; William King<br>
&gt; Senior Engineer<br>
&gt; Quentus Technologies, INC<br>
&gt; 1037 NE 65th St Suite 273<br>
&gt; Seattle, WA 98115<br>
&gt; Main: &nbsp; (877) 211-9337<br>
&gt; Office: (206) 388-4772<br>
&gt; Cell: &nbsp; (253) 686-5518<br>
&gt; <a href="mailto:william.king@quentustech.com" target="_blank">william.king@quentustech.com</a><br>
&gt;<br>
&gt;&gt; On 03/27/2014 11:07 AM, Muhammad Naseer Bhatti wrote:<br>
&gt;&gt; No i am definitely not going to that SPS limit. The peak was set to 400<br>
&gt;&gt; so maybe this is just a skewed value. 1000 session does not look to be<br>
&gt;&gt; high load. The call is bridged and set to play silence and disconnects<br>
&gt;&gt; at random time under 1 minute. &nbsp;The resources on the server also clearly<br>
&gt;&gt; seem to be available. I am not gearing this towards a how do i ....<br>
&gt;&gt; Performance kind of a thread but could there be something unusual here?<br>
&gt;&gt;<br>
&gt;&gt; Sent from my iPad<br>
&gt;&gt;<br>
&gt;&gt; On Mar 27, 2014, at 9:07 PM, Ken Rice &lt;<a href="mailto:krice@freeswitch.org" target="_blank">krice@freeswitch.org</a><br>
&gt;&gt; &lt;mailto:<a href="mailto:krice@freeswitch.org" target="_blank">krice@freeswitch.org</a>&gt;&gt; wrote:<br>
&gt;&gt;<br>
&gt;&gt;&gt; Re: [Freeswitch-users] FreeSWITCH changing max_sessions automatically<br>
&gt;&gt;&gt; You&rsquo;re hitting a melt down protection... Once it reaches a limit and<br>
&gt;&gt;&gt; cant allocate the additional resources for creating anew session it<br>
&gt;&gt;&gt; will back down the max sessions limit to help save itself...<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; The PEAK SPS there was a value seen at some point the SPS buffer...<br>
&gt;&gt;&gt; Depending on you beating the machine to death it is possible that<br>
&gt;&gt;&gt; number got skewed due to a timer miss<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; On 3/27/14 10:57 AM, &quot;Muhammad Bhatti&quot; &lt;<a href="mailto:nbhatti@gmail.com" target="_blank">nbhatti@gmail.com</a>&gt; wrote:<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;Just have noticed something new today. Testing a local instance on<br>
&gt;&gt;&gt; &nbsp; &nbsp;CentOS 6.0 with FreeSWITCH Version 1.2.23~64bit. FreeSWITCH seems<br>
&gt;&gt;&gt; &nbsp; &nbsp;to be changing the max_sessions param automatically. This happens<br>
&gt;&gt;&gt; &nbsp; &nbsp;when typically I bridge around 1000 sessions and whatever value I<br>
&gt;&gt;&gt; &nbsp; &nbsp;set to sps and max_sessions, it comes down.<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;UP 0 years, 0 days, 0 hours, 37 minutes, 54 seconds, 362<br>
&gt;&gt;&gt; &nbsp; &nbsp;milliseconds, 294 microseconds<br>
&gt;&gt;&gt; &nbsp; &nbsp;FreeSWITCH (Version 1.2.23 &nbsp;64bit) is ready<br>
&gt;&gt;&gt; &nbsp; &nbsp;74716 session(s) since startup<br>
&gt;&gt;&gt; &nbsp; &nbsp; *976 session(s) - peak 1022, last 5min 985<br>
&gt;&gt;&gt; &nbsp; &nbsp;112 session(s) per Sec out of max 400, peak 9053, last 5min 317 &lt;-<br>
&gt;&gt;&gt; &nbsp; &nbsp;BTW This peak was never tried, not sure why it says 9053<br>
&gt;&gt;&gt; &nbsp; &nbsp; 5000 session(s) max<br>
&gt;&gt;&gt; &nbsp; &nbsp;min idle cpu 0.00/55.00<br>
&gt;&gt;&gt; &nbsp; &nbsp;Current Stack Size/Max 240K/8192K<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;=======<br>
&gt;&gt;&gt; &nbsp; &nbsp;followed by<br>
&gt;&gt;&gt; &nbsp; &nbsp;=======<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;switch_core_session.c:2288 Over Session Limit! 1013<br>
&gt;&gt;&gt; &nbsp; &nbsp;mod_sofia.c:4884 Error Creating Session<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;=======<br>
&gt;&gt;&gt; &nbsp; &nbsp;And then<br>
&gt;&gt;&gt; &nbsp; &nbsp;=======<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;freeswitch@internal&gt; status<br>
&gt;&gt;&gt; &nbsp; &nbsp;UP 0 years, 0 days, 0 hours, 38 minutes, 35 seconds, 372<br>
&gt;&gt;&gt; &nbsp; &nbsp;milliseconds, 831 microseconds<br>
&gt;&gt;&gt; &nbsp; &nbsp;FreeSWITCH (Version 1.2.23 &nbsp;64bit) is ready<br>
&gt;&gt;&gt; &nbsp; &nbsp;76231 session(s) since startup<br>
&gt;&gt;&gt; &nbsp; &nbsp; 560 session(s) - peak 1023, last 5min 1023<br>
&gt;&gt;&gt; &nbsp; &nbsp;0 session(s) per Sec out of max 400, peak 9053, last 5min 317<br>
&gt;&gt;&gt; &nbsp; &nbsp; 1013 session(s) max<br>
&gt;&gt;&gt; &nbsp; &nbsp;min idle cpu 0.00/99.00<br>
&gt;&gt;&gt; &nbsp; &nbsp;Current Stack Size/Max 240K/8192K<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;Is this something changed recently? Or some sort of server<br>
&gt;&gt;&gt; &nbsp; &nbsp;meltdown protection mechanism being forked :)<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; &nbsp; &nbsp;*<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; *<br>
&gt;&gt;&gt; *--<br>
&gt;&gt;&gt; Ken<br>
&gt;&gt;&gt; _<a href="http://www.FreeSWITCH.org" target="_blank">http://www.FreeSWITCH.org</a><br>
&gt;&gt;&gt; <a href="http://www.ClueCon.com" target="_blank">http://www.ClueCon.com</a><br>
&gt;&gt;&gt; <a href="http://www.OSTAG.org" target="_blank">http://www.OSTAG.org</a><br>
&gt;&gt;&gt; _<a href="http://irc.freenode.net" target="_blank">irc.freenode.net</a> &lt;<a href="http://irc.freenode.net" target="_blank">http://irc.freenode.net</a>&gt; #freeswitch<br>
&gt;&gt;&gt; Twitter: @FreeSWITCH<br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; _________________________________________________________________________<br>
&gt;&gt;&gt; Professional FreeSWITCH Consulting Services:<br>
&gt;&gt;&gt; <a href="mailto:consulting@freeswitch.org" target="_blank">consulting@freeswitch.org</a> &lt;mailto:<a href="mailto:consulting@freeswitch.org" target="_blank">consulting@freeswitch.org</a>&gt;<br>
&gt;&gt;&gt; <a href="http://www.freeswitchsolutions.com" target="_blank">http://www.freeswitchsolutions.com</a><br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; FreeSWITCH-powered IP PBX: The CudaTel Communication Server<br>
&gt;&gt;&gt; <a href="http://www.cudatel.com" target="_blank">http://www.cudatel.com</a><br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; Official FreeSWITCH Sites<br>
&gt;&gt;&gt; <a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
&gt;&gt;&gt; <a href="http://wiki.freeswitch.org" target="_blank">http://wiki.freeswitch.org</a><br>
&gt;&gt;&gt; <a href="http://www.cluecon.com" target="_blank">http://www.cluecon.com</a><br>
&gt;&gt;&gt;<br>
&gt;&gt;&gt; FreeSWITCH-users mailing list<br>
&gt;&gt;&gt; <a href="mailto:FreeSWITCH-users@lists.freeswitch.org" target="_blank">FreeSWITCH-users@lists.freeswitch.org</a><br>
&gt;&gt;&gt; &lt;mailto:<a href="mailto:FreeSWITCH-users@lists.freeswitch.org" target="_blank">FreeSWITCH-users@lists.freeswitch.org</a>&gt;<br>
&gt;&gt;&gt; <a href="http://lists.freeswitch.org/mailman/listinfo/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/listinfo/freeswitch-users</a><br>
&gt;&gt;&gt; UNSUBSCRIBE:<a href="http://lists.freeswitch.org/mailman/options/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/options/freeswitch-users</a><br>
&gt;&gt;&gt; &lt;<a href="http://lists.freeswitch.org/mailman/options/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/options/freeswitch-users</a>&gt;<br>
&gt;&gt;&gt; <a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
&gt;&gt;<br>
&gt;&gt;<br>
&gt;&gt; _________________________________________________________________________<br>
&gt;&gt; Professional FreeSWITCH Consulting Services:<br>
&gt;&gt; <a href="mailto:consulting@freeswitch.org" target="_blank">consulting@freeswitch.org</a><br>
&gt;&gt; <a href="http://www.freeswitchsolutions.com" target="_blank">http://www.freeswitchsolutions.com</a><br>
&gt;&gt;<br>
&gt;&gt; FreeSWITCH-powered IP PBX: The CudaTel Communication Server<br>
&gt;&gt; <a href="http://www.cudatel.com" target="_blank">http://www.cudatel.com</a><br>
&gt;&gt;<br>
&gt;&gt; Official FreeSWITCH Sites<br>
&gt;&gt; <a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
&gt;&gt; <a href="http://wiki.freeswitch.org" target="_blank">http://wiki.freeswitch.org</a><br>
&gt;&gt; <a href="http://www.cluecon.com" target="_blank">http://www.cluecon.com</a><br>
&gt;&gt;<br>
&gt;&gt; FreeSWITCH-users mailing list<br>
&gt;&gt; <a href="mailto:FreeSWITCH-users@lists.freeswitch.org" target="_blank">FreeSWITCH-users@lists.freeswitch.org</a><br>
&gt;&gt; <a href="http://lists.freeswitch.org/mailman/listinfo/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/listinfo/freeswitch-users</a><br>
&gt;&gt; UNSUBSCRIBE:<a href="http://lists.freeswitch.org/mailman/options/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/options/freeswitch-users</a><br>
&gt;&gt; <a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
&gt;&gt;<br>
&gt;<br>
&gt; _________________________________________________________________________<br>
&gt; Professional FreeSWITCH Consulting Services:<br>
&gt; <a href="mailto:consulting@freeswitch.org" target="_blank">consulting@freeswitch.org</a><br>
&gt; <a href="http://www.freeswitchsolutions.com" target="_blank">http://www.freeswitchsolutions.com</a><br>
&gt;<br>
&gt; FreeSWITCH-powered IP PBX: The CudaTel Communication Server<br>
&gt; <a href="http://www.cudatel.com" target="_blank">http://www.cudatel.com</a><br>
&gt;<br>
&gt; Official FreeSWITCH Sites<br>
&gt; <a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
&gt; <a href="http://wiki.freeswitch.org" target="_blank">http://wiki.freeswitch.org</a><br>
&gt; <a href="http://www.cluecon.com" target="_blank">http://www.cluecon.com</a><br>
&gt;<br>
&gt; FreeSWITCH-users mailing list<br>
&gt; <a href="mailto:FreeSWITCH-users@lists.freeswitch.org" target="_blank">FreeSWITCH-users@lists.freeswitch.org</a><br>
&gt; <a href="http://lists.freeswitch.org/mailman/listinfo/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/listinfo/freeswitch-users</a><br>
&gt; UNSUBSCRIBE:<a href="http://lists.freeswitch.org/mailman/options/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/options/freeswitch-users</a><br>
&gt; <a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
<br>
_________________________________________________________________________<br>
Professional FreeSWITCH Consulting Services:<br>
<a href="mailto:consulting@freeswitch.org" target="_blank">consulting@freeswitch.org</a><br>
<a href="http://www.freeswitchsolutions.com" target="_blank">http://www.freeswitchsolutions.com</a><br>
<br>
FreeSWITCH-powered IP PBX: The CudaTel Communication Server<br>
<a href="http://www.cudatel.com" target="_blank">http://www.cudatel.com</a><br>
<br>
Official FreeSWITCH Sites<br>
<a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
<a href="http://wiki.freeswitch.org" target="_blank">http://wiki.freeswitch.org</a><br>
<a href="http://www.cluecon.com" target="_blank">http://www.cluecon.com</a><br>
<br>
FreeSWITCH-users mailing list<br>
<a href="mailto:FreeSWITCH-users@lists.freeswitch.org" target="_blank">FreeSWITCH-users@lists.freeswitch.org</a><br>
<a href="http://lists.freeswitch.org/mailman/listinfo/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/listinfo/freeswitch-users</a><br>
UNSUBSCRIBE:<a href="http://lists.freeswitch.org/mailman/options/freeswitch-users" target="_blank">http://lists.freeswitch.org/mailman/options/freeswitch-users</a><br>
<a href="http://www.freeswitch.org" target="_blank">http://www.freeswitch.org</a><br>
</div></div></blockquote></div><br><br clear="all"><div><br></div></div></div><span class="HOEnZb"><font color="#888888">-- <br>Sincerely<br><br>Jay
</font></span></div>
</blockquote></div><br><br clear="all"><div><br></div>-- <br>Sincerely<br><br>Jay
</div>