From hibari.michirou ＠ nttcom.co.jp Tue Oct 18 12:53:15 2011 From: hibari.michirou ＠ nttcom.co.jp (=?ISO-2022-JP?B?GyRCMUA/fSEhTylPLxsoQg==?=) Date: Tue, 18 Oct 2011 12:53:15 +0900 Subject: [Ultramonkey-l7-users 450] Re: =?iso-2022-jp?b?GyRCOkdCZ0YxO35AXEIzP3QkTkBfRGokSyREJC0bKEI=?= =?iso-2022-jp?b?GyRCJF4kNyRGGyhC?= In-Reply-To: <20111017083813.92D2FFB8019@mail.opendoor.co.jp> References: <20111014022051.2BD2FFB801F@mail.opendoor.co.jp> <4E97A6D2.10300@nttcom.co.jp> <20111017083813.92D2FFB8019@mail.opendoor.co.jp> Message-ID: <4E9CF82B.1000805@nttcom.co.jp> 酒井様 雲雀です。お世話になっております。 l7vsdが起動しているスレッド数を確認するため、 l7vsdを起動し、VirtualServiceを追加した状態で、以下 のコマンドの実行結果を確認していただけますでしょうか？ # ps -AL | grep l7vsd | wc -l あと、差し支えなければ # ulimit -a の実行結果も教えていただければと思います。 (2011/10/17 17:38), 酒井　聡司 wrote: > 雲雀様 > > 酒井です。返信ありがとうございます。 > 以下の設定に変更しましたが、依然としてActiveConnは最大32のままです。 > -------------------------------------- > maxconn = 1024 > > session_thread_pool_size = 2048 > -------------------------------------- > > ApacheBench ⇒ UltraMonkey ⇒ Webserver > の構成を > ApacheBench ⇒ LVS(Ultramonkeyとは違うサーバ) ⇒ Webserver > で検証した所、ActiveConnはApacheBenchで設定した100を示しました。 > ApacheBenchとWebserverに問題はなさそうです。 > > 他の方の環境で出ないのであれば個別の問題になってしまうのですが、 > 現状解決策が見出せていません。 > > 他に見るところはありますか？ > > > On Fri, 14 Oct 2011 12:04:50 +0900 > 雲雀　路朗 wrote: > >> 酒井様 >> >> 雲雀です。 >> >> maxconn< session_thread_pool_size　となるように >> 設定する必要があります。 >> maxconnを1000に設定したい場合はsession_thread_pool_sizeは >> 1000以上とすることで、期待する動作になるかと思います。 >> >> じゃあ、maxconnで上限設定しないで、最初からsession_thread_pool_size >> だけ設定すればOKなのでは？と感じるかもしれませんので、以下、細かい話 >> ですが、参考までに。 >> >> session_thread_pool_sizeは通信処理を行うスレッド数の >> 設定値となります。 >> >> スレッドの動作はざっくり、以下の動作になります。 >> １. スレッドを起動する >> ２．クライアントからの接続受付 >> ３．振り分け先のリアルサーバを選択 >> ４. リアルサーバに接続 >> ５．クライアント・リアルサーバ間の通信処理 >> ６．クライアント・リアルサーバとの通信終了 >> ７．スレッドを待機状態にする >> >> 上記処理の中で、"４〜６の処理を行っているスレッド数=ActiveConn" >> です。 >> >> 通信処理以外の１〜３、７の処理も並列で実行しているほうがパフォーマンス >> がよくなると思いますので、maxconnより少し多めの値を >> session_thread_pool_sizeに設定しておくことをお勧めします。 >> >> あと、複数のVirtualServiceを登録する際に、session_thread_pool_sizeは >> すべてのVirtualServiceで同じ値になります。 >> VirtualServiceごとに異なる最大同時接続数を設けたい場合はmaxconnオプショ >> ンを設定するのが便利です。 >> >> >> 　 >> (2011/10/14 11:20), 酒井　聡司 wrote: >>> こんにちは。酒井と申します。 >>> Ultramonkey-L7に対して、負荷試験を実施しています。 >>> 同時接続数を50で実施しl7vsadmで確認すると >>> ActiveConnの合計が最大32までになってしまいます。 >>> >>> 同時接続数を100,200にしても結果は同じです。 >>> 以下2点を変更して試してみましたが、接続合計数32のままでした。 >>> >>> --- l7directord.cf --- >>> virtual =　以下の箇所 >>> maxconn = 1000 ←0,1000に変更 >>> >>> --- l7vs.cf --- >>> session_thread_pool_size = 32 ←１〜256まで変更 >>> >>> この他に関わる設定箇所はありますか？ >>> >>> 負荷ツールはJmeterとApache Benchで検証しています。 >>> Ultramonkey-l7は3.0.1、CentOS5.5を使用しています。 >>> >>> よろしくお願いいたします。 >>> >>> _______________________________________________ >>> Ultramonkey-l7-users mailing list >>> Ultramonkey-l7-users ＠ lists.sourceforge.jp >>> http://lists.sourceforge.jp/mailman/listinfo/ultramonkey-l7-users >>> >>> >> >> >> -- >> ============================================== >> ＮＴＴコムウェア株式会社 >> 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 >> 雲雀　路朗（ひばり　みちろう） >> E-Mail:hibari.michirou ＠ nttcom.co.jp >> TEL:043-211-2452 >> ============================================== >> > > > > > -- ============================================== ＮＴＴコムウェア株式会社 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 雲雀　路朗（ひばり　みちろう） E-Mail:hibari.michirou ＠ nttcom.co.jp TEL:043-211-2452 ============================================== From ssakai ＠ opendoor.co.jp Tue Oct 18 19:02:33 2011 From: ssakai ＠ opendoor.co.jp (=?ISO-2022-JP?B?GyRCPHIwZiEhQW87ShsoQg==?=) Date: Tue, 18 Oct 2011 19:02:33 +0900 Subject: [Ultramonkey-l7-users 451] Re: =?iso-2022-jp?b?GyRCOkdCZ0YxO35AXEIzP3QkTkBfRGokSyREJC0bKEI=?= =?iso-2022-jp?b?GyRCJF4kNyRGGyhC?= In-Reply-To: <4E9CF82B.1000805@nttcom.co.jp> References: <20111017083813.92D2FFB8019@mail.opendoor.co.jp> <4E9CF82B.1000805@nttcom.co.jp> Message-ID: <20111018100219.AE089FB801A@mail.opendoor.co.jp> 雲雀様 酒井です。返信ありがとうございます。 色々試していたところ改善しました。 session_thread_pool_size の設定ですが、 最初は変更後heartbeatの再起動を行っていました。 heartbeatの再起動では、ActiveConn最大32は変わらなかったのですが、 設定変更後のOS再起動で32を超えて想定した数値に変わることがわかりました。 l7vs.cfの変更で、heartbeatの再起動で反映されるものと思っていたのですが、 これは仕様なのでしょうか？それとも個別環境の問題でしょうか？ On Tue, 18 Oct 2011 12:53:15 +0900 雲雀　路朗 wrote: > 酒井様 > > 雲雀です。お世話になっております。 > > l7vsdが起動しているスレッド数を確認するため、 > l7vsdを起動し、VirtualServiceを追加した状態で、以下 > のコマンドの実行結果を確認していただけますでしょうか？ > # ps -AL | grep l7vsd | wc -l > > あと、差し支えなければ > # ulimit -a > の実行結果も教えていただければと思います。 > > > (2011/10/17 17:38), 酒井　聡司 wrote: > > 雲雀様 > > > > 酒井です。返信ありがとうございます。 > > 以下の設定に変更しましたが、依然としてActiveConnは最大32のままです。 > > -------------------------------------- > > maxconn = 1024 > > > > session_thread_pool_size = 2048 > > -------------------------------------- > > > > ApacheBench ⇒ UltraMonkey ⇒ Webserver > > の構成を > > ApacheBench ⇒ LVS(Ultramonkeyとは違うサーバ) ⇒ Webserver > > で検証した所、ActiveConnはApacheBenchで設定した100を示しました。 > > ApacheBenchとWebserverに問題はなさそうです。 > > > > 他の方の環境で出ないのであれば個別の問題になってしまうのですが、 > > 現状解決策が見出せていません。 > > > > 他に見るところはありますか？ > > > > > > On Fri, 14 Oct 2011 12:04:50 +0900 > > 雲雀　路朗 wrote: > > > >> 酒井様 > >> > >> 雲雀です。 > >> > >> maxconn< session_thread_pool_size　となるように > >> 設定する必要があります。 > >> maxconnを1000に設定したい場合はsession_thread_pool_sizeは > >> 1000以上とすることで、期待する動作になるかと思います。 > >> > >> じゃあ、maxconnで上限設定しないで、最初からsession_thread_pool_size > >> だけ設定すればOKなのでは？と感じるかもしれませんので、以下、細かい話 > >> ですが、参考までに。 > >> > >> session_thread_pool_sizeは通信処理を行うスレッド数の > >> 設定値となります。 > >> > >> スレッドの動作はざっくり、以下の動作になります。 > >> １. スレッドを起動する > >> ２．クライアントからの接続受付 > >> ３．振り分け先のリアルサーバを選択 > >> ４. リアルサーバに接続 > >> ５．クライアント・リアルサーバ間の通信処理 > >> ６．クライアント・リアルサーバとの通信終了 > >> ７．スレッドを待機状態にする > >> > >> 上記処理の中で、"４〜６の処理を行っているスレッド数=ActiveConn" > >> です。 > >> > >> 通信処理以外の１〜３、７の処理も並列で実行しているほうがパフォーマンス > >> がよくなると思いますので、maxconnより少し多めの値を > >> session_thread_pool_sizeに設定しておくことをお勧めします。 > >> > >> あと、複数のVirtualServiceを登録する際に、session_thread_pool_sizeは > >> すべてのVirtualServiceで同じ値になります。 > >> VirtualServiceごとに異なる最大同時接続数を設けたい場合はmaxconnオプショ > >> ンを設定するのが便利です。 > >> > >> > >> 　 > >> (2011/10/14 11:20), 酒井　聡司 wrote: > >>> こんにちは。酒井と申します。 > >>> Ultramonkey-L7に対して、負荷試験を実施しています。 > >>> 同時接続数を50で実施しl7vsadmで確認すると > >>> ActiveConnの合計が最大32までになってしまいます。 > >>> > >>> 同時接続数を100,200にしても結果は同じです。 > >>> 以下2点を変更して試してみましたが、接続合計数32のままでした。 > >>> > >>> --- l7directord.cf --- > >>> virtual =　以下の箇所 > >>> maxconn = 1000 ←0,1000に変更 > >>> > >>> --- l7vs.cf --- > >>> session_thread_pool_size = 32 ←１〜256まで変更 > >>> > >>> この他に関わる設定箇所はありますか？ > >>> > >>> 負荷ツールはJmeterとApache Benchで検証しています。 > >>> Ultramonkey-l7は3.0.1、CentOS5.5を使用しています。 > >>> > >>> よろしくお願いいたします。 > >>> > >>> _______________________________________________ > >>> Ultramonkey-l7-users mailing list > >>> Ultramonkey-l7-users ＠ lists.sourceforge.jp > >>> http://lists.sourceforge.jp/mailman/listinfo/ultramonkey-l7-users > >>> > >>> > >> > >> > >> -- > >> ============================================== > >> ＮＴＴコムウェア株式会社 > >> 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 > >> 雲雀　路朗（ひばり　みちろう） > >> E-Mail:hibari.michirou ＠ nttcom.co.jp > >> TEL:043-211-2452 > >> ============================================== > >> > > > > > > > > > > > > > -- > ============================================== > ＮＴＴコムウェア株式会社 > 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 > 雲雀　路朗（ひばり　みちろう） > E-Mail:hibari.michirou ＠ nttcom.co.jp > TEL:043-211-2452 > ============================================== > From hibari.michirou ＠ nttcom.co.jp Tue Oct 18 19:26:17 2011 From: hibari.michirou ＠ nttcom.co.jp (=?ISO-2022-JP?B?GyRCMUA/fSEhTylPLxsoQg==?=) Date: Tue, 18 Oct 2011 19:26:17 +0900 Subject: [Ultramonkey-l7-users 452] Re: =?iso-2022-jp?b?GyRCOkdCZ0YxO35AXEIzP3QkTkBfRGokSyREJC0bKEI=?= =?iso-2022-jp?b?GyRCJF4kNyRGGyhC?= In-Reply-To: <20111018100219.AE089FB801A@mail.opendoor.co.jp> References: <20111017083813.92D2FFB8019@mail.opendoor.co.jp> <4E9CF82B.1000805@nttcom.co.jp> <20111018100219.AE089FB801A@mail.opendoor.co.jp> Message-ID: <4E9D5449.9030304@nttcom.co.jp> 酒井様 雲雀です。 問題が解決したとのご連絡、ありがとうございます。 session_thread_pool_size の設定を変更した場合、設定の反映には l7vsdプロセスの再起動が必要となります。 heartbeatの再起動を行った場合、l7vsdも再起動することになりますので、 設定の反映が行われるはずなのですが・・・ session_thread_pool_size の設定変更および、heartbeatの再起動は、 両系ともに行っていましたでしょうか？ ＃もし、お試しで現用系のみsession_thread_pool_sizeを変更していた 　とすると、次の動きになるので、説明がつくかな〜と思ったり。 　１．現用系のみ設定を反映 　２．heartbeatを再起動 　３．フェールオーバする 　４．session_thread_pool_sizeを変更してない予備系がACTになる 　５．予備系はまだsession_thread_pool_size=32のまま (2011/10/18 19:02), 酒井　聡司 wrote: > 雲雀様 > > 酒井です。返信ありがとうございます。 > 色々試していたところ改善しました。 > > session_thread_pool_size の設定ですが、 > 最初は変更後heartbeatの再起動を行っていました。 > heartbeatの再起動では、ActiveConn最大32は変わらなかったのですが、 > 設定変更後のOS再起動で32を超えて想定した数値に変わることがわかりました。 > > l7vs.cfの変更で、heartbeatの再起動で反映されるものと思っていたのですが、 > これは仕様なのでしょうか？それとも個別環境の問題でしょうか？ > > > On Tue, 18 Oct 2011 12:53:15 +0900 > 雲雀　路朗 wrote: > >> 酒井様 >> >> 雲雀です。お世話になっております。 >> >> l7vsdが起動しているスレッド数を確認するため、 >> l7vsdを起動し、VirtualServiceを追加した状態で、以下 >> のコマンドの実行結果を確認していただけますでしょうか？ >> # ps -AL | grep l7vsd | wc -l >> >> あと、差し支えなければ >> # ulimit -a >> の実行結果も教えていただければと思います。 >> >> >> (2011/10/17 17:38), 酒井　聡司 wrote: >>> 雲雀様 >>> >>> 酒井です。返信ありがとうございます。 >>> 以下の設定に変更しましたが、依然としてActiveConnは最大32のままです。 >>> -------------------------------------- >>> maxconn = 1024 >>> >>> session_thread_pool_size = 2048 >>> -------------------------------------- >>> >>> ApacheBench ⇒ UltraMonkey ⇒ Webserver >>> の構成を >>> ApacheBench ⇒ LVS(Ultramonkeyとは違うサーバ) ⇒ Webserver >>> で検証した所、ActiveConnはApacheBenchで設定した100を示しました。 >>> ApacheBenchとWebserverに問題はなさそうです。 >>> >>> 他の方の環境で出ないのであれば個別の問題になってしまうのですが、 >>> 現状解決策が見出せていません。 >>> >>> 他に見るところはありますか？ >>> >>> >>> On Fri, 14 Oct 2011 12:04:50 +0900 >>> 雲雀　路朗 wrote: >>> >>>> 酒井様 >>>> >>>> 雲雀です。 >>>> >>>> maxconn< session_thread_pool_size　となるように >>>> 設定する必要があります。 >>>> maxconnを1000に設定したい場合はsession_thread_pool_sizeは >>>> 1000以上とすることで、期待する動作になるかと思います。 >>>> >>>> じゃあ、maxconnで上限設定しないで、最初からsession_thread_pool_size >>>> だけ設定すればOKなのでは？と感じるかもしれませんので、以下、細かい話 >>>> ですが、参考までに。 >>>> >>>> session_thread_pool_sizeは通信処理を行うスレッド数の >>>> 設定値となります。 >>>> >>>> スレッドの動作はざっくり、以下の動作になります。 >>>> １. スレッドを起動する >>>> ２．クライアントからの接続受付 >>>> ３．振り分け先のリアルサーバを選択 >>>> ４. リアルサーバに接続 >>>> ５．クライアント・リアルサーバ間の通信処理 >>>> ６．クライアント・リアルサーバとの通信終了 >>>> ７．スレッドを待機状態にする >>>> >>>> 上記処理の中で、"４〜６の処理を行っているスレッド数=ActiveConn" >>>> です。 >>>> >>>> 通信処理以外の１〜３、７の処理も並列で実行しているほうがパフォーマンス >>>> がよくなると思いますので、maxconnより少し多めの値を >>>> session_thread_pool_sizeに設定しておくことをお勧めします。 >>>> >>>> あと、複数のVirtualServiceを登録する際に、session_thread_pool_sizeは >>>> すべてのVirtualServiceで同じ値になります。 >>>> VirtualServiceごとに異なる最大同時接続数を設けたい場合はmaxconnオプショ >>>> ンを設定するのが便利です。 >>>> >>>> >>>> 　 >>>> (2011/10/14 11:20), 酒井　聡司 wrote: >>>>> こんにちは。酒井と申します。 >>>>> Ultramonkey-L7に対して、負荷試験を実施しています。 >>>>> 同時接続数を50で実施しl7vsadmで確認すると >>>>> ActiveConnの合計が最大32までになってしまいます。 >>>>> >>>>> 同時接続数を100,200にしても結果は同じです。 >>>>> 以下2点を変更して試してみましたが、接続合計数32のままでした。 >>>>> >>>>> --- l7directord.cf --- >>>>> virtual =　以下の箇所 >>>>> maxconn = 1000 ←0,1000に変更 >>>>> >>>>> --- l7vs.cf --- >>>>> session_thread_pool_size = 32 ←１〜256まで変更 >>>>> >>>>> この他に関わる設定箇所はありますか？ >>>>> >>>>> 負荷ツールはJmeterとApache Benchで検証しています。 >>>>> Ultramonkey-l7は3.0.1、CentOS5.5を使用しています。 >>>>> >>>>> よろしくお願いいたします。 >>>>> >>>>> _______________________________________________ >>>>> Ultramonkey-l7-users mailing list >>>>> Ultramonkey-l7-users ＠ lists.sourceforge.jp >>>>> http://lists.sourceforge.jp/mailman/listinfo/ultramonkey-l7-users >>>>> >>>>> >>>> >>>> >>>> -- >>>> ============================================== >>>> ＮＴＴコムウェア株式会社 >>>> 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 >>>> 雲雀　路朗（ひばり　みちろう） >>>> E-Mail:hibari.michirou ＠ nttcom.co.jp >>>> TEL:043-211-2452 >>>> ============================================== >>>> >>> >>> >>> >>> >>> >> >> >> -- >> ============================================== >> ＮＴＴコムウェア株式会社 >> 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 >> 雲雀　路朗（ひばり　みちろう） >> E-Mail:hibari.michirou ＠ nttcom.co.jp >> TEL:043-211-2452 >> ============================================== >> > > > > -- ============================================== ＮＴＴコムウェア株式会社 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 雲雀　路朗（ひばり　みちろう） E-Mail:hibari.michirou ＠ nttcom.co.jp TEL:043-211-2452 ============================================== From takebayashi.shinya ＠ oss.ntt.co.jp Tue Oct 18 19:31:13 2011 From: takebayashi.shinya ＠ oss.ntt.co.jp (Shinya TAKEBAYASHI) Date: Tue, 18 Oct 2011 19:31:13 +0900 Subject: [Ultramonkey-l7-users 453] Re: =?iso-2022-jp?b?GyRCOkdCZ0YxO35AXEIzP3QkTkBfRGokSyREJC0bKEI=?= =?iso-2022-jp?b?GyRCJF4kNyRGGyhC?= In-Reply-To: <4E9D5449.9030304@nttcom.co.jp> References: <20111017083813.92D2FFB8019@mail.opendoor.co.jp> <4E9CF82B.1000805@nttcom.co.jp> <20111018100219.AE089FB801A@mail.opendoor.co.jp> <4E9D5449.9030304@nttcom.co.jp> Message-ID: 竹林です． > session_thread_pool_size の設定を変更した場合、設定の反映には > l7vsdプロセスの再起動が必要となります。 > heartbeatの再起動を行った場合、l7vsdも再起動することになりますので、 > 設定の反映が行われるはずなのですが・・・ Heartbeat のバージョンが古い（1.x）と，l7vsd は感知しないで l7directord と IPaddr だけが監視対象になっているので・・・． 酒井さん，Heartbeat は何をお使いで，どう設定しましたか． もし Heartbeat 2.x であれば，crm_mon の出力をいただけますか． ----------------------------------------------------------- Shinya TAKEBAYASHI E-mail: takebayashi.shinya ＠ oss.ntt.co.jp GPG ID: 395EFCE8 GPG FP: 58B2 B5D0 A692 1BD8 328B E31E E027 AC35 395E FCE8 ----------------------------------------------------------- From hibari.michirou ＠ nttcom.co.jp Tue Oct 18 19:46:48 2011 From: hibari.michirou ＠ nttcom.co.jp (=?ISO-2022-JP?B?GyRCMUA/fSEhTylPLxsoQg==?=) Date: Tue, 18 Oct 2011 19:46:48 +0900 Subject: [Ultramonkey-l7-users 454] Re: =?iso-2022-jp?b?GyRCOkdCZ0YxO35AXEIzP3QkTkBfRGokSyREJC0bKEI=?= =?iso-2022-jp?b?GyRCJF4kNyRGGyhC?= In-Reply-To: References: <20111017083813.92D2FFB8019@mail.opendoor.co.jp> <4E9CF82B.1000805@nttcom.co.jp> <20111018100219.AE089FB801A@mail.opendoor.co.jp> <4E9D5449.9030304@nttcom.co.jp> Message-ID: <4E9D5918.2060600@nttcom.co.jp> 竹林様 雲雀です。 >>> session_thread_pool_size の設定を変更した場合、設定の反映には >>> l7vsdプロセスの再起動が必要となります。 >>> heartbeatの再起動を行った場合、l7vsdも再起動することになりますので、 >>> 設定の反映が行われるはずなのですが・・・ >> >> Heartbeat のバージョンが古い（1.x）と，l7vsd は感知しないで >> l7directord と IPaddr だけが監視対象になっているので・・・． Heartbeatは2.x系だと思い込んでおりましたorz フォローありがとうございますm( _ _ )m (2011/10/18 19:31), Shinya TAKEBAYASHI wrote: > 竹林です． > >> session_thread_pool_size の設定を変更した場合、設定の反映には >> l7vsdプロセスの再起動が必要となります。 >> heartbeatの再起動を行った場合、l7vsdも再起動することになりますので、 >> 設定の反映が行われるはずなのですが・・・ > > Heartbeat のバージョンが古い（1.x）と，l7vsd は感知しないで > l7directord と IPaddr だけが監視対象になっているので・・・． > > > 酒井さん，Heartbeat は何をお使いで，どう設定しましたか． > もし Heartbeat 2.x であれば，crm_mon の出力をいただけますか． > > ----------------------------------------------------------- > Shinya TAKEBAYASHI > > E-mail: takebayashi.shinya ＠ oss.ntt.co.jp > GPG ID: 395EFCE8 > GPG FP: 58B2 B5D0 A692 1BD8 328B E31E E027 AC35 395E FCE8 > ----------------------------------------------------------- > > _______________________________________________ > Ultramonkey-l7-users mailing list > Ultramonkey-l7-users ＠ lists.sourceforge.jp > http://lists.sourceforge.jp/mailman/listinfo/ultramonkey-l7-users > > -- ============================================== ＮＴＴコムウェア株式会社 品質生産性技術本部　技術SE部　基盤ソフトSE・OSS部門 雲雀　路朗（ひばり　みちろう） E-Mail:hibari.michirou ＠ nttcom.co.jp TEL:043-211-2452 ==============================================