[過去ﾛｸﾞ] 2ch特化型サーバ・ロケーション構築作戦 Part21 (1001ﾚｽ)
上下前次1-新
このｽﾚｯﾄﾞは過去ﾛｸﾞ倉庫に格納されています｡
次ｽﾚ検索 歴削→次ｽﾚ 栞削→次ｽﾚ 過去ﾛｸﾞﾒﾆｭｰ
278(2): 263 2006/04/30(日) 13:08:24 ID:0J9aTQO80(3/6)調 AAS
@@ -163,7 +179,7 @@
* now nonzero, it's safe for this function to
* return immediately.
*/
- if (queue_info->idlers == 0) {
+ while (queue_info->idlers == 0) {
rv = apr_thread_cond_wait(queue_info->wait_for_idler,
queue_info->idlers_mutex);
if (rv != APR_SUCCESS) {
@@ -190,8 +206,14 @@
if (first_pool == NULL) {
break;
}
+#ifdef __FreeBSD__
+ if (atomic_cmpset_ptr((volatile uintptr_t*)&(queue_info->recycled_pools),
+ (uintptr_t)first_pool,
+ (uintptr_t)first_pool->next)) {
+#else
if (apr_atomic_casptr((volatile void**)&(queue_info->recycled_pools), first_pool->next,
first_pool) == first_pool) {
+#endif
*recycled_pool = first_pool->pool;
break;
}
279(1): 263 2006/04/30(日) 13:12:46 ID:0J9aTQO80(4/6)調 AAS
完了。
変更点は、apr_atomic_casptr() -> atomic_cmpset_ptr() です。
なお、fdqueue.c は以前のパッチがあるので、
このパッチはその変更も取り込んでいます。
280(1): root▲ ★ 2006/04/30(日) 13:22:30 ID:???0 BE AAS
>>276-279
ありがとうございます。
ひとつ質問です。
#ifdef __FreeBSD__ となっていますが、
これは FreeBSD に固有の虫さんなんでしょうか。
281: 263 2006/04/30(日) 13:34:40 ID:0J9aTQO80(5/6)調 AAS
>>280
#ifdef __FreeBSD__ になっているのは、
対応に、FreeBSD固有の関数(atomic_cmpset_ptr())を使用しているからです。
で、一応、私のところではこれで直ってるんですが、
apr_atomic_casptr()を使用した場合、どこが問題なのかは、まだわかってないです。
わかる人がいたら、教えて頂けると嬉しいです。。
282: 263 2006/04/30(日) 13:50:22 ID:0J9aTQO80(6/6)調 AAS
apr_atomic_casptr()に問題があるなら、どのOSでも発生するはずですが、
タイミングに依るので、OSによっては問題が起こらない or 起こり難い
はあると思います。
それにしても、、
Apache の ap_queue_info_set_idle() & ap_queue_info_wait_for_idler()
の条件変数とmutexは、もう少し素直なコーディングにしても良いんじゃないかと思う。
できるだけパフォーマンスをUPさせるためにこうなってるのかな。。。
283: root▲ ★ 2006/04/30(日) 19:24:36 ID:???0 BE AAS
パッチ適用作業中、、、。 < live22
284: root▲ ★ 2006/04/30(日) 19:26:17 ID:???0 BE AAS
外部ﾘﾝｸ:ftp.peko.2ch.net
285: root▲ ★ 2006/04/30(日) 19:39:30 ID:???0 BE AAS
作業完了。< @live22
286: root▲ ★ 2006/04/30(日) 19:46:34 ID:???0 BE AAS
で、libthr 復活してみるか。 < @ live22
287: root▲ ★ 2006/04/30(日) 19:48:05 ID:???0 BE AAS
/etc/libmap.conf を元に戻して(有効にして)、
httpd と bbsd を再起動した。 < live22
288(1): ﾉtasukeruyo 2006/04/30(日) 20:15:15 ID:PUxuVcKTO携(1)調 AAS
やはりp2から書き込んでいないのに末尾Pになると悲しくなるのは修正効きませんか？
KDDI-HI31 UP.Browser/6.2.0.5.c.1.100 (GUI) MMP/2.0
289: root▲ ★ 2006/04/30(日) 20:20:57 ID:???0 BE AAS
>>288
それは「公式p2から書き込んでいないのに末尾Pになる」ということですか。
290: 動け動けウゴウゴ２ちゃんねる 2006/04/30(日) 21:02:33 ID:oNtMiNwU0(1)調 AAS
ID末尾に機種判定が出ない板で、たまたま末尾がPになっただけだったりして
291: root▲ ★ 2006/04/30(日) 21:59:25 ID:???0 BE AAS
PowerDNS recursor 3.0.1
外部ﾘﾝｸ[html]:downloads.powerdns.com
外部ﾘﾝｸ:blog.netherlabs.nl
高パフォーマンスか。
試してみる価値はあるかも。
live22系での使用とかを考えると、レイテンシが高いといいかな。
292(2): 株価【650】 ▲ ◆cZfSunOs.U 2006/04/30(日) 22:24:59 ID:JM7KsuHS0(1)調 AAS
mutex が怪しい？
void *apr_atomic_casptr(volatile void **mem, void *with, const void *cmp)
{
void *prev;
#if APR_HAS_THREADS
apr_thread_mutex_t *lock = hash_mutex[ATOMIC_HASH(mem)];
CHECK(apr_thread_mutex_lock(lock));
prev = *(void **)mem;
if (prev == cmp) {
*mem = with;
}
CHECK(apr_thread_mutex_unlock(lock));
#else
prev = *(void **)mem;
if (prev == cmp) {
*mem = with;
}
#endif /* APR_HAS_THREADS */
return prev;
}
293(1): root▲ ★ 2006/04/30(日) 22:35:34 ID:???0 BE AAS
ex11, ex14 にも適用しておこう。< 上記Apache2.2のパッチ
294(1): root▲ ★ 2006/04/30(日) 22:42:49 ID:???0 BE AAS
>>292
ううむこれって、特に高負荷時に apr_thread_mutex_{,un}lock() が怪しい動きをする、
という話なのかしら。
295: root▲ ★ 2006/04/30(日) 23:10:09 ID:???0 BE AAS
>>293 done.
296(1): 263 2006/05/01(月) 07:02:25 ID:S0NHnq+v0(1)調 AAS
全OS対応の汎用パッチも作ってみました。
このパッチでも、Apacheが落ちずに使えてます。
>>292 >>294
下記パッチで修正されることから考えるに、apr_atomic_casptr()自身よりも
その使い方に問題があると思われます。
apr_atomic_casptr()が成功した場合、new_recycleがキューにpushされたということであり、
一旦キューに入ったからには、apr_atomic_casptr()からreturnしてきた段階で、
既にpopされて別のところで使われているかもしれません。
そういう意味で、new_recycle->nextを比較演算子の右辺として使うのは
よろしくないんじゃないかと思います。
なお、このパッチは汎用なので、
FreeBSDの場合は >>277-278 のパッチを使用した方がちょっとだけ速いです。
--- server/mpm/worker/fdqueue.c.origMon May 1 05:56:14 2006
+++ server/mpm/worker/fdqueue.cMon May 1 06:08:02 2006
@@ -95,10 +95,10 @@
sizeof(*new_recycle));
new_recycle->pool = pool_to_recycle;
for (;;) {
- new_recycle->next = queue_info->recycled_pools;
+ struct recycled_pool *prev;
+ prev = new_recycle->next = queue_info->recycled_pools;
if (apr_atomic_casptr((volatile void**)&(queue_info->recycled_pools),
- new_recycle, new_recycle->next) ==
- new_recycle->next) {
+ new_recycle, prev) == prev) {
break;
}
}
@@ -163,7 +163,7 @@
* now nonzero, it's safe for this function to
* return immediately.
*/
- if (queue_info->idlers == 0) {
+ while (queue_info->idlers == 0) {
rv = apr_thread_cond_wait(queue_info->wait_for_idler,
queue_info->idlers_mutex);
if (rv != APR_SUCCESS) {
297: root▲ ★ 2006/05/01(月) 11:33:07 ID:???0 BE AAS
>>296
おつです。
外部ﾘﾝｸ:ftp.peko.2ch.net
を更新しました。
FreeBSDのやつは、こちらにリネームしました。
外部ﾘﾝｸ:ftp.peko.2ch.net
で、今 live22 を見ると、また core dump していました。
通常状態でのものなので原因違うかもですが、一応。
298: root▲ ★ 2006/05/01(月) 11:34:11 ID:???0 BE AAS
(gdb) info threads
130 Thread 0x809c000 (LWP 100274) 0x2828a833 in read () from /lib/libc.so.6
129 Thread 0x809c500 (LWP 100368) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
128 Thread 0x809c600 (LWP 100369) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
127 Thread 0x809c700 (LWP 100371) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
126 Thread 0x809c800 (LWP 100374) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
...
67 Thread 0x81de400 (LWP 101244) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
66 Thread 0x81de500 (LWP 101248) 0x28289973 in poll () from /lib/libc.so.6
65 Thread 0x81de600 (LWP 101252) 0x28289973 in poll () from /lib/libc.so.6
...
23 Thread 0x8241000 (LWP 101964) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
22 Thread 0x8241100 (LWP 101965) 0x2828a4b3 in kill () from /lib/libc.so.6
21 Thread 0x8241200 (LWP 101966) 0x282884d3 in _umtx_op ()
from /lib/libc.so.6
...
299: root▲ ★ 2006/05/01(月) 11:35:01 ID:???0 BE AAS
2 Thread 0x8262500 (LWP 102200) 0x28289973 in poll () from /lib/libc.so.6
1 Thread 0x8262600 (LWP 102201) 0x2828a593 in accept () from /lib/libc.so.6
(gdb) thread 22
[Switching to thread 22 (Thread 0x8241100 (LWP 101965))]#0 0x2828a4b3 in kill
() from /lib/libc.so.6
(gdb) where
#0 0x2828a4b3 in kill () from /lib/libc.so.6
Cannot access memory at address 0xb8d92a3c
(gdb)
ううむ。
300(1): root▲ ★ 2006/05/01(月) 11:48:27 ID:???0 BE AAS
signal 10問題、簡単なまとめ
1) 通常状態で散発的に発生(全サーバ)
httpd子プロセスの一つが散発的にsignal 10で落ちる
負荷にあんまり関係ないっぽい
2) 高負荷状態で集中的に発生(live22)
httpd子プロセスがたくさんsignal 10で落ちる
高負荷時に発生している模様
ということで上のほうのパッチで 2) が直るといいかなと。
301: 動け動けウゴウゴ２ちゃんねる 2006/05/01(月) 13:04:06 ID:J451Dwo00(1)調 AAS
>>300
1)はたぶん虫さんでしょうね・・・・
libcの虫さんでなければいいのですけど。
302: root▲ ★ 2006/05/01(月) 14:30:49 ID:???0 BE AAS
6.1-RC2
%uname -a
FreeBSD banana273.maido3.com 6.1-RC2 FreeBSD 6.1-RC2 #3: Sun Apr 30 22:25:34 PDT 2006 root@banana273.maido3.com:/var/src/sys/i386/compile/I386_BANANA_61 i386
303: ◆TWARamEjuA 2006/05/01(月) 16:13:09 ID:0P9UpqgV0(1)調 BE AAS
RCといえば、やっと取れたみたい（苦笑）@ProFTPD 1.3.0
304(1): 動け動けウゴウゴ２ちゃんねる 2006/05/01(月) 17:45:34 ID:bDtDitjaO携(1)調 AAS
thttpdはcgiをBasicサポトしてます。
というのを知ったがどうにも私ゃ知らん。
明日からCプログラミングを習います、はい。
305: root▲ ★ 2006/05/01(月) 18:46:43 ID:???0 BE AAS
>>304
thttpd をバックエンドで試してみる、という選択肢はあるかもですね。
If-Modified-Since やら差分転送やらが、きちんと動くのかがポイントかしら。
306(1): 動け動けウゴウゴ２ちゃんねる 2006/05/01(月) 20:49:31 ID:6BqJQb+40(1)調 AAS
Apache 2.0.58と2.2.2がリリースされました。
外部ﾘﾝｸ[html]:www.apache.org
外部ﾘﾝｸ[html]:www.apache.org
2.2.2のほうはmod_proxyにいっぱい修正が入ってます。
307: root▲ ★ 2006/05/02(火) 01:36:41 ID:???0 AAS
>>306
%cat /usr/ports/www/apache22/distinfo
MD5 (apache22/httpd-2.2.2.tar.bz2) = 9c759a9744436de6a6aa2ddbc49d6e81
SHA256 (apache22/httpd-2.2.2.tar.bz2) = 51f8e00ca27ba4d4259daeff30ce6efcdcf086d277ffb7130e215b492a6f77cc
SIZE (apache22/httpd-2.2.2.tar.bz2) = 4851887
MD5 (apache22/apr_dbd_mysql.c) = 59d26a91cb7f1492fea9ab3e6cd054fc
SHA256 (apache22/apr_dbd_mysql.c) = db204a0e9a89620bf890985383b637d201b418002a0976a2476c0c58783cc3a3
SIZE (apache22/apr_dbd_mysql.c) = 18999
対応早。< ports
ぼちぼち、入れてみるか。
308(1): root▲ ★ 2006/05/02(火) 11:59:02 ID:???0 BE AAS
./srclib/apr/dso/unix/dso.c と
./server/mpm/worker/fdqueue.c へのパッチは、
そのまま必要がありそうですね(変わっていない)。
食事の後ででも、ごにょごにょと。
309: root▲ ★ 2006/05/02(火) 13:39:02 ID:???0 BE AAS
live22 を Apache 2.2.2 + >>308 のパッチに更新した。
310(1): root▲ ★ 2006/05/02(火) 16:47:50 ID:???0 BE AAS
電源ですが、各方面からの情報により以下のことがわかりました。
1) 現在、以下のサーバが同じ主幹(MasterSwitch)からとられている。
live22, live22x1, live22x2, live22x3, live22x4, live22x5, cobra2247(= live22-2 候補),
news19, hobby7
2) この主幹の電源は現在、ほぼおなかいっぱいの状態である。
3) live22x4, live22x5, cobra2247 は現在遊んでいる。
フル稼働させるには、電源系統のリアレンジが必要と考えられる。
4) XOロケーションには、余裕のある主幹が別にある。
311: root▲ ★ 2006/05/02(火) 16:50:52 ID:???0 BE AAS
で、最初は、news19 と hobby7 の XO 外への移設を考えていました。
しかし、今後これらのサーバもかなり近い近未来に雪だるまの一員になることが
じゅうぶんありうるのかなと、思いました。
ということで現在サービスインしていない 3) のサーバ3台を、
4) の主幹に移動するのが、いちばんよい気がしてきました。
問題なければ、この路線で Jim さんと Ryan さん(現地電源関係担当)に、
相談してみようかなと。
312(1): ◆FUGOUFZVvA 2006/05/02(火) 18:42:21 ID:nbzYhXHXP(1/2)調 AAS
これは、ひどいと思う。2chｽﾚ:hosting
313(1): root▲ ★ 2006/05/02(火) 18:48:44 ID:???0 BE AAS
pid 92982 (httpd), uid 2001: exited on signal 10
pid 92988 (httpd), uid 2001: exited on signal 10
pid 92987 (httpd), uid 2001: exited on signal 10
pid 92992 (httpd), uid 2001: exited on signal 10
pid 92984 (httpd), uid 2001: exited on signal 10
pid 94520 (httpd), uid 2001: exited on signal 10
pid 23880 (httpd), uid 2001: exited on signal 10
pid 92983 (httpd), uid 2001: exited on signal 10
pid 92986 (httpd), uid 2001: exited on signal 10
pid 92989 (httpd), uid 2001: exited on signal 10
pid 92990 (httpd), uid 2001: exited on signal 10
pid 23822 (httpd), uid 2001: exited on signal 10
pid 23763 (httpd), uid 2001: exited on signal 10
pid 92994 (httpd), uid 2001: exited on signal 10
pid 12481 (httpd), uid 2001: exited on signal 10
pid 92995 (httpd), uid 2001: exited on signal 10
pid 24104 (httpd), uid 2001: exited on signal 10
pid 92980 (httpd), uid 2001: exited on signal 10
いつもの現象か。
Apache 2.2.2 + patch でも、発生すると。
314: root▲ ★ 2006/05/02(火) 18:51:13 ID:???0 BE AAS
>>312
ここのスレでの話題ではないので、
sec2chd 方面でたんたんと報告していただければと。
315(1): 動け動けウゴウゴ２ちゃんねる 2006/05/02(火) 18:53:49 ID:gD/Ndbla0(1/2)調 AAS
>>313
corefileも、やっぱり同じ感じで役に立たないですか?
316(1): root▲ ★ 2006/05/02(火) 18:56:41 ID:???0 BE AAS
>>315
状況は全く同じですね。
まだ core 一つしか調べてないですが。
今の方針は明確に「勝ちに行く」なので、
修正が入っているはずの、最新の OS にバージョンアップをする予定。
ゴールデンウィーク明けまでに 6.1R が出ない場合、
6.1-RC2 でいこうと。
317(1): 動け動けウゴウゴ２ちゃんねる 2006/05/02(火) 19:01:01 ID:gD/Ndbla0(2/2)調 AAS
>>316
なるほど。
ちなみに、gdb で in kill 状態のスレッドで
info frame
info registers
したら、どんな感じなんでしょう?
318: ◆FUGOUFZVvA 2006/05/02(火) 19:16:34 ID:nbzYhXHXP(2/2)調 AAS
了解しました
319(1): モーマン☆鯛。 2006/05/02(火) 20:08:27 ID:BKSQN1/Z0(1)調 BE AA×
>>310
320(1): root▲ ★ 2006/05/02(火) 22:38:10 ID:???0 BE AAS
>>319
> 電源について,主幹と有りますが,そう呼んでしまうとトランス2次側からの電源が別系統で と
> 受け取ってしまいます。
すみませんです。
私の電気屋的知識は、所詮門前のなんたら。
> 要は「分電盤のブレーカーに空きがある」ということで良いのかしら？
です。
> という具合に3系統に分けられると,フロントが落ちた時以外は冗長化が容易では無いかと。
なるほどです。
ただまだ全貌を掌握しているわけではないので、
まずは一歩ずつ進めていこうかなと。
321(2): root▲ ★ 2006/05/02(火) 22:44:54 ID:???0 BE AAS
>>317
(gdb) thread 73
[Switching to thread 73 (Thread 0x81d5e00 (LWP 101639))]#0 0x2828b4b3 in kill
() from /lib/libc.so.6
(gdb) info frame
Stack level 0, frame at 0xbc0c5a40:
eip = 0x2828b4b3 in kill; saved eip Cannot access memory at address 0xbc0c5a3c
(gdb) info registers
eax 0x0 0
ecx 0xc3ae7fec -1011974164
edx 0xf7f5 63477
ebx 0xa 10
esp 0xbc0c5a3c 0xbc0c5a3c
ebp 0xbc0c5a58 0xbc0c5a58
esi 0x285c5000 677138432
edi 0x3c9 969
eip 0x2828b4b3 0x2828b4b3
eflags 0x200296 2097814
cs 0x33 51
ss 0x3b 59
ds 0x3b 59
es 0x3b 59
fs 0x3b 59
gs 0x1b 27
322(3): root▲ ★ 2006/05/02(火) 22:46:45 ID:???0 BE AAS
(gdb) thread 14
[Switching to thread 14 (Thread 0x8249900 (LWP 100922))]#0 0x2828b4b3 in kill
() from /lib/libc.so.6
(gdb) where
#0 0x2828b4b3 in kill () from /lib/libc.so.6
Cannot access memory at address 0xb858aa3c
(gdb) info frame
Stack level 0, frame at 0xb858aa40:
eip = 0x2828b4b3 in kill; saved eip Cannot access memory at address 0xb858aa3c
(gdb) info registers
eax 0x0 0
ecx 0xab590bbd -1420227651
edx 0xf7f5 63477
ebx 0xa 10
esp 0xb858aa3c 0xb858aa3c
ebp 0xb858aa58 0xb858aa58
esi 0x285b2000 677060608
edi 0xa7 167
eip 0x2828b4b3 0x2828b4b3
eflags 0x200296 2097814
cs 0x33 51
ss 0x3b 59
ds 0x3b 59
es 0x3b 59
fs 0x3b 59
gs 0x1b 27
323(1): root▲ ★ 2006/05/02(火) 22:47:44 ID:???0 BE AAS
とりあえず、二つ分。
324: モーマン☆鯛。 2006/05/03(水) 02:05:49 ID:mXyjWaNd0(1)調 BE AAS
>>320
> ただまだ全貌を掌握しているわけではないので、
> まずは一歩ずつ進めていこうかなと。
あいあい。いまはそれで。
325(6): 動け動けウゴウゴ２ちゃんねる 2006/05/03(水) 04:45:06 ID:qpNDFpsT0(1/3)調 AAS
>>321-323
情報どうもです。
ちょっとだけ光が見えてきたような気がします。
こうなるとVMのマップ状態が知りたくなってくるんですが、
/usr/ports/sysutils/procmap を使用して、現在稼働中のhttpdのマップ状態を
見ることは可能でしょうか?
なお、procmapはprocfsを必要としますので、現在mountしてないのでしたら、
一時的にでもmountする必要があります。
あと、kern.dflssiz, kern.maxssiz, kern.sgrowsiz等は設定されてますでしょうか?
また、Apacheの設定でThreadStackSizeは設定されてますでしょうか?
326(4): 動け動けウゴウゴ２ちゃんねる 2006/05/03(水) 11:48:39 ID:qpNDFpsT0(2/3)調 AAS
あと、>>321-322 のcoreについて、以下の方法でトレース可能か試してみてください。
>>321について、ebpが0xbc0c5a58なので、そこからebpの流れを追ってみる。
(gdb) p/x *0xbc0c5a58
$1 = 0xXXXXXXXX
(gdb) p/x *0xXXXXXXXX <- 上記で表示されたアドレスを入力
$2 = 0xYYYYYYYY
(gdb) p/x *0xYYYYYYYY <- 上記で表示されたアドレスを入力
...
これを10回程度繰り返す。
327(3): 動け動けウゴウゴ２ちゃんねる 2006/05/03(水) 11:53:27 ID:qpNDFpsT0(3/3)調 AAS
次に、>>326の結果を利用して、関数呼び出しの流れが取得可能か試す。
(gdb) p/a *(0xbc0c5a58 + 4)
$11 = ...
(gdb) p/a *(0xXXXXXXXX + 4)
$12 = ...
(gdb) p/a *(0xYYYYYYYY + 4)
...
うまくいけば、関数名が表示されると思います。
328(1): root▲ ★ 2006/05/03(水) 12:19:26 ID:???0 BE AAS
tiger503, tiger507 and cobra2247 の3台は本日電源系統移動作業の予定。
さきほど私のほうで halt -p を実行し、作業可能を伝えました。
>>325
ありがとうございます。
本日中にやってみるです。 < procmap
> あと、kern.dflssiz, kern.maxssiz, kern.sgrowsiz等は設定されてますでしょうか?
> また、Apacheの設定でThreadStackSizeは設定されてますでしょうか?
このへんはデフォルトのままです。
というか、スタックオーバーフローの疑いですか。
>>325-327
これも別途やってみるです。
329: む P211018235141.ppp.prin.ne.jp 2006/05/03(水) 18:57:25 ID:IAaJAFY00(1)調 AAS
外からですが、
見ていると、プロセスあたりのスレッド数が32の時のほうが、パフォーマンスは出るような感じですね。
でもそれだと、虫を踏んだ時にLAがめちゃくちゃ上がって、瀕死状態になってしまうと。
330: root▲ ★ 2006/05/04(木) 00:55:46 ID:???0 BE AAS
まずは。
live22、signal 10 でのダウン(虫ふみ)多数。
別途解析すすめる予定。
live22, live22x1 は重くなった局面あり。
プライベート接続側の受信バッファがあふれた模様。
May 3 02:30:34 <0.4> tiger2522 kernel: em1: RX overrun
May 3 02:47:17 <0.4> tiger2522 kernel: em1: RX overrun
May 3 05:04:32 <0.4> tiger2522 kernel: em1: RX overrun
May 3 05:00:00 <0.4> tiger2523 kernel: em1: RX overrun
May 3 05:00:00 <0.4> tiger2523 last message repeated 2 times
live22x2 特に異常なし。
live22x3 リブートかかった模様、原因不明(メッセージなし)。
それとは別にこんなメッセージが。
やや不吉なるも、とりあえず経過観察。
May 3 08:49:50 <0.2> tiger2525 kernel: ad0: TIMEOUT - READ_DMA retrying (1 retry left) LBA=94099079
331: root▲ ★ 2006/05/04(木) 00:59:08 ID:???0 BE AAS
ex14は大きな破綻なしか。
cobra、強いなぁ。
332: root▲ ★ 2006/05/04(木) 01:04:09 ID:???0 BE AAS
live22x3、また変なリブート入った。
おかしいな。
333: root▲ ★ 2006/05/04(木) 01:09:46 ID:???0 BE AAS
live22x3 は、ログインして状況確認中。
メールチェックしてきます。
作業終わっているといいな。
334: root▲ ★ 2006/05/04(木) 01:12:16 ID:???0 BE AAS
live22x3、いけませんね。
受付嬢の設定変えて、フロントエンドからはずします。
335: root▲ ★ 2006/05/04(木) 01:18:07 ID:???0 BE AAS
live22x3 は、ハードウェアトラブルっぽいですね。
いろいろ手配します。
matd の設定いじって、とりあえずフロントエンドからはずしました。
336: root▲ ★ 2006/05/04(木) 01:21:59 ID:???0 BE AAS
live22x4, live22x5, cobra2247(= live22-2 予定)
電源移設作業完了したとの連絡が入りました。
ということで、雪だるま作戦本格再開です。
OSバージョンアップ、設定仕込み等、たんたんとすすめるということで。
337: root▲ ★ 2006/05/04(木) 01:44:53 ID:???0 BE AAS
tiger2525(= live22x3)、remote KVM でチェックしました。
HDD コントローラからエラー出まくり。
HDD or HDD コントローラがあぼーんした模様。
tiger503/507/cobra2247 の作業ありがとうメールに、
tiger2525 の緊急対応を依頼しました。
# ちなみに、tiger2525 はフロントの1台なので、
# 仮に HDD 完全あぼーんでも、交換して OS 入れれば問題なし。
338: root▲ ★ 2006/05/04(木) 02:51:54 ID:???0 BE AAS
tiger2525 (= live22x3) は、HDD あぼーんとのこと。
HDD 交換・OS 再インストールで中の人と調整中。
339: root▲ ★ 2006/05/04(木) 04:19:44 ID:???0 BE AAS
もののけ姫までに、
・live22x3 復活 & フロントに再投入
・live22x4, live22x5, live22-2 投入 with FreeBSD 6.1-RC2 or 6.1R
・live22, live22x[12] OS バージョンアップ + Apache 更新
をめざすことにしよう。
340: root▲ ★ 2006/05/04(木) 04:31:13 ID:???0 BE AAS
>>325-327 は、ちと予想外の障害対応のため、明日にでも。
(core は保存しました)
今日は、そろそろこのへんで。
341: root▲ ★ 2006/05/04(木) 16:52:48 ID:???0 BE AAS
過去ログ(NFS経由)を、すいているlive22のパブリック側で
アクセスするようにしてみた。
342: root▲ ★ 2006/05/04(木) 17:44:32 ID:???0 BE AAS
live22x4, live22x5 をフロントに再投入。
・OS は 6.1-RC2
%uname -a
FreeBSD tiger507.maido3.com 6.1-RC2 FreeBSD 6.1-RC2 #0: Wed May 3 23:09:45 PDT 2006 root@tiger507.maido3.com:/var/src/sys/i386/compile/I386_TIGER_61 i386
・Apache 2.2.2 + patch + worker MPM + libthr
・カーネルパッチ(FD_SETSIZE) とりあえず導入せず
・PREEMPTION とりあえず有効
343: root▲ ★ 2006/05/04(木) 17:49:52 ID:???0 BE AAS
以降の予定
cobra2247 稼動
フロントエンドを切り替えつつ、バージョンアップ
バックエンドバージョンアップ(この際にはサービス停止)
344: root▲ ★ 2006/05/05(金) 00:31:20 ID:???0 BE AAS
cobra2247、バージョンアップの準備していたら
いきなりハングアップした。
KVM 画面もフリーズしている模様。ううむ。
345: root▲ ★ 2006/05/05(金) 00:36:27 ID:???0 BE AAS
見たところ、カーネルパニックしている模様。
ううむ。
ちょっと、しらべてみます。
346: root▲ ★ 2006/05/05(金) 00:38:20 ID:???0 BE AAS
savecore: reboot after panic: spin lock held too long
ううむ、これって。
347(1): root▲ ★ 2006/05/05(金) 00:43:25 ID:???0 BE AAS
いったん single CPU の kernel に替えてみるか。
なんだかだけど。
348(1): ◆BFzK/mtqM2 2006/05/05(金) 00:49:56 ID:qTv6eOEO0(1/2)調 AAS
>>347
まだソースがガシガシ更新されているから虫がいるんですかね？
349: root▲ ★ 2006/05/05(金) 00:54:57 ID:???0 BE AAS
>>348
まだ 6.0R のままなんですよ。< cobra2247
make buildworld の間に panic したという。
ほぼ同じハードウェア構成で 6.0R な ex14 はちゃんと動いているので、
ハードウェア障害の予感も。
350: root▲ ★ 2006/05/05(金) 00:57:11 ID:???0 BE AAS
カーネル作っている間にまた固まった、、、。 < cobra2247
351(1): ◆BFzK/mtqM2 2006/05/05(金) 00:59:00 ID:qTv6eOEO0(2/2)調 AAS
メモリかな？
352: root▲ ★ 2006/05/05(金) 00:59:51 ID:???0 BE AAS
しばらく待ってだめなら、リブート要請を再度出すということで。
(さっき一度出したのですが、その後ちゃんとパニックしてくれたので
いったんキャンセルした)
353: root▲ ★ 2006/05/05(金) 01:00:58 ID:???0 BE AAS
>>351
ありえますが、、、。どうなんだろう。
354: root▲ ★ 2006/05/05(金) 01:06:29 ID:???0 BE AAS
だめなようですね。
リブート要請します。< cobra2247
355(2): root▲ ★ 2006/05/05(金) 02:35:24 ID:???0 BE AAS
>>325
> あと、kern.dflssiz, kern.maxssiz, kern.sgrowsiz等は設定されてますでしょうか?
> また、Apacheの設定でThreadStackSizeは設定されてますでしょうか?
外部ﾘﾝｸ[html]:httpd.apache.org
スタックオーバー風呂ということなら、
大きくする、という手はあるのかも。
356: root▲ ★ 2006/05/05(金) 02:35:57 ID:???0 BE AAS
>>355
ありゃ、変な変換。
ま、いっか。もちょっとしたらお風呂の時間で。
357(3): root▲ ★ 2006/05/05(金) 03:21:47 ID:???0 BE AAS
<IfModule mpm_worker_module>
ThreadStackSize 262144
StartServers 64
ServerLimit 64
ThreadLimit 32
ThreadsPerChild 32
MaxSpareThreads 2048
MinSpareThreads 2048
MaxSpareThreads 2048
MaxRequestsPerChild 32000000
MaxMemFree 64000
</IfModule>
にしてみた。< live22
前に read.cgi のことをやった時に、確か SunOS さんが
65536 がデフォルトって言っていたっぽいような気がするので、
とりあえずスタックサイズを4倍にしてみたつもり。
358: root▲ ★ 2006/05/05(金) 03:27:19 ID:???0 BE AAS
%uname -a
FreeBSD tiger2524.maido3.com 6.1-RC2 FreeBSD 6.1-RC2 #0: Thu May 4 10:04:11 PDT 2006 root@tiger2524.maido3.com:/home/src/sys/i386/compile/I386_TINYTIGER_61 i386
@ live22x2
359(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 03:33:44 ID:b3qevcS80(1/10)調 AAS
>>357
FreeBSD 6.x のデフォルトのスレッドスタックサイズは1MBです。
360(1): root▲ ★ 2006/05/05(金) 03:40:32 ID:???0 BE AAS
>>355 >>357
リンク先を読んでみると、
スレッドスタックサイズのデフォルト値が比較的小さく設定されている プラットホーム
(例えば HP-UX) では、自動変数用の領域で大きな容量を 使用するサードパーティ製
モジュールのために Apache がクラッシュする 場合もあります。そのモジュールは他の
プラットホームでは スタックサイズが大きいために、快調に動作するかもしれません。
このタイプのクラッシュは、ThreadStackSize で OS のデフォルト値より大きな値を指定
することで解決します。 サードパーティ製モジュールでこの処置が必要であると記載
されている 場合か、Apache の出力するメッセージでスレッドスタックサイズが
小さすぎると指摘されている場合にのみ、この調整をしてください。
デフォルトスレッドスタックサイズが、Web サーバ用途に必要な量よりも 明らかに
大きすぎる場合、ThreadStackSize を OS のデフォルト値よりも小さな値にすることで、
子プロセスあたりの スレッド数をより多く持たせられるようになります。 このタイプの
調整は、テスト環境でウェブサーバを完全に テストできる場合に限って行なうべきです。
まれに多数のスタックが要求されるリクエストを受けることがあるかも しれないからです。
Web サーバの設定を変更すると、現在の ThreadStackSize の設定が取り消される
場合があります。
…ううむ、大きくするのがよいのか、小さくするのがよいのか。
あるいは実はあまり効果がないのか。
とりあえず、今は >>357 にしておくか。
361(1): root▲ ★ 2006/05/05(金) 03:41:15 ID:???0 BE AAS
>>359
1000000 かな。それとも 1048576 ?
362(1): ◆SSu.zv/rvs 2006/05/05(金) 03:42:26 ID:BMUb5uVP0(1/13)調 AAS
スタックは誰が使うスタックですか?
363(1): root▲ ★ 2006/05/05(金) 03:43:14 ID:???0 BE AAS
だんだん、思い出してきました。
前は、dso 版 read.cgi でこの局面になったですね。
auto 変数で 512M のバッファとかとっていて、
それが Apache 2.0 の worker MPM ではうまく動かなかったんでした。
ちょっと、過去ログを見てみるか。
364: root▲ ★ 2006/05/05(金) 03:43:39 ID:???0 BE AAS
>>362
httpd の 1 スレッドのはず。
365: ◆SSu.zv/rvs 2006/05/05(金) 03:44:36 ID:BMUb5uVP0(2/13)調 AAS
512M?
366(1): root▲ ★ 2006/05/05(金) 03:44:46 ID:???0 BE AAS
で、>>363 は、
SunOS さんのアドバイスで、apr_palloc() を使って動的にとるようにして、
解決したのでした。
367: root▲ ★ 2006/05/05(金) 03:45:11 ID:???0 BE AAS
× 512M
○ 512K
368(1): ◆SSu.zv/rvs 2006/05/05(金) 03:45:41 ID:BMUb5uVP0(3/13)調 AAS
それはヒープ? >>366
369(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 03:46:14 ID:b3qevcS80(2/10)調 AAS
>>361
外部ﾘﾝｸ[diff]:www.freebsd.org
なので、1048576。
あと、64bit だと2MBがデフォルトですね。
65536は、5.4までのデフォルト。
(5.5は6.xと同じになるみたいです)
370(1): ◆SSu.zv/rvs 2006/05/05(金) 03:46:50 ID:BMUb5uVP0(4/13)調 AAS
私の中ではスタックは 1M はあるという意識で組んでいたり、
371: root▲ ★ 2006/05/05(金) 03:47:02 ID:???0 BE AAS
read.cgi の件は、これですね。
read.cgi再開発スレ Part2
2chｽﾚ:operate あたり。
372: root▲ ★ 2006/05/05(金) 03:47:29 ID:???0 BE AAS
>>368
そのはずです。
向こうの read.cgi スレでやったはず。
373: root▲ ★ 2006/05/05(金) 03:48:29 ID:???0 AAS
>>369
なるほど、5.4R までのデフォルトと変わっているですか。
>>370
そんなわけで、64k しかなかったと。
374(1): ◆SSu.zv/rvs 2006/05/05(金) 03:49:05 ID:BMUb5uVP0(5/13)調 AAS
1スレッドのスタックとすると
.dso 等にはどれくらいの残りがあるんですかねぇ
375: root▲ ★ 2006/05/05(金) 03:49:50 ID:???0 AAS
ということは、これではないっぽい、、、のかな。
あるいは 1M にしたことが、副作用を呼んでいるのか。< live22x
# ってことは、Apacheのドキュメントにあるように
# あえて少なくする(5.4Rの時のように)ことも、ありなのかしら。
376: root▲ ★ 2006/05/05(金) 03:50:31 ID:???0 AAS
>>374
ん、ちとはっきりとはわからんです。
(そこに来るまでにどこまで消費されているか、ってことですね)
377(1): ◆SSu.zv/rvs 2006/05/05(金) 03:52:50 ID:BMUb5uVP0(6/13)調 AAS
どれだけ同時に起動されていて
どのように使っているのかわからないので、一概には言えないけど、
もと 65536 を read.dso に渡していたならそれを巨大にするのはかなり危険かも、
ただし Apache等で必要ならまた別の話ですが、
378: root▲ ★ 2006/05/05(金) 03:55:19 ID:???0 AAS
>>377
live22 は read.cgi 動いてないですが、
フロントにも同じことがいえるのかもですね。 < read.cgi の話
で、FreeBSD 6.0R で変わった(でかくなった)とすると、
そこの部分を元のように＊減らして＊みる、というのは、
意味があることなのかも。
379: root▲ ★ 2006/05/05(金) 04:00:46 ID:???0 BE AAS
FreeBSD 6.0R では、こうか。
/*
* Miscellaneous definitions.
*/
#define THR_STACK_DEFAULT (sizeof(void *) / 4 * 1024 * 1024)
380: root▲ ★ 2006/05/05(金) 04:02:22 ID:???0 BE AAS
SunOS さんが試したのは、5.3R か。
read.cgi再開発スレ Part2
2chｽﾚ:operate
5.4R まで … 一律64K
6.0R, 5.5R 以降 … 32bit だと 1M 、64bit だと 2M
ということですか。
381: root▲ ★ 2006/05/05(金) 04:06:27 ID:???0 BE AAS
…ということは今の設定(>>357)は結果として、
1スレッドあたりのスタックサイズを 1/4 にしたことになるのかな。
382: root▲ ★ 2006/05/05(金) 04:08:33 ID:???0 BE AAS
という前提で >>360 を読むと、
> ThreadStackSize を OS のデフォルト値よりも小さな値にすることで、
> 子プロセスあたりの スレッド数をより多く持たせられるようになります。
が、とても気になりますね。
383: ◆SSu.zv/rvs 2006/05/05(金) 04:10:12 ID:BMUb5uVP0(7/13)調 AAS
なるのではないかと、
384(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 04:11:39 ID:b3qevcS80(3/10)調 AAS
通常、減らすのは、
ThreadsPerChild に 3000 とか、大きな値を指定する場合で、
普通なら減らす必要はないと思います。
385: root▲ ★ 2006/05/05(金) 04:11:53 ID:???0 BE AAS
つまり、これで試してみることには、おおいに意味があるかもしれないと。
386: root▲ ★ 2006/05/05(金) 04:13:39 ID:???0 BE AAS
>>384
ふむ、、、。
でも問題きりわけのためには、意味があるのかもですね。< 今の設定
387(1): ◆SSu.zv/rvs 2006/05/05(金) 04:14:06 ID:BMUb5uVP0(8/13)調 AAS
スタック使いすぎでスワップが発生しているなら意味があるのではないかなぁ
そうでないなら意味ないと思う
388: root▲ ★ 2006/05/05(金) 04:14:42 ID:???0 BE AAS
>>387
メモリは余裕ある状態と思います。< live22
389(1): ◆SSu.zv/rvs 2006/05/05(金) 04:15:39 ID:BMUb5uVP0(9/13)調 AAS
「スタック使いすぎで」はランボーないい方か、
子供たちにスタックを与えすぎて合計のメモリが逼迫しているならってことです
390(1): root▲ ★ 2006/05/05(金) 04:24:09 ID:???0 BE AAS
…さて、そんななか明日以降の予定。
○ live22x4, live22x5 フロントに再投入(済)
○ live22x2 OS・Apache 更新(済)
・live22x3 復活 & フロントに再投入
・live22-2 (= cobra2247) 投入 with FreeBSD 6.1-RC2 or 6.1R => まずは問題解決しないと
・live22, live22x1 OS バージョンアップ + Apache 更新
391: root▲ ★ 2006/05/05(金) 04:27:02 ID:???0 BE AAS
>>389
なるほど。そういう意味ですか。
…このへん、状況の整理が必要そうですね。
>>325 >>328 の kern. なんたらの話も含めて。
で、今日はちとエネルギー切れという感じです。
といったわけで、そろそろ店じまいの時間で。
392(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 04:31:56 ID:b3qevcS80(4/10)調 AAS
>>325は私の書き込みですが、
procmapを使用して、VMのマッピング状態をみることにより、
Cannot access memory at address 0xXXXXXXXX の
0xXXXXXXXX がマッピングされているのか、
そのアドレスがスレッドスタック領域内か付近か見たかったわけです。
FreeBSDはgrow stackを使用するので、スレッドスタックが1MBだとしても、
最初は128kの領域しか取りません。以後は必要において1MBまで拡張されます。
通常の状態であれば、procmapを使って稼働中のhttpdの状態を見たときは、
下の方に多くの128kの領域があるはずです。
もし、スタックが拡張されていれば128k+拡張された領域が見えます。
393(2): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 04:36:01 ID:b7udRDHi0(1/3)調 AAS
スタックを小さくするのは、単にアドレス空間の枯渇を防ぐためですよ。
例えば某OSのデフォルトだと、スタックは1スレッドあたり10M程。
ということは、32bit環境では、どんなに頑張っても
400スレッド(事実上200以下)しか出来ないわけですね。
これを増やすために、1スレッドのサイズを減らすということで。
394(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 04:37:17 ID:b3qevcS80(5/10)調 AAS
kern.dflssiz, kern.maxssiz, kern.sgrowsiz は、
これらを設定した方が良いという意味ではなくて、
設定することにより動きが変わってくるので、確認の意味で書きました。
特に、kern.sgrowsizは、上記の最初の128kというサイズに影響を与えます。
kern.dflssiz, kern.maxssiz は、limit などで表示されるスレッドの制限に
影響を与えますが、これは最初の main スレッドの制限なので、
worker の場合はあまり関係ありません。
395(1): ◆SSu.zv/rvs 2006/05/05(金) 04:38:00 ID:BMUb5uVP0(10/13)調 AAS
ちなみに、今話しているのはPentinumなマシンなんですよね?
396: 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 04:51:09 ID:b3qevcS80(6/10)調 AAS
>>393
そうですね。
FreeBSDはi386(32bit)だと、デフォルトのサイズは1MBなので、
デフォルトでは2500弱のスレッドしか作れないです。
よって、ThreadsPerChildもそのあたりが限界。
もし、ThreadsPerChildを3000とかにすると、pthread_create()が失敗するので、
Apacheが起動できません。
397: 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 04:55:53 ID:b3qevcS80(7/10)調 AAS
>>395
それは、amd64(64bit)ではなくて、i386(32bit)の話という意味でしょうか?
398: ◆SSu.zv/rvs 2006/05/05(金) 04:56:31 ID:BMUb5uVP0(11/13)調 AAS
x86といったほうがいいのだろか、
399: 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 05:01:22 ID:b3qevcS80(8/10)調 AAS
設定うんぬんということならば、
同じFreeBSDである限り、i386でもamd64でも変わらないでしょうが、
amd64だとVMのアドレス空間が莫大になるので、
アドレス空間の枯渇の問題は、ほぼ起こらないと思っていいでしょう。
400: root▲ ★ 2006/05/05(金) 05:03:40 ID:???0 BE AAS
おふろを出ると、話が進んでいるですね。
>>392
ふむふむ。
>>393
なるほど、わかってきました。
>>394
そういうことでしたか。
401(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 05:07:55 ID:lGySeUIB0(1)調 AAS
なんか「おいでよどうぶつの森」の博物館の
フクロウさんを思い出したのは内緒です。
402(1): 動け動けウゴウゴ２ちゃんねる 2006/05/05(金) 05:10:59 ID:b3qevcS80(9/10)調 AAS
あと、kern.sgrowsizを設定しているかどうかにより、
Red Zone が作成されるかどうかにも影響を与えます。
FreeBSDは Thread A のスタックと Thread B のスタックの間に
Red Zone と呼ばれるアクセス読み書き不可の領域をわざとつくり、
Thread A が Thread B のスタックを破壊するのを防ごうとします。
ただ、grow stack のせいで、デフォルトの設定だと
Red Zone が作成されないんですね。
kern.sgrowsizの設定を尋ねたのは、Red Zone が作成される設定になっているか
確認する意味もありました。
403(1): root▲ ★ 2006/05/05(金) 05:13:54 ID:???0 BE AAS
>>402
なるほど、
ということは、Red Zone を作る設定にすると、grow stack ではなくなる、
ということですか。
>>401
そのこころは、、、。
404(1): ◆SSu.zv/rvs 2006/05/05(金) 05:15:07 ID:BMUb5uVP0(12/13)調 AAS
なんか 何十年たっても結局同じ話をしているんだなぁ
面白いっすね、
これからプログラムを書こうという人は是非ここを学んで欲しいと思ったりなんかして、
hehehe
上下前次1-新書関写板覧索設栞歴
あと 597 ﾚｽあります
ｽﾚ情報 赤ﾚｽ抽出 画像ﾚｽ抽出 歴の未読ｽﾚ
ぬこの手 ぬこTOP 0.037s