Pound が Header Buffer を 2KByte しか確保しない不都合

Installノウハウ

20年前に書いた記事です。製品やサービスの情報は公開当時のものです。

目次(6項目)
  1. Pound を前段に置いた Web サーバの構成
  2. 欠陥は pound のヘッダ処理にある
  3. Cookie のサイズは RFC でどう決まっているか
  4. 原因は pound.h の MAXBUF
  5. 参考にしたページ
  6. 追記(2007年1月15日)

本業の Web サーバの構成について以前書いた記憶もあるのですが、Lighttpd や Apache2 の mod_proxy が流行る前に構築したこともあって、ちょっとだけ Pound が流行った?時によくある構成で組んでます。

Pound を前段に置いた Web サーバの構成

pound の下に apache1.3 (mod_perl) と apache 2.0 (static) がぶら下がる構成図

ザックリ図にしてみるとこんな感じになっています。前段の pound がリクエストを受けて、後ろの apache1.3 (mod_perl) と apache 2.0 (static) に振り分ける構成です。

で、前から薄々気がついてはいたのですが、この構成、致命的な欠陥があるんです。

欠陥は pound のヘッダ処理にある

その欠陥とは、pound の HTTP リクエストのヘッダ処理の実装にあります。

構成図にヘッダーサイズの上限を書き足した図。pound の入口は「MAX Header size 2K x 128」、pound と apache の間は「MAX Header size 8K (default)」

pound のソースは適当にしか読んでいないので、間違ってる可能性もありますが、図にするとヘッダーのサイズ最大値の処理がこんな感じになっています。後ろの apache はデフォルトで 8K まで受け取れるのに、入口の pound が受け取れるのは 2K × 128 個まで、ということです。

ヘッダーの中でサイズが大きいと言えば、Cookie しかないですね。その Cookie に関しては RFC 2109 (set-cookieについて)⁠(現在リンク切れ)と RFC 2965 (set-cookie2について)で定められています。恥ずかしながら set-cookie2 何てのは初めて知ったわけですが、ここでは一般的な set-cookie の仕様から実装仕様に関して RFC 2109 から抜粋しますと、

6.3 実装制限

実用的なユーザエージェント実装はそれらが保存できるクッキーのサイズや数に制限を持つ。一般的に、ユーザエージェントのクッキーサポートは固定した制限を持つべきではない。それらは可能な限り頻繁に使用されるクッキーを保存するよう努めるべきである。さらに、一般使用のユーザエージェントは個々に以下の最小容量を用意すべきであるが、すべて必要と言うわけではない。

  • 最低 300 個のクッキー
  • 一つのクッキーあたり最低 4096 バイト (Set-Cookie ヘッダの構文記述での非末期クッキーを構成する文字列のサイズによる評価)
  • 個々のホストもしくはドメイン名ごとに最低 20 個のクッキー

特定の目的もしくは制限された容量のデバイスに対して造り出されたユーザエージェントはユーザがセッションベースのオリジンサーバと相互に作用する事を保証するため、最低 4096 バイトの 20 クッキーを用意すべきである。

Set-Cookie レスポンスヘッダの情報はその完全体を保持しなければならない。もしクッキーを保存するために不十分な空間であるというような理由があれば、それは先頭を断ち切らずに破棄されなければならない。

アプリケーションは可能な限り少なく、小さなクッキーを使用すべきであり、クッキーの損失に潔くうまく対処すべきである。

と定められています。

これに照らし合わせると、Pound の実装は cookie の最大サイズ値 4KByte ってのが無視された実装になっています。早い話、2KByte 以上の Cookie 等の大きいヘッダーは途中でぶち切られるってことです。

自分で 2K 以上の Cookie を発行していなくても(通常は発行してないでしょう……)、複数のサービスが存在するポータル系みたいな場合、同じドメイン内の Cookie を合計すると意外と 2K なんてのはオーバーしてしまうものです。

原因は pound.h の MAXBUF

具体的にソースを見てみると、悪さをしているのは pound.h(pound 1系も pound 2系も同じです)であることがわかります。

#define MAXBUF      2048
#define MAXHEADERS  128

解決方法 → MAXBUF を 4096 にして再コンパイルすれば何も問題は発生しません。

ちなみに、ココまで辿り着くのは結構時間がかかりました。Apache の LimitRequestFieldSize ディレクティブの設定値がおかしいのか?それとも、Apache 1 系の mod_env.c とか mod_usertrack のソースでバッファの確保がおかしいのか?とか、Apache や mod_perl 側の実装を疑ってソースを読んでたので気が付きませんでした。

参考にしたページ

追記(2007年1月15日)

コメントで hnagoya さんから教えていただきました。Debian sarge でパッケージされている pound_1.8.2-1sarge1 では、MAXBUF を 8192 にする変更が入っているそうです。経緯は Debian のバグ報告 #293915 にあるとのことで、URL はコメント欄をどうぞ。

最終更新

コメント 1件

  1. hnagoya

    pound の情報調べていてこちらへやってきました。

    Debian sarge でパッケージされている pound_1.8.2-1sarge1 では
    MAXBUF 8192 という変更が入っていたのですが、こういう理由だったのですね。
    http://bugs.debian.org/cgi-bin/bugreport.cgi?bug=293915
    勉強になりました、どうもありがとうございます。

この記事へのコメントの受け付けは終了しています。