Squidでv4アクセス優先を強制する
IPv6関連の話が（一部で）盛り上がってきてるし、実際にIPv6アドレスでのアクセスが出来るWebサイトもちらほら出てきているんだけど、なぜかIPv4/IPv6のデュアルスタックなWebサーバなはずなのに、IPv6だとアクセスに失敗するサイトが、ちらほらとあるのがわかってきた。 どっちかというと、Webサイト側の問題であることが多いのだけど、Squidでアクセス先がIPv4/IPv6デュアルスタックであっても、v4でのアクセスを優先するように出来るので、備忘録的にメモ。 設定自体は、3.1以降で ”dns_v4_first" というパラメータを "on" にすればいいと、squid.confには書いてあるんですが、 # TAG: dns_v4_first # With the IPv6 Internet being as fast or faster than IPv4 Internet
Squidのボトルネックを探す - labunix の ラボゆにっくす
■squidclientの統計情報を確認する。 ※squid+squidguardの環境。 最初のヒット時だけ変に遅いのが気になった。。。 それ以外は快速。 ■squidclientの導入。 ※Windows版squidには「bin」配下にあり、同じように使える。 > bin\squidclient.exe $ apt-cache search ^squidclient squidclient - フル機能のウェブプロキシキャッシュ (HTTP プロキシ) - 制御ユーティリティ ■隠し属性の制御系のコマンドは使いません。 $ sudo squidclient mgr: | grep -v public config Current Squid Configuration hidden shutdown Shut Down the Squid Process hidden reconfig
nginx+squidで画像キャッシュサーバーの作り方 - hideden.hatenablog.com
仕事で画像キャッシュサーバーを構築した時のメモ。大規模事例の設定例が検索してもあまり見つからなかったので同じような境遇の誰かの参考になれば。 ピーク時のトラフィックは数Gbps 画像総容量は数十TB バックエンドのstorageが複数種類 規模とアクセス量とアクセスされる画像の種類が多いので、squidでdisk cacheを使用するとCOSS等を使用してもdiskIOで詰まる為、全てon memory cache。cache容量を確保する為に必然的にcacheサーバーの台数も数十台。 1. squidをsibling構成で並列に並べる cache_peer 10.0.1.1 sibling 80 3130 no-query no-digest proxy-only cache_peer 10.0.1.2 sibling 80 3130 no-query no-digest proxy-o
エックスサーバー サーバー初期ページ
このウェブスペースへは、まだホームページがアップロードされていません。 早速、エックスサーバー上へファイルをアップロードしてみましょう。 アップロードの方法などは、サポートマニュアルをご参照ください。
Squid→Squidへ の多段プロキシ - それマグで！
squid で上位プロキシへクライアントからの要求を転送 Squid を使ってプロキシサーバを使っています。すべての通信はProxy経由にしてます。そのほうがIP固定できて楽だしね。 proxy.example.ac.jpをSquidの上位とする。 普段使っているSquidが、さらに上位のSquidを参照するようにする。 cache_peer proxy.example.ac.jp parent 8080 7 no-query never_direct allow all Squid にさらにSquidを参照させるメリットはあるのかと言われてば、もはやIP隠蔽工作以外にはあまりにメリットがないような気もしますが、リバースプロキシや、画像のキャッシュなどなら意味はあると思います。 設定したら、squid 再起動 わたしは、独自ビルドのSquidを使っているので、再起動こんな感じ。ふつうなら、
3000req / sec と戦う - だるろぐ
ざっくり概要 ピークで3000req / sec 毎分コンテンツ更新要求 コンテンツ更新の際は他所からデータをapi経由で受け取る コンテンツ更新にはTheSchwartzを使用 なコンテンツを色々してきたログ。 尚、ここに書く技術は大半が周囲のギークな方々にサポートしてもらったもので、僕自身が何かしたわけではない。残念すぎる。 構成 internet -> www(squid -> apache) -> app(memcached -> app) -> db フロントエンド wwwサーバがapacheとsquidを動かしている。apacheがリクエストを受け、squidのキャッシュが有ればそれを返し、無ければバックエンドのappサーバへproxy。 バックエンド appサーバがmemcachedとアプリを動かしている。 それぞれ冗長化してるけど、リクエスト数の割に台数は少ない。 技術があ
Squid - Users - Bug 2973 - Memory leak when handling pathless http requests
I just filed a new bug and wondered if anyone here had seen a similar problem or had any suggestions about how to track down the possible memory leak. * http://bugs.squid-cache.org/show_bug.cgi?id=2973 There seems to be quite a bad memory leak in the way Squid handles HTTP requests which do not contain a path. For example, one of our customers Squid servers, deployed in transparent mode, is receiv
HTTPSプロキシの仕組み - ソフトウェアエンジニア現役続行
例えば、以下のようなネットワークを考えます。 ┌──────────┐ ┌─────────┐ ┌───────────┐ │ クライアントＰＣ │ ＜───＞ │ プロキシサーバ │ ＜───＞ │ ＨＴＴＰＳサーバ │ └──────────┘ └─────────┘ └───────────┘ 192.168.1.40 192.168.1.2 https_server.jp(1.1.1.1) HTTPSサーバはインターネット上にあり、プロキシサーバとHTTPSサーバの間にはルータがあるものとします。 プロキシサーバ経由でHTTPSの通信を行う場合は、以下のようなリクエストを発行し、プロキシサーバに接続先のHTTPSサーバから公開鍵と証明書を転送するように、指示を行います。 CONNECT s
squidでキャッシュを無効にする設定 - 元RX-7乗りの適当な日々
久しぶりにsquidを触ってみました。 (インストール＋設定したのって学生のとき以来かも) で、Proxyサービスとしてsquidを使っていて、かつProxyのキャッシュを無効化したいといった設定をしたい場合はどうするかのメモ。 # 単にProxyとして利用するだけで、キャッシュせず常に生データにアクセスしたいんだ！という特殊(？)な場合 答えは、以下のsquid公式のwikiに書いてありました。 http://wiki.squid-cache.org/SquidFaq/ConfiguringSquid#head-c1da1b7113875d4bb84170e3de291298cb1be7f3 内容は以下の通りです。 # squid.confに以下の何れかを追記/修正すべし。 no_cacheアクセスリストを使う方法 以下をsquid.confに追記/修正する。 (上記のwikiの記述通り
Curs Favorite Things » Squid + IE6 で 2GB以上のファイルがDLできない
先日、IE6とsquidの組み合わせで2GB以上のファイルが ダウンロードできないという問題が発生しました。 今は、IE6を使用している人も少ないと思いますが、調査した内容を備忘録として残しておきます。 この組み合わせで2GB以上のファイルがダウンロードできない原因はkeep-aliveがsquidとIEの間で有効になっていたことです。 webサーバ側でkeep-aliveが有効になっていなくても、squidで有効になっていると結果として以下のマイクロソフトの技術情報にあるバグに引っかかってしまいます。 (MS技術情報）Internet Explorer 6で2GB以上のファイルがダウンロードできない。 http://support.microsoft.com/kb/298618/ja IE6 + Squidを使用した場合の、httpの80ポートのパケットをキャプチャしたとこ
プログラミングの一般概念: プログラムの作成およびデバッグ - 大きなプログラムのサポート
この章の説明は、32 ビットのプロセスのみに当てはまります。デフォルトの 32 ビット・アドレス・スペース・モデルと 64 ビット・アドレス・スペース・モデルの詳細については、 プログラム・アドレス・スペースの概要および malloc サブシステムを用いたシステム・メモリーの割り当てを参照してください。 32 ビット・プロセスの仮想アドレス・スペースは、それぞれ別個のハードウェア・レジスターによってアドレッシングされている、 16 個の 256 メガバイト域 (またはセグメント) に分割されています。オペレーティング・システムは、セグメント 2 (仮想アドレス 0x20000000-0x2FFFFFFF) をプロセス専用 セグメントとして参照します。デフォルトでは、このセグメントにユーザー・スタックとデータ (ヒープを含む) が入れられます。プロセス専用のセグメントには、プロセスの u-b
ネットワークエンジニアのノート Squid起動後、すぐ落ちるトラブル
Squidのアップデート作業ではまってしまった。。 OSは、Solaris2.6です。 アップデート完了後にsquidを起動し、ps -ef | grep squid で確認したら、最初は正常に起動するが、しばらく経つと勝手に落ちてるって具合で正常に動作しません。 cache.logを見てみると、squid起動直後に FATAL: Received Segment Violation...dying と出力されていたので調べてみると、squidのコンパイル時に使用するgccのバージョン2.95.1から2.95.4にはコンパイラーの最適化の部分にバグがあるそうで、そのバグがsquidに影響し、最初のアクセスを受けた際に上記ログをはいて落ちるとのことです。。 # gcc -v で、gccのバージョンを調べてみると、「2.95.2」でビンゴでした。 このバグを避けるには最適化しないでコンパイルし
Squidの更新パターンでインターネットアクセスを高速化する | OSDN Magazine
帯域幅の制限は、インターネットに接続している多くの人にとって今なお残る問題の1つだ。しかし、プロキシキャッシュサーバSquidをネットワークにインストールし、設定パラメータを用いてバイトヒット率を上げれば、利用可能な帯域幅を3～6割近くも拡大できる。 Squidは、きめ細かいチューニングによってさまざまなニーズに対応できる。現行の安定版には少なくとも249個のパラメータがあり、丁寧なコメントが付いた設定ファイル（通常は「/etc/squid.conf」）は4,600行以上もある。このボリュームには、経験豊かな管理者でも圧倒されるだろう。設定の変更はすべてこのファイル上で行う。 1週間では一杯にならない（理想をいえば1か月以上持つような）大きなキャッシュがほしいところだ。実際に必要なサイズは、ネットワークのトラフィック量によって変わってくる。キャッシュのサイズが大きいほど、要求されたオブジェ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Squid/複数親プロキシ - PukiWiki
Registrant WHOIS contact information verification | Namecheap.com
Gmane -- Mail To News And Back Again
【大震災、そのとき技術者は】自治体のミラーサイトをコミュニティと協力して構築した日本マイクロソフト 「Windows Azure」で文部科学省の放射線情報サイトも
TAKESAKO @ Yet another Cybozu Labs: HTTP
ぱちもん駄文(2009-10-30)
http://www12.plala.or.jp/mitsunori/appli.html