[B! postgreSQL] koemuのブックマーク

koemu id:koemu

postgreSQLに関するkoemuのブックマーク (15)

[postgres]大容量メモリかつOSがRHEL(CentOS)6系をお使いの方、THPのdefragは止めた方が良いですよ - Qiita
[postgres]大容量メモリかつOSがRHEL(CentOS)6系をお使いの方、THPのdefragは止めた方が良いですよPostgreSQLCentOS6 概要とある日、postgresが稼働しているサーバのリプレースを行ったところ、 CPUのsysがスパイクしてpostgresが数十秒ほど処理不可となり、ひどい目にあったという話です。 ※この環境はCentOS6.8で、postgresは9.4でも8.2でも同現象が発生しました原因は"THP(Transparent Huge Page)"というOSの機能に関連したdefrag(compaction alloc)処理により、CPUリソースが枯渇したためでした。検証したところ、以下の状況が重なるとsysスパイク現象が起きてしまう様です。サーバの搭載メモリが大きい(たとえば200GB以上) 継続的にトランザクションが発生する TH
koemu 2016/12/07
Red Hat独自実装らしいのでPostgreSQLをCentOS, RHELを使うときは要注意

postgreSQL

Linux
リンク
バックアップと障害復旧から考えるOracle Database, MySQL, PostgreSQLの違い
バックアップと障害復旧から考えるOracle Database, MySQL, PostgreSQLの違い
koemu 2016/07/19
バックアップ

postgreSQL

MySQL

Oracle
リンク
PostgreSQLアンチパターン
PostgreSQLモニタリングの基本とNTTデータが追加したモニタリング新機能（Open Source Conference 2021 Online F...NTT DATA Techno logy & Innovation
koemu 2015/11/28
論理削除のアカンさを説明するのに良い資料

sql

postgreSQL

コツ
リンク
(JP) GPGPUがPostgreSQLを加速する
http://www.insight-tec.com/dbts-tokyo-2014.html -------- CPU/GPUという特性の異なるプロセッサの得意分野を組み合わせて費用・電力対性能の向上を狙うヘテロジニアス計算技術は、近年の半導体技術のトレンドの一つです。本セッションでは、SQLワークロードのうちCPU負荷の高いロジックをGPUにオフロードする事で安価に検索処理の高速化を実現するPostgreSQL用の拡張モジュール PG-Strom と、GPGPUをはじめとする周辺技術についてご紹介します。
koemu 2014/11/14
線形検索を力技でやるのか…なるほど。

GPU

postgreSQL
リンク
もうひとつの「PostgreSQL Internals」技術文書が公開されました
最近、精力的にPostgreSQL関連の検証や技術情報の公開をしている日本HPさんから、「PostgreSQL Internals」という技術文書がPDFで公開されました。日本HP ITサービス「HP OPEN SERVICES」 http://h50146.www5.hp.com/services/ci/opensource/ 上記ページの下の方に「PostgreSQL エンジニア向け！ストレージ内部構造および内部動作検証報告」というタイトルのPDFファイルをダウンロードすることができます。 PostgreSQL エンジニア向け！ストレージ内部構造および内部動作検証報告 http://h50146.www5.hp.com/services/ci/opensource/pdfs/PostgreSQL_Internals.pdf 章レベルで目次を抜き出すと以下のような内容になっています。本文
koemu 2014/07/24
postgreSQL
リンク
Pgpool-IIの接続性能の改善 | Let's POSTGRES
SRA OSS, Inc. 日本支社石井　達夫はじめに本記事は2013年のPostgreSQL Advent Calendar の 12/17 の記事です。pgpool-IIに多数のクライアント同時に接続すると、極端にレスポンスが落ちることがあります。ここではその原因と改善方法について考えます。 pgpool-IIはpre-fork型のアーキテクチャ pgpool-IIは、複数のPostgreSQLを使ったクラスタシステムを構築できるミドルウェアです。pgpool-IIでは、num_init_childrenというパラメータの数だけあらかじめプロセスを起動(pre-fork)しておきます。クライアントからの接続要求があると、そのプロセスの一つがカーネルから選択され、クライアントからの接続を受付けて、処理を開始します。これはApacheなどと同じ方式で、あらかじめプロセスをフォークして
koemu 2013/12/18
somaxconnに注意。memcachedとかほかのミドルでも気をつけないと行けないけど、改めて。

postgreSQL

pgpool
リンク
Amazon Web Services – RDBMS in the Cloud: PostgreSQL on AWS
koemu 2013/07/04
postgreSQL

AWS
リンク
sqlmap: automatic SQL injection and database takeover tool
Introduction sql map is an open source penetration testing tool that automates the process of detecting and exploiting SQL injection flaws and taking over of database servers. It comes with a powerful detection engine, many niche features for the ultimate penetration tester and a broad range of switches lasting from database fingerprinting, over data fetching from the database, to accessing the und
koemu 2013/03/18
SQLインジェクションチェック

MySQL

postgreSQL

DB

セキュリティ

テスト
リンク
独り言v6 » PostgreSQL 7.3から9.1までベンチを取ってみた。
PostgreSQL Advent Calendar参加作品です。ネタはいろいろ考えたんだけど、例えばnode.js+plv8jsでjavascriptだけで遊ぶとか、なんかちょっとしたライブラリ書くとか、アイデアはあれど風邪を引いて実行力がないので手抜きにしました。単にpgbench取りました。ただし手元にあったwubi+ubuntu8.10(新しいバージョンは何故かうちのマシンで動かなかったので何故か古い）でコンパイルできるバージョンを片っ端からインストールするというネタをかましました。本当はWAL導入前の6.5までいきたかったけど、7.2でpg_hba.cがエラーで入らず、直そうかと思ったが手間をかけたくないし断念。実験概要以下のバージョン（全てマイナーバージョンは最終版）を同一マシンにインストールし、挙動を比較する。 7.3 7.4 8.0 8.1 8.2 8.3 8.4
koemu 2011/12/22
postgreSQL

分析

負荷対策
リンク
Let'sプログラミング
Let'sプログラミングでは初心者の方を対象にJavaやPython、PHP、Rubyなど色々なプログラミング言語の解説を行っています。 Java Java入門これからJavaを使ったプログラミングの習得を目指している方を対象としたチュートリアルですサーブレット(Servlet) / JSP入門サーバサイドで動作するアプリケーションの作成方法 Androidプログラミング入門モバイル向けプラットフォーム Android で動くアプリの作成 Swingを使ってみよう GUIを使ったJavaアプリケーションの作成で使用するSwing入門です Eclipse入門開発環境として広く使われているEclipseのインストールと活用法 Javadocの記述ソースコードからHTML形式の仕様書を生成します Apache POIでExcelを操作 Excelファイルの作成・操作
koemu 2008/02/14
特にSQLite

開発

postgreSQL

MySQL

SQLite

DB
リンク
Ywcafe.net
Ywcafe.net This Page Is Under Construction - Coming Soon! Why am I seeing this 'Under Construction' page? Related Searches: Accident Lawyers 10 Best Mutual Funds Healthy Weight Loss Top 10 Luxury Cars All Inclusive Vacation Packages Trademark Free Notice Review our Privacy Policy Service Agreement Legal Notice Privacy Policy
koemu 2007/11/19
postgreSQL

コツ
リンク
【ハウツー】PostgreSQLの高速化と高信頼化を実現する「pgpool-II」を使ってみる (1) pgpool-IIの概要 | エンタープライズ | マイコミジャーナル
pgpool-IIの概要「pgpool-II」とは、PostgreSQLの高速化と高信頼化を目的としたミドルウェアである。pgpool-IIは、下図のようにクライアントとPostgreSQLの間に入る形(プロキシ形式)で動作する。なお、データベースクライアントはPostgreSQLサーバへ接続するのではなく、pgpool-IIへ接続することになる。 pgpool-IIは現在、pgpool Development Groupにより開発が継続されている。ライセンスには修正BSDライセンスを採用しており、ソースコードが公開されているので自由に利用することができる。ソースコードはhttp://pgfoundry.org/projects/pgpoolからダウンロードすることができる。なお、2007年10月1日現在のpgpool-IIの最新バージョンは1.2.1である。 pgpool-IIはさまざ
koemu 2007/11/08
オンライン復旧機能は大きい

postgreSQL

システム構築

ITインフラ
リンク
VACUUM FULLとREINDEXとファイルサイズ — NPO法人日本PostgreSQLユーザ会
by 柴田淳 — posted at 2006-02-22 08:03 last modified 2006-12-04 12:41 「アレどうなったんですか？」といろんな人にツッコミを受け続けて早2ヶ月（くらい？）。帰ってきた「水曜日シリーズ」です。記念すべき復帰第一弾は「VACUUMとREINDEX」です（第一弾だけで終わりませんように・・・）。ファイルサイズは、データベースのパフォーマンスに大きな影響を与えます。ファイルのサイズを可能な限り抑えることが、パフォーマンスの向上に役立ちます。そこで今回は、VACUUMとファイルサイズ、そしてREINDEXとの関係を見ていきたいと思います。まず、pgbenchで最初にデータを作成してみます（いきなりですが）。 % pgbench -i pgbench creating tables... 10000 tuples don
koemu 2007/08/03
REINDEXしないとインデックス領域はシェイプアップ不可能

postgreSQL

運用

チューニング
リンク
【コラム】Yet Another 仕事のツール (27) pgpoolの障害検出と縮退運転 | エンタープライズ | マイコミジャーナル
koemu 2007/03/12
pgpool障害復旧手順

postgreSQL

障害
リンク
[ThinkIT] 第1回：PostgreSQL と MySQL の紹介 (1/4)
共に本連載執筆開始時点での最新安定バージョンですが、ある特定のバージョンに特化した内容を記述する予定はないため、基本的にはPostgreSQLはバージョン8.1系、MySQLはバージョン5.0系の内容としてご理解ください。また、PostgreSQL／MySQLともに様々なOS上で動作可能ですが、特に断りのない場合はLinux版となります。 PostgreSQLは、1980年頃にUCB（カリフォルニア大学バークレイ校）の研究プロジェクトにて開発されたPOSTGRESというRDBMSが前身です。その後、1995年に同校の大学院生によりPostgres95としてリリースされ、現在の開発チームであるThe PostgreSQL Global Development Groupがこの開発を引き継いだのは1996年です。その際に、名称がPostgreSQLに改名され、ソースコードを公開し、現在もコミ
koemu 2006/09/05
それぞれのデータベースの比較

postgreSQL

MySQL

導入
リンク
1