プロダクションで2年間Redis Clusterを運用してみて - Qiita
TL;DR Redis Clusterで運用は本当に楽になった でも、Redis 4.0は不安 Redis Clusterで一番怖いのはDisk IO 特にフェイルオーバーなどのFull Resync時 Redisとは？ 高速なインメモリ型のKVS シングルスレッド 豊富なデータ構造(次ページにて詳細) 豊富な操作(次々ページにて詳細） 豊富なデータ構造 key-value型 hash型(key-field-value) set型(集合演算ができる) sorted set型(スコア付きset) 任意の型(redis modules機能) 豊富な操作 インクリメントや和集合などなど lua scriptも実行できちゃう シングルスレッドだからatomicな処理になる Redisの問題点 writeがスケールしない 気軽に停止できない サーバー再起動やバージョンアップなど Redis Clus
MySQL Clusterが苦手とするJOINを如何にして克服するべきか。
シェアードナッシング型の負荷分散機能を持ち、なおかつ同期レプリケーションによるHA機能まで備えたMySQL Cluster最大の弱点といえば、JOINの遅さであろう。MySQL ClusterのJOINは偽りなく遅い。JOINを多用するアプリケーションでMySQL Clusterを利用するのはある意味マゾヒスティックな行為であると言えよう。何故MySQL ClusterはJOINが遅いのか？それはMySQL Clusterが分散データベースだからである。 ご存じの通り、MySQLにおけるJOINのアルゴリズムにはNested Loopしかない。他のストレージエンジンを利用していればそれでも十分実用に耐えうるぐらい高速なのだが、MySQL Clusterの場合はそうはいかない。JOINでは自ずとストレージエンジンからデータをフェッチする回数が増えるが、MySQL Clusterの場合レコード
連載記事 「Linuxクラスタリングへの招待」
【 pidof 】コマンド――コマンド名からプロセスIDを探す （2017/7/27） 本連載は、Linuxのコマンドについて、基本書式からオプション、具体的な実行例までを紹介していきます。今回は、コマンド名からプロセスIDを探す「pidof」コマンドです。 Linuxの「ジョブコントロール」をマスターしよう （2017/7/21） 今回は、コマンドライン環境でのジョブコントロールを試してみましょう。X環境を持たないサーバ管理やリモート接続時に役立つ操作です 【 pidstat 】コマンド――プロセスのリソース使用量を表示する （2017/7/21） 本連載は、Linuxのコマンドについて、基本書式からオプション、具体的な実行例までを紹介していきます。今回は、プロセスごとのCPUの使用率やI/Oデバイスの使用状況を表示する「pidstat」コマンドです。 【 iostat 】コマンド――I
Acorn Software Technologies:システム開発
１００万ダウンロードユーザに対応するMySQL Clusterシステム （MySQL Cluster + UltraMonkey） Acorn Software Technologies社は、今回、MySQL Clusterを使ったWebシステムの負荷分散と高可用性を実現する機会に恵まれたので、その構築の背景や構築作業、結果について紹介する。 新たな携帯向けサービスのプロジェクトの立ち上げに携わる機会を得た。今までの経験から、運用開始後のノンストップ性と処理能力のスケーラビリティ（ユーザ数増加と処理の複雑性増大に対する耐レスポンスタイム劣化性）を重視しMySQL Clusterを選択した。 MySQL Clusterは、In-memoryのデータベースなのでデータベースの容量に制限があるが、当該サービスでは大きな容量を必要としないことから問題とはならなかった。負荷分散システムに関しては
Sys Admin > v15, i04: MySQL 5.0 Cluster: Architecture, Implementation, and Management
CD-ROM Sys Admin and The Perl Journal CD-ROM version 12.0 Version 12.0 delivers every issue of Sys Admin from 1992 through 2006 and every issue of The Perl Journal from 1996-2002 in one convenient CD-ROM! Order now! SysAdminMag.com MySQL 5.0 Cluster: Architecture, Implementation, and Management Norm Collins Today's networks and applications are concentrating more on high availability a
［MySQLウォッチ］第28回 MySQL 5.1期待のクラスタリング機能
数カ月前にMySQL 5.1 GA版 のリリース見通しを5月と記述したが，残念ながら下半期に突入した現在もBata版にとどまっている。バージョン5.0から5.1へのアップは，番号としてはポイント以下のマイナー・バージョンアップだ。しかし，非常に大きな期待を持って待っているユーザーも多いだろう。それは，MySQL 5.1 からMySQL Clusterがストレージ対応になるからだ。 今回は，MySQL 5.1 GA版 のリリース準備として，期待の高まるMySQL Clusterのストレージ対応を紹介する。 MySQL Cluster の登場 もともとMySQL Clusterは，NDB Clusterという商品だったものをMySQL ABが自社製品として取り込み，MySQL 4.1.3 (RPM版はMySQL 4.1.10)から実装が始まった。それ以前は，標準機能のReplicationかサ
日本OSS推進フォーラム
1.開発基盤WGの目的 開発基盤WGの活動目的は「サーバLinux、OSSの更なる普及・拡大のためのベンダサイドの課題解決」です。 企業内にあるOSSに関するノウハウをオープン化し、安心してOSSを使えるような環境作りを目指しています。 2.設立の背景 OSSの実システムへの適用が、Linuxだけでなく、ミドルウェアにまで拡大していることで、OSSを適用したシステムが複雑化しています。 それにもかかわらず、OSSでビジネスを展開するベンダサイドでは、 性能・信頼性などのシステム設計・構築に必要なデータが不足しており、結果として、各社が同じような評価を実施している 障害解析ツールが不足しており、原因究明に時間がかかる といった問題が発生しています。 そこで、開発基盤WGでは、次のような考え方で活動を展開しています。 (1)ベンダ共同のOSSの性能・信頼性評価により、
MySQL Cluster - hirohama.wiki
はじめに 2004年4月のMySQL Users Conference(米国オーランド)でMySQL Clusterが公になって以来、開発チームとの技術交流、MySQL Cluster開発者による日本での5日間トレーニング受講（関係者のみ）、デブサミでプレゼン発表のお手伝い、IPAでのクラスタ機能検証及びベンチマーク計測などを通して細く長く付き合ってきたMySQL Clusterの備忘録。 Open Source Conference 2005のセッション「MySQL Cluster」PPT作成お手伝い Linux World 2005にてMySQL Clusterデモンストレーション(7台のサーバ使用) MySQL Users Conference 2004, 2005, 2006参加 5日間のMySQL Clusterオフィシャルトレーニング参加 様々なソース（メール、電話会議、MLな
カイハツニッキ(2006-06-17) - MySQL 5.1.xの新機能
_ [ソフトウェア] MySQL 5.1.xの新機能 昨日の勉強会(というか懇親会)で、MySQL 5.1の新機能のお話になって、「そういえばなんとなく知らないなー、新機能」と思ったのでとりあえずオフィシャルな資料を眺めて見ました(http://www.mysql.com/why-mysql/white-papers/whatsnew-mysql-51.pdf)。ざっと要約すると イントロダクション ウェブサービス、エンタープライズ、データウェアハウスいずれにおいても有用な感じに進歩しています データウェアハウス テーブル/インデックスのパーティショニング RANGE(指定された値の範囲で分割) CREATE TABLE employees ( id INT NOT NULL, fname VARCHAR(30), lname VARCHAR(30), hired DATE NOT NUL
Sys Admin > MySQL 5.0 Cluster: Architecture, Implementation, and Management
CD-ROM Sys Admin and The Perl Journal CD-ROM version 12.0 Version 12.0 delivers every issue of Sys Admin from 1992 through 2006 and every issue of The Perl Journal from 1996-2002 in one convenient CD-ROM! Order now! Norm Collins Today's networks and applications are concentrating more on high availability and redundancy. Corporations are selling services to customers with a "guarantee",
What is a Cluster Filesystem?
This is a short taxonomy of the kinds of distributed filesystems you can find today (Febrary 2004). This was assembled with some help from Garth Gibson and Larry Jones. Distributed filesystem - the generic term for a client/server or "network" filesystem where the data isn't locally attached to a host. There are lots of different kinds of distributed filesystems, the first ones coming out of resea
Network Security - Internet Security Consulting
MySQL Cluster Server Setup Version 1.0 - 2/11/2005 by LOD Communications, Inc. +1 (800) 959-6641 support@lod.com Introduction MySQL Cluser Server is a fault-tolerant, redundant, scalable database architecture built on the open-source MySQL application, and capable of delivering 99.999% reliability. In this paper we describe the process we used to setup, configure, and test a three-node mySQL clust
A Googly MySQL Cluster Talk
A Googly MySQL Cluster Talk - 55 min - Apr 28, 2006 Google engEDU - www.google.com () Rate: Google TechTalks April 28, 2006 Stewart Smith Stewart Smith works for MySQL AB as a software engineer working on MySQL Cluster. He is a...all » Google TechTalks April 28, 2006 Stewart Smith Stewart Smith works for MySQL AB as a software engineer working on MySQL Cluster. He is an active member of the free
MySQL :: Developer Zone
"The Documents contained within this site may include statements about Oracle's product development plans. Many factors can materially affect Oracle's product development plans and the nature and timing of future product releases. Accordingly, this Information is provided to you solely for information only, is not a commitment to deliver any material, code, or functionality, and should not be reli
How To Set Up A Load-Balanced MySQL Cluster
How To Set Up A Load-Balanced MySQL Cluster Version 1.0 Author: Falko Timme This tutorial shows how to configure a MySQL 5 cluster with three nodes: two storage nodes and one management node. This cluster is load-balanced by a high-availability load balancer that in fact has two nodes that use the Ultra Monkey package which provides heartbeat (for checking if the other node is still alive) and ldi
O'Reilly Media - Technology and Business Training
More than 5,000 companies count on our digital courses and more to guide their teams through the tools and technologies that drive business outcomes. We can help yours too. New AI policy for O’Reilly authors and talent O’Reilly president Laura Baldwin shares the company’s ethical approach to leveraging GenAI tools and ensuring O’Reilly experts are compensated for their work. See it now It’s time t
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
MySQL Cluster導入のケーススタディ 公開用
http://spamlink.dnsalias.com/blog/wp-content/uploads/2006/05/060425.LarsThalmann.ReplicationFeatures1.pdf
http://www.hirohama.biz/data/MySQL_Cluster%25uFFFD%25u030D%25u0153K%8D%5C%90%AC0531.pdf
http://hartmut.homeip.net/cluster-config/?computers=2&cpus=1&memory=8&replica=1