F1マシンのデータ分析を加速する SQL Server 2008 : F1通信
モータースポーツの規格を決める国際自動車連盟 (以下、FIA) から、すべてのレース用車両に搭載が可能な ECUの開発を委託された同社は、マイクロソフトとともに、年間で数テラバイトにものぼる ECUデータをより効率的に管理する方式の検討を始めました。その結果、データストレージのソリューションとして MicrosoftR SQL ServerR2008 を採用しました。 ［概要］ 国/地域 : イギリス 業種 : 製造業 ［プロファイル］ イギリスに本社を置くマクラーレン・エレクトロニック・システムズは、マクラーレン グループの電子機器サプライヤーです。信頼性と先端技術を併せ持つ自動車電子システムを供給しています。 ［ビジネス状況］ F1 マシンのエンジン・コントロール・ユニット (ECU) は年間2TB 以上のデータを収集します。この膨大なデータは以前、ファイルベースのストレージで管理され
新書籍「Linux-DBシステム構築/運用入門」
Linux上で「高速で、落ちない」DBサーバーを構築するための技術解説をした書籍を出版します。タイトルはストレートに「Linux-DBシステム構築/運用入門」です。 9月17日発売ですが、ジュンク堂など一部の書店ではすでに入荷しているそうなので、見かけたらぜひ読んでみてください。章構成は以下の通りです。 第1章 論理ボリュームマネージャ(LVM)を活用する 第2章 Heartbeatによるクラスタ環境の構築 第3章 DRBDによるネットワークミラーリング(前編) 第4章 DRBDによるネットワークミラーリング(後編) 第5章 高可用DBサーバーの構築 第6章 現場で使われる高可用構成 第7章 DBサーバーのパフォーマンス概論 第8章 インデックスのチューニング(前編) 第9章 インデックスのチューニング(後編) 第10章 DBサーバーのハードウェア選定 第11章 SSDの効果とアプリケーシ
Salesforceのデータベース - snippets from shinichitomita’s journal
すごい良い記事。 知られざる「マルチテナントアーキテクチャ」（2）～スケーラビリティのカギは組織ID － Publickey 知られざる「マルチテナントアーキテクチャ」（3）～スキーマとメタデータの謎 － Publickey 頼まなくてもこういう記事を書いてくれる人が増えている（頼まれてないっすよね？）のは、SFDCにとって、デベロッパーマーケティングとして成功だと思う。大事にしてくださいね。 スキーマについて 上記記事では、データベースの物理スキーマについて、公開情報をもとに分析されています。 掟破りのスキーマ セールスフォースのアプリケーションで扱われるすべての数字や文字のデータは、Dataテーブルに保存される。このことがセールスフォースのデータベーススキーマの核心です。 Dataテーブルはどんなデータでも受け入れられるよう、次のようなスキーマになっています。恐らく、データベースに詳し
Under the Covers of Google App Engine Datastore – Perspectives
Disclaimer: The opinions expressed here are my own and do not necessarily represent those of current or past employers. Recent CommentsJames Hamilton on Seagate HAMRDio Phung on Seagate HAMRJames Hamilton on Pat SelingerMark Gandy on Pat SelingerJames Hamilton on Seagate HAMRArie van der Hoeven on Seagate HAMRJames Hamilton on Pat SelingerPat Selinger on Pat SelingerJames Hamilton on Seagate HAMRJ
Detailed review of Tokutek storage engine
(Note: Review was done as part of our consulting practice, but is totally independent and fully reflects our opinion) I had a chance to take look TokuDB (the name of the Tokutek storage engine), and run some benchmarks. Tuning of TokuDB is much easier than InnoDB, there only few parameters to change, and actually out-of-box things running pretty well. There are some rumors circulating that TokuDB
平澤寿康の周辺機器レビュー Samsung SSD「MMDOE56G5MXP-0VB」～高速ランダムアクセスで大容量の256GB SSD
■平澤寿康の周辺機器レビュー■ 第14回 Samsung SSD「MMDOE56G5MXP-0VB」 ～高速ランダムアクセスで大容量の256GB SSD Samsungから、MLCタイプのNANDフラッシュを採用する高速SSD「MMDOE56G5MXP-0VB」が発表された。 シーケンシャルリード220MB/秒、シーケンシャルライト200MB/秒という高速なアクセス速度に加え、ランダムアクセス性能にも優れ、他社製SSDを凌駕するパフォーマンスを実現するとされており、かなり興味深い製品だ。今回、このSamsung製SSD「MMDOE56G5MXP-0VB」を試用する機会を得たので、パフォーマンス面を中心にチェックしていきたいと思う。 ●見た目は従来のSamsung製SSDとほぼ同じ 今回試用できた「MMDOE56G5MXP-0VB」は、MLC NANDフラッシュメモリを採用する、容量256G
Leo's Chronicle: ぜひ押さえておきたいデータベースの教科書
先日のエントリで少し話したのですが、僕が在学していたときの東大にはデータベースを学ぶためのコースというものがありませんでした（DB関係の授業は年に１つか２つある程度。現在はどうなんだろう？）。そんなときに役だったのは、やはり教科書。読みやすいものから順に紹介していきます。（とはいってもすべて英語の本です。あしからず） 一番のお薦めは、Raghu Ramakrishnan先生 (現在は、Yahoo! Research) の「Database Management Systems (3rd Edition)」。初学者から研究者まで幅広く使えます。データベース管理システム（DBMS）の基本概念から、問い合わせ最適化、トランザクション管理など、これらを実装・評価するために必要な、「DBの世界での常識」が、丁寧な語り口でふんだんに盛り込まれています。この1冊を読んでおけば、DBの世界で議論するための
Leo's Chronicle: XML時代の終焉 ~ XMLから再びCoddへ
先日、ACM SIGMODの日本支部大会に招いていただいて、「Relational-Style XML Query (ACM Portal http://doi.acm.org/10.1145/1376616.1376650)」について講演をしてきました。Relational-Style XML Queryは、XMLという複雑な構造をもったデータに対して、SQLのようなテーブルデータへの検索に使われる言語で問い合わせする手法です。 この研究の肝は、木構造データといわれるXMLでも、実はそのほとんどがリレーション(Microsoft Excelのようなテーブル形式のデータ）の組み合わせと考えることができ、そのテーブル構造の情報（スキーマ）を使うと、検索が非常に簡単に書けるという点です。
Stanford Trio Project
A System for Integrated Management of Data, Uncertainty, and Lineage Overview Trio is a new kind of database management system: one in which data, uncertainty of the data, and data lineage are all first-class citizens. Trio is based on an extended relational model called ULDBs, and it supports a SQL-based query language called TriQL. (See the online TriQL Language Manual.) A wide variety of applic
隠し球はDWHアプライアンス、HPのXeonサーバで驚異のパフォーマンス
「iPodなんて比較にならない。これならとてつもなくたくさんの楽曲を格納できる」── Oracleの創業者のひとりであり、今も製品開発に深く関与しているラリー・エリソンCEOは、同社初となるハードウェア製品を茶目っ気たっぷりに紹介した。 米国時間の9月24日、カリフォルニア州サンフランシスコで開催中の「Oracle OpenWorld San Francisco 2008」は3日目を迎え、Oracleの創業者のひとりであり、今も製品開発に深く関与しているラリー・エリソンCEOが午後のキーノートに登場した。 データベースやアプリケーションで新たなリリースがなかったこともあって、今回のOracle OpenWorldではこれまでメインホールが埋まることはなかったが、やはり役者が違うのだろうか。「重大発表あり」との予告も拍車をかけた。メインホールは1時間前から開場し、人の波はどんどんモスコーニセ
IT news, careers, business technology, reviews
Heads on: Apple’s Vision Pro delivers a glimpse of the future
日立システム、「インメモリ構造＋並列処理」の超高速DWHエンジンを販売
株式会社日立システムアンドサービス（以下、日立システム）は5月13日、独EXASOLが開発した次世代データウェアハウス（DWH）・エンジン「EXASolution」の日本語対応版を、9月1日から出荷すると発表した。 EXASolutionは、高速の検索性能を実現するインメモリデータベース（DB）。独自のインメモリDBMSと並列処理の技術により、TPC（Transaction Processing Performance Council）が公表したベンチマークで、世界最速に輝いた製品という。 複数のサーバーを並べることで、それぞれのメモリ空間を共有。インメモリDBMS技術でメモリ上での検索処理を可能にしているのが特長。また、データを分散配置することで、並列処理による高速化を実現している。単純にサーバー数を増やすことで性能アップが図れる上に、高価な専用ハードウェアを用意する必要はなく、汎用のイ
たけまる / Amazon's Dynamo is awesome!
_ Amazon's Dynamo is awesome! [dynamo][distributed][amazon] Amazon の Werner Vogels が発表した Dynamo の論文を (いまさら) 読ん でみたら，いたく感動しました．日本語で全体像を解説したページはない ようなので，簡単にですが紹介します． Dynamo について詳しく知りたい方は，論文を読んだときのメモ書き dynamo-memo.txt を置いておくので，参考にし てください． # いつもと違う話題だけど，じつはこっちのが本職っぽい [2007-08-30-1] Dynamo というのは，Amazon の膨大なデータを扱う分散 DBM のことで， 毎秒 500 リクエストに対して，99.9% を 300ms 以内にレスポンスするよ うに設計されている．その化け物のようなシステムの概要を紹介する． 一般
Demo 2007 Fallレポート【情報アクセス技術編】
NANDフラッシュを利用して大容量と高速アクセスを両立させた、Fusion-ioのioDrive。PCI Express x4で接続され、オンボード上に640GBのフラッシュを搭載する 会期：9月25日～26日(現地時間) 会場：Sheraton San Diego Hotel & Marina 「Enablers and Sea-Changers」と名付けられたセッションでは、情報にアクセスするための手段や技術、製品などのジャンルで、現在の製品の問題を解決に導くものが紹介された。それらを紹介していきたい。 ●PCI Express x4ボード上にフラッシュメモリを搭載するストレージ Fusion-ioがデモを行なった「ioDrive」は、フラッシュメモリを利用したストレージデバイスである。現在のストレージはDRAMを使用したメモリアクセスとのギャップが大きいが、高速でかつ容量の大きなデバ
MySQL Conference & Expo 2007 - とあるはてな社員の日記
一昨日から今日まで3日間の日程で開催されていた、MySQL Conference & Expo 2007に行ってきました。日帰り圏内どころか、自転車圏内で、こういうカンファレンスがあるのは、素晴しいです。 詳細は、随時アップされるであろうプレゼン資料と、Planet MySQLに大量の報告があります(全部英語ですけど)。 個人的に注目していたのは、Digg.com、Flickr.comとYoutube.comのDB周りアーキテクチャのセッションでした。あとは、http://www.mysqlperformaceblog.com/の人のセッションは、細かいTipsが多く、具体的にだいぶ役に立ちそうです。 というわけで、簡単に注目したセッションの内容を紹介してみます。ちなみに、内容の正確さは無保証です:P 気が向けば、もっといろいろ考察してみるかもしれません。 Technology at Di
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Flash-Based DBMSの最前線
bigdbahead.com is almost here!
ZFS Replication for MySQL data | MCslp Coalface
On SSDs, rotations and I/O
Toru Maesaka