M2Mやライフログにおける、ビッグデータ処理としてのnode.jsとCassandra - ウィリアムのいたずらの、まちあるき、たべあるき
ウィリアムのいたずらが、街歩き、食べ物、音楽等の個人的見解を主に書くブログです（たま～にコンピューター関係も） Ｍ２Ｍという分野がある。 マシン to マシンということで、主に、センサー情報をネットワークを介してコンピューターに渡し、（人間を介在させず） 直接処理するような話。 遠隔操作や監視などに主に使われるが、予測などにも役立つと期待されている。 ただし、センサ数を増やし、データ収集時間間隔を短くすると、データが大量になってしまう。いわゆるビッグデータ。 一方、ライフログというのがある。 これは昔からやられているけど、最近は、ケータイのＧＰＳとかを使って、自動的に今いる位置を教えたりする。 これらのデータと、その他のパーソナルデータが多量にとれれば、いろんなことに使えるかもしれないと期待されている。 たとえば、 六本木ヒルズと天王洲アイルに行く人の違いは？とか （ごめん、適当に書いた。
Cassandra Conference Tokyoの資料を公開しました - terurouメモ
GeQuuのアーキテクチャについての話です。Android版クライアントがまだほとんど機能を実装していない状態なので、こんなものに開発時間かけすぎだろ思われがちなGeQuuですが（自意識過剰？）、見えない所で異常に頑張ってるんですよというお話です。 スマートフォン×Cassandraによるハイパフォーマンス基盤の構築事例View more presentations from terurou. テキスト装飾というか色付けをまどマギな感じにしたんですが、まさか発表中に気がついた人はいないですよね。
「Cassandra Conference in Tokyo」10月5日に開催、Cassandra開発コアメンバーJonathan Ellis氏が来日 | gihyo.jp
「Cassandra Conference in Tokyo」10月5日に開催、Cassandra開発コアメンバーJonathan Ellis氏が来日 NoSQLソリューションとして注目を集めるCassandraにフィーチャーしたイベント「Cassandra Conference in Tokyo」が10月5日（水）に東京の楽天株式会社にて開催される。 同カンファレンスでは、Apacheトップレベルプロジェクトとして開発されている分散KVS「Cassandra」を使用したシステム導入・構築の実例紹介に加え、その導入メリットの検証結果、企業向け有償サポートやトレーニングの開始等も紹介される。 また、このイベントのため、Cassandraの開発コアメンバーから成るDataStax社のCTO Jonathan Ellis氏が来日、基調講演（同時通訳付き）が行われることとなった。 申し込みはCas
ジェミナイ、分散KVS「Cassandra」を使ったリアルタイムログ解析システムをOSS化
ジェミナイ・モバイル・テクノロジーズは2011年3月3日、リアルタイムログ解析システム「Flume-Cassandra Log Processor」をオープンソースソフトウエア（OSS）として公開した（配布サイト）。大量のシステムログを瞬時に分析して、グラフィカルなレポートを作成できる。ログ保存には、OSSの分散キー・バリュー型データストア（KVS）「Cassandra」を使用する。 Flume-Cassandra Log Processorでは、監視対象のサーバーで発生したイベントのログを、1秒以内にストレージであるCassandraに保存する。Cassandraは書き込みが高速な分散KVSで、サーバーの台数に比例して、ストレージ容量とI/Oを拡張できる。そのため、クラスターのサーバー台数を増やすことで、数百Tバイトのログの格納が可能になるとしている。ログの分析機能やレポート作成機能のほ
『大規模分散技術勉強会 in 名古屋』を立ち上げ - terurouメモ
先日、「名古屋の分散処理技術関係のコミュニティ盛り上がってないよねー」という煽り記事を書いたのですが、煽るだけなのもアレですので、実際に『大規模分散技術勉強会 in 名古屋』を立ち上げました。 大規模分散技術勉強会 in 名古屋 | Google Groups まだGoogle Groupを作っただけで、活動の詳細については何も決めてないのですが、Hadoop、MapReduce、KVS、NoSQL、Cassandraなど、その手の技術に興味のある方は一緒に勉強しましょう！とりあえず手始めにオライリーのHadoop本の読書会から手を付けようかなと思ってます。 あと、『大規模分散技術勉強会 in 名古屋』の略称は『大名古屋』となりますので、ご了承願います。本勉強会に所属すると、もれなく以下のようなことができるようになります。 「自己紹介をお願いします」 『大名古屋のterurouです！（キリ
Cassandra と Ruby で簡易掲示板を作ってみる - akishin999の日記
そろそろ Cassandra で具体的なアプリケーションを作ってみたくなったので、簡単な掲示板を作成してみました。 作成環境は以下のようになります。 ruby 1.8.7 (2010-01-10 patchlevel 249) [i386-mingw32] Rails 2.3.5 データモデル まずはアプリケーションから使うデータモデルを設計します。 storage-conf.xml に Keyspace を以下のように定義しました。 storage-conf.xml <Keyspace Name="Examples"> <ColumnFamily Name="Entries" CompareWith="BytesType"/> <ColumnFamily Name="Boards" CompareWith="LongType"/> <ReplicaPlacementStrategy>or
Twitter、「拡張性と可用性」を求めてMySQLからCassandraへ乗り換える | OSDN Magazine
人気のマイクロブログサービス「Twitter」を提供する米Twitterが、使用するデータベースをFacebookが開発した「Cassandra」に移行しているという。データ量の増加に自動的に対応できる拡張性や可用性などを評価した結果のようだ。 Twitterのソフトウェア開発者、Ryan Kings氏がMyNoSQLの取材に応じて明らかにした。MyNoSQLはSQLではないデータベースの総称「NoSQL」に関する情報を集めたブログ。 Kings氏によると、TwitterはシェアドMySQLとMemchacheを組み合わせたシステムを利用してきたが、データの増加ペースが急増しており、対応が急務となっていた。人件費をはじめとした運用費用がかさんでおり、共有MySQL設定を自動化するか、他のデータベースへの乗り換えを考慮したという。Cassandra以外のデータベースも検討したが、マシンの追加
Twitter、MySQLデータベースからCassandraに移行
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます TwitterがMySQLデータベースからCassandraに移行する。同社エンジニアRyan King氏が米国時間2月23日、MyNoSQLのインタビューに応じ、決定に至るまでに検討した内容などを明らかにした。記事によると、同社はクラスタ化したMySQLサーバとメモリキャッシュシステムを運用してきたが、データ量の拡大に伴い、運用管理にあたる人件費の拡大に悩まされるようになってきたという。そのため、高可用性を保ちながら、成長に伴う作業を自動化する方法を模索した。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
