ソーシャルゲームのためのデータベース設計・データベース的な観点でのソーシャルゲームの特徴 ・データモデル ・ソーシャルゲームに従来型RDBMSを使うべきか、�流行りのNoSQLで行くべきか ・負荷対策 (アーキテクチャ面) ・負荷対策 (ツール面) ・インフラエンジニアのキャリアについて
CiNii, CiNii著者検索について
2010年4月1日より「CiNii著者検索（ベータ）」がご利用いただけます。 CiNii著者検索は、CiNiiデータベース中の全論文の全著者に対して機械処理によるIDを発行し、IDごとに論文リストを表示する機能です。 使い方 各ページの検索ボックスに新たなタブが追加され、著者名（の一部）を入力いただくと検索結果として該当する方の氏名のリストが表示されます。リストには著者ID・論文のタイトル（最大3件）、最新のデータに基づく所属名が記載されます。 また、この検索結果画面で氏名をクリックすると、該当の著者のすべての論文リストが表示されます。また、著者に関する情報を他サービスで検索することができます。 CiNii著者検索の概要 CiNiiデータベースには約800万の著者名が存在していますが、氏名が文字列として格納されているため、同姓同名や異体字の問題が解決されていません。規模の面から手作業による
分散Key-Valueストア「kumofs」を公開しました！ - Blog by Sadayuki Furuhashi
分散Key-Valueストア kumofs を、本日オープンソースソフトウェアとしてリリースしました！ kumofs@SourceForge kumofs関連資料まとめ kumofsとは？ kumofs（クモエフエス）は、実用性を重視した分散データストアです。レプリケーション機能を備え、一部のサーバーに障害が発生しても動作し続けます。単体でも高い性能を持ちながら、サーバーを追加することで読み・書き両方の性能が向上する特徴を持ち、低コストで極めて高速なストレージシステムを構築・運用できます。 kumofsの大きな特徴は、システムの構成の簡単に変更できる点です。システムを止めることなく、簡単な手順でサーバーを追加したり復旧したりできます。アプリケーションには一切影響を与えません。 またkumofsは、広く利用されている分散キャッシュシステムの「memcached」と互換性のあるプロトコルを実装
最速並び替え研究会 - Yappo::タワシ
1000万行とか10億行でも何でもいいけど、いっぱいデータが入ってるテーブルのsortカラムの値を並び替えたい。 例えば以下のようにsort_testテーブルを作る use strict; use warnings; use DBI; my $dbi = DBI->connect('DBI:mysql:database=test'); $dbi->do('DROP TABLE IF EXISTS sort_test'); $dbi->do(<<SQL); CREATE TABLE sort_test ( id INT, sort INT, index(id), index(sort) ) ENGINE=InnoDB SQL my $sth = $dbi->prepare('INSERT INTO sort_test VALUES' . join(', ', ('(?,?)')x10_000
彼氏がMyISAM使ってた。別れたい… - kazuhoのメモ置き場
追記: マジメな比較はこちら：Open database life: MyISAMとInnoDBのどちらを使うべきか MyISAMだとPostgreSQLと並べられた時なんか恥ずかしいｗｗ 下向いちゃうしｗｗ ウェブサイトにはせめてInnoDB使って欲しい・・・ 勉強会とかで発表されたら・・・・もう最悪ｗｗ せめて普通にトランザクションやMVCCぐらいは対応して欲しい。 常識的に考えて欲しいだけなんです！ MyISAMでテーブルロックしちゃった時の遅さとか分かる？ あのね？たとえばピーク時10〜20並行ぐらいで書込みとか行くでしょ？ それぞれ別の接続で来るわけじゃない？ みんな普通にグループコミットやアシッドネス期待してるわけでしょ？ MyISAMでテーブル壊れてリペアしてたら大恥かくでしょうがｗｗ じゃあ MyISAM はどういう用途に適しているのか。待て！ 次号！*1 参考: 彼氏が軽
OPC Diary: Key-Value Store(s)という流れ
« CanonはCAPTプリンタの64bit版ドライバーを出せ!! | メイン 2009年02月27日 Key-Value Store(s)という流れ はじめは大規模なWebサービスを提供する現場の工夫に始まった分散キャッシュ技術、これが最近ではキャッシュのみならずデータのレプリケーション、永続化も可能となりKey-Value Store(KVS)と言われるようになった。 実質的にOracleやIBMのくそ高いインメモリデータベースにかなり近づいてきているが、それらがメモリ上にRDBMSを構築する物であるのに対し、KVSはキー値とデータというもっと単純なデータ構造を持つのが大きな違いだ。 スケールアウトによる負荷分散を前提とする大規模なWebサービスやユーティリティコンピューティングにとってRDBMSを前提とするOLTPの考え方はそれがボトルネックになり、パフォーマンスと冗長性に
ASTER 全球 3 次元地形データ配布開始 | スラド サイエンス
ストーリー by reo 2009年07月01日 10時30分 Google Maps の経路機能とリンクできないかな 部門より ASTER による全球三次元地形データが、ERSDAC ((財) 資源・環境観測解析センター) のサイトから 2009 年 6 月 29 日より配布が開始された (GDEM Project のページより)。 ASTERとは、経済産業省と NASA による国際共同プロジェクトで、人工衛星 Terra に搭載された日本の開発した地球観測センサである。従来の SRTM3 などに比べて、高緯度地域もカバーしている、分解能が向上している、データ欠損が少ない、などの特徴がある。さらに、カシミール 3D で読み込む方法も近日公開予定であるという。 膨大な地球観測データが使いやすい形で無償公開されることから、いろいろなアプリケーションでの活用が期待されるだろう。
arXiv - Wikipedia
arXiv（アーカイヴ、archiveと同じ発音）は、物理学、数学、計算機科学、数量生物学（英語版）、数量ファイナンス、統計学、電子工学・システム科学、経済学の、プレプリントを含む様々な論文が保存・公開されているウェブサイトである。論文のアップロード（投稿）、ダウンロード（閲覧）ともに無料で、論文はPDF形式である。1991年にスタートして、プレプリント・サーバーの先駆けとなったウェブサイトである。大文字の X をギリシャ文字のカイ（Χ）にかけて archive と読ませている。 現代（2019年）においてはこうした仕組みのサイトは特に珍しいものでもない。しかし、arXivの設立当初（1990年代初頭）においては、学術出版社や大学図書館を介さずに研究者同士がインターネットを介して直接に論文をやりとりできる場として、学術出版関係者に大きな驚きをもって受けとめられた[2]。 2015年8月現在
Dropboxを超えた？オンラインストレージ「SugarSync」 - らっこのじゆうちょう
最近「SugarSync」というオンラインストレージを見つけたのですが、これが本当にスゴいです。 （SugarSync自体はかなり前からあったらしいのですが、最近大幅に改良され2GBの無料版も追加されたようです） これまではDropboxを使っていたのですが、同期したいファイルは必ずDropboxフォルダの中に入れなければなりませんでした。 また、オンラインにバックアップしたファイルは全て、DropBoxを使っている別のPCにも同期されてしまっていました。（そのシンプルさがDropboxの良いところでもあるのですが） けれど、「元の場所に置いたままオンラインにバックアップしたいファイル」「別PCとは同期しなくても良いけどオンラインにはバックアップしておきたいファイル」も結構あるわけで、特に後者は別PCのディスク容量が残り少ない場合など、かなり困ったりします。 それに対して「SugarSyn
British Newspapers - Home
Explore two million pages of 19th century newspapersSearch 49 local and national titles using keywords MoreSee your search terms in context MoreView complete articles from the Penny Illustrated Paper and The Graphic free of charge OR buy a 24-hour pass for £6.99 allowing you to view up to 100 articles, or a seven-day pass with 200 article views for £9.99 MoreOR access the whole site free if y
分散ストレージの収束する方向 - sdyuki-devel
サーバーサイドの分散ストレージについて。広域P2Pとかデータセンター間で同期するとかCDN云々は知らない。 kumofsのアプリケーション-Gateway間のインタフェースは Get(key) だが、Gateway-Server間のインタフェースは実は GetByHash(key, partitioning-id)（とGetByHashIfModified(key, partitioning-id, time)）だったりする。（実際の名前は違うけど意味は同じ） 現状ではpartition-idはkeyにハッシュ関数を掛けて自動生成するが、実際には任意の値を指定できる。 つまり関連するkeyには同じpartitioning-idを指定して同じノードに保存されるようにして、partitioning-idが同じkey同士ならトランザクションできるようにすることも、案外に容易にできる。 Consi
鎧屋通信 ―ニコニコ動画のデータ分析研究発表会を見ました
ニコニコ動画に関しての様々なデータを分析している方々が一堂に会し その研究成果を発表する「ニコニコ動画のデータ分析研究発表会」が行われました。 本当は見に行こうと思っていたのですが、 仕事を入れられてしまったので泣く泣く断念し ustでの聴講となりましたが…… 行かなかったのを損する内容の濃さでした。 今回発表された講演の資料はネットに文書としてアップされていますので そちらを参照して見てください。 Hot.Docsの専用カテゴリ それでは1つ1つの講演についての感想を。 とは言ってもじっくり考察するような感想を書けるわけではないので、 ざっくりと速報的な感想を並べてみます。 ・「アイドルマスター データマスターSP」 毎日、アイドルマスタータグが付く動画数などを収集しており 動画作成者としても活躍するてってってー氏による アイドルマスタータグの付く動画についての講演。 6万件に及ぶ動画の
DBの基本を勉強したい人へオススメする本 - ｜ω・)ノ ＜黒猫の気まぐれ日記
最近，学部生に「DBについて勉強したいんですが何かオススメ参考書はありますか？」と聞かれた．私自身も，DBについて勉強したいなぁと感じていた．というのも，この頃院の授業で正規化の辺りを突っ込んでやったり，授業では習わない類のクエリを書いたり，数万件以上のデータを処理したり・・・とやっているうちにどうにも自分の知識不足を感じたからだ．学部の時は授業で理論の基本的なところを習って，あとはDBを利用したちょっとしたWebサービスを作ったくらいで，ちゃんと理解してこなかったから仕方ないといえばそうなんですが。。。まぁせっかくなので，DB関係の本で私がオススメかなーと思う本を挙げておきます(・ω・*) ●はじめの一歩DBについて勉強しようと思って一番最初に思い出したのは「マンガでわかるデータベース」という本．マンガでわかるデータベース作者: 高橋麻奈, あづま笙子, トレンドプロ出版社/メーカー:
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
LabelMe. The Open annotation tool
http://twitter.com/SamFURUKAWA/status/4080707890
http://160.26.142.91/wiki/index.php?%B2%E8%C1%FC%BD%E8%CD%FD
大英図書館、19世紀の新聞200万ページ分をネットで公開 
http://www.dcaj.org/cosme/index.html
http://sampl.ece.ohio-state.edu/data/stills/index.htm
クローリングしてる暇があるなら…論文かいたら? | EDGE Datasets(研究用データセット)
