タグ

databaseに関するblueribbonのブックマーク (86)

  • 無料で使える「住所マスターデータ」公開、表記統一や緯度経度への変換に活用可能 全国の町丁目レベル18万9540件の住所データを記録

    無料で使える「住所マスターデータ」公開、表記統一や緯度経度への変換に活用可能 全国の町丁目レベル18万9540件の住所データを記録
    blueribbon
    blueribbon 2020/08/21
    「住所は表記揺れが多く、住所で管理するにも限界がある。そのため、重複のない不動産IDを付与。その際に、住所マスターデータが必要になり、Geolonia 住所データを作成したという」
  • GitLab.comが操作ミスで本番データベース喪失。5つあったはずのバックアップ手段は役立たず、頼みの綱は6時間前に偶然取ったスナップショット - Publickey

    果たしてGitLab.comで何が起きたのでしょうか? これまでの経緯をまとめました。 スパムによるトラフィックのスパイクからレプリケーションの不調へ GitLab.comは今回のインシデントについての詳細な経過を「GitLab.com Database Incident - 2017/01/31」で公開しています。また、もう少し整理された情報がブログ「GitLab.com Database Incident | GitLab」にも掲載されています。 これらのドキュメントを軸に、主なできごとを時系列に見ていきましょう。 1月31日16時(世界協定時。日時間2月1日午前8時)、YP氏(Yorick Peterse氏と思われる)はPostgreSQLのレプリケーションを設定するためにストレージの論理スナップショットを作成。これがあとで失われたデータを救う幸運につながります。 1月31日21時

    GitLab.comが操作ミスで本番データベース喪失。5つあったはずのバックアップ手段は役立たず、頼みの綱は6時間前に偶然取ったスナップショット - Publickey
  • 幼児の勘違い、防災のヒントに 幼稚園が27年記録:朝日新聞デジタル

    「運動会、何か(種目)出るの?」と聞くと「おやつが出るよ」。「よく目を動かして周りの友達をみてごらん」と言うと目玉だけきょろきょろ動かす――。思わず笑って済ませてしまいがちな幼児の勘違い。でも、そもそも大人の話し方がわかりにくいから起きるのではないかと、こうした出来事を27年記録し続けている幼稚園があります。命を左右しかねない災害時の対応にも生かそうとしています。 京都府宇治市の広野幼稚園は保育所を含めて約500人の子どもが通う。1989年から、教諭ら職員が意外に感じた子どもの言葉や行動を記録している。エクセルファイルに保存された記録は約5500件。大人の話し方が不十分だったと判断したら、「目的語、修飾語の欠落」といった注意点も記入する。教諭は避難訓練や遠足といった行事の前に、今まで記録した出来事を用語で検索して印刷するなどして、読み返す。 発案したのは吉村裕園長(81…

    幼児の勘違い、防災のヒントに 幼稚園が27年記録:朝日新聞デジタル
    blueribbon
    blueribbon 2016/09/18
    「1989年から、教諭ら職員が意外に感じた子どもの言葉や行動を記録している。…大人の話し方が不十分だったと判断したら、「目的語、修飾語の欠落」といった注意点も記入する。」
  • 「パナマ文書」解析の技術的側面

    世界中で話題になっているパナマ文書。各国で政権を揺るがすような事態にもなっていますが、純粋にデータとしてみた場合、これは計算機やデータ解析に関わる人々にも面白いものだと思います。データの中身や背景などについてはさんざん報道されていますのでここでは触れません。一方、現場でどのような作業が行われているのかはあまり報道されていません。現実的な問題として、人力ではどうしようもない量のリークデータを手に入れた場合、調査報道機関はどんなことを行っているのでしょうか?私も以前から疑問に思っていたのですが、先日あるデータベース企業と、データ分析アプリケーションを作成する会社のブログにて、その実際の一端を窺うことができる投稿がありました: Panama Papers: How Linkurious enables ICIJ to investigate the massive Mossack Fonseca

    「パナマ文書」解析の技術的側面
    blueribbon
    blueribbon 2016/04/12
    「機械的にこのようなデータを作り出す仕組みを整えれば、凄まじい量のデータであってもキーワードで検索したり関係性を機械に描かせて人間が理解しやすい形にできる」
  • PostgreSQLアンチパターン

    PostgreSQLモニタリングの基NTTデータが追加したモニタリング新機能(Open Source Conference 2021 Online F...NTT DATA Technology & Innovation

    PostgreSQLアンチパターン
  • なにこれ楽しい!SQLをブラウザ上で学習できるSQLZOO! - 嗚呼、学習の日々

    みなさまごきげんよう! 嗚呼蛙でございます! 一昨日amazonアソシエイトの審査を無事通過したことを祝って、露骨なアフィ目的記事を書いてみました。 今日はデータベースの操作を行う言語『SQL』を実践的に学習できるサイトを発見したので、それについて書いていこうと思います。 SQLってなに? ブラウザ上でSQLの学習ができるサイト 日語でのSQL学習 SQLってなに? SQLを知らない方のためにSQLについて簡単に説明しておくと、例えばネットショップで買い物をする時にこんな感じで「会員情報」「送付先」」「購入品」を登録しますよね。 【会員情報】 【送付先】 【購入品】 すると、ブラウザから入力された情報は、SQLを使ってこんな感じでデータベースに書き込まれます。 【会員テーブル】 【送付先テーブ】 【売上テーブル】 こんな風にブラウザから送られた情報をデータベースに書き込んだり、蓄積された

    なにこれ楽しい!SQLをブラウザ上で学習できるSQLZOO! - 嗚呼、学習の日々
  • 嵐のコンサートがあるとダブルブッキングしてしまうホテル予約システムを作ってみた

    今年の5月1日に、仙台市内のホテルで多重予約のトラブルが発生したと報道されています。 部屋数203室の仙台市のビジネスホテルで、9月18~23日の宿泊予約を数千件受け付けるトラブルがあった。アイドルグループ「嵐」のライブが宮城県内で開催される期間だった。インターネットでの申し込みが殺到し、システム障害が起きたとみられるという。 トラブルがあったのは、仙台市泉区の「ホテルルートイン仙台泉インター」。ホテルなどによると、9月19、20、22、23日に宮城スタジアム(宮城県利府町)で嵐がライブを開くことが明らかになった後の5月1日午前5時ごろ、ネットを使った予約申し込みが殺到していることに気づいたという。 203室のホテルなのに「予約」数千件 嵐公演で殺到か:朝日新聞デジタル より引用 5月1日の朝に何があったのか調べてみると、この日の早朝にテレビや新聞でコンサートの情報が流れたようですね。 お

    嵐のコンサートがあるとダブルブッキングしてしまうホテル予約システムを作ってみた
    blueribbon
    blueribbon 2015/05/10
    「予約システムは更新処理が多いという特性から、InnoDBとトランザクションを用いるほうが一般的でしょう。」
  • その候補、国会で何してました? 議員活動が丸わかりのDB

    期日前投票が始まり、14日に投開票日を迎える衆院選。どの候補を選ぶか迷っていませんか。そもそも、選挙ポスターやチラシだけでは、どんな人物か判断するのは難しい。「どういう活動をしてきた人なのか、わかれば良いのに」という人にお勧めのサイトがあります。 国会での発言、質問、出席数など一覧に 東京大の菅原琢客員研究員(政治過程論)が公開している「46期衆議院議員活動統計」。全衆議員の国会会議、委員会での発言数、発言文字数などが一覧できます。名前順や発言数順などに並び替えることもでき、実際にどういう発言をしたかは、国会会議録へのリンクで確認できます。 例えば、会議での発言数がゼロの議員、委員会での発言もゼロの議員も簡単に探せます。政党や当選回数が同じ議員の中でも、発言数や内容に差があることがわかります。 菅原客員研究員にサイト公開の目的や意義について聞きました。 「議員の活動は知られていない」

    その候補、国会で何してました? 議員活動が丸わかりのDB
    blueribbon
    blueribbon 2014/12/11
    「46期衆議院議員活動統計」:全衆議員の国会本会議、委員会での発言数、発言文字数などが一覧できます。名前順や発言数順などに並び替えることもでき、実際にどういう発言をしたかは、国会会議録へのリンクで…。
  • 初級〜中級者のためのSQL特訓 - 忘れないようにメモっとく

    ほぼほぼ初心者でSQLの練習がしたいっていう人、知識の再確認をしたい人にオススメのサイト。 SQLZOO ブラウザ上で動作するので、めんどくさい環境設定もなし。 データベースも、MySQLOracleSQL Server、Postgre、Ingres、DB2から選べる。 簡単なSELECT文から始まって、SUMやCOUNTみたいな基的な関数の問題や、JOINを使ったちょっと難しめの構文もある。 実行環境付きのリファレンスもあるのがよい!(超便利!)

    初級〜中級者のためのSQL特訓 - 忘れないようにメモっとく
    blueribbon
    blueribbon 2014/02/27
    「ブラウザ上で動作するので、めんどくさい環境設定もなし。データベースも、MySQL、Oracle、SQL Server、Postgre、Ingres、DB2から選べる。…実行環境付きのリファレンスもあるのがよい!(超便利!)」
  • MySQLをインストールしたら、必ず確認すべき10の設定 | Yakst

    MySQL Performance Blogの翻訳。インストール後に必ず設定を確認しなければならない設定パラメータ10つを挙げ、その意味を解説する。MySQLの設定変更時の、一般的な注意点も合わせて。 January 28, 2014 By Stephane Combaudon 我々がパフォーマンス監査の仕事をする時には、MySQLの設定のレビューと改善提案を求められる。大抵の場合、たくさんのオプションがある中でほんのいくつかの設定しか変更するように提案しないことに、多くの顧客は驚く。この記事のゴールは、もっとも重要な設定をいくつか挙げてみることにある。 既にこういった提案は過去にもしているが数年前のもので、それ以来MySQLの世界ではたくさんの変化があったのだ。 話の前に 熟練した人でも、重大なトラブルを引き起こすミスをしでかすことがある。従って、ここに挙げたものを盲目的に適用する前に、

    MySQLをインストールしたら、必ず確認すべき10の設定 | Yakst
    blueribbon
    blueribbon 2014/02/04
    ・innodb_buffer_pool_size ・innodb_log_file_size ・max_connections ・innodb_file_per_table ・innodb_flush_log_at_trx_commit ・innodb_flush_method ・innodb_log_buffer_size ・query_cache_size ・log_bin ・skip_name_resolve
  • エロゲーマーのためのSQL -エロゲーマーのためのSQL-

    SQLはデータベースからデータを抽出したりするための言語です。 この文書は、ErogameScapeのデータベースからSELECTを使って自由自在にデータを取得できるようになることを目標にします。 エロゲーをやりはじめる大学生くらいのときに、大学の講義でデータベースを学んで、退屈だなーと思った時に、ErogameScapeでSQLを学ぶことで、少しでもSQLに興味を持って、自身でデータを加工することを学習して頂けると幸いです。 ※私の大学のリレーショナルデータベースの授業では、自分の身の回りの何かをER図に落とし込んで、DBを設計し、PostgreSQLに実装し、実際にデータを入力してSELECTしてみるところまでをやりました。 ER図という概念を学んだとき「ああ、これは面白い」と思いました。 先生はこう言ったのです。 「ER図に落とし込むと、思いもよらなかったことが分かる。」と。 当時、

  • 開発支援系のサービスが充実しすぎて転職か廃業を考えた | Ore no homepage

    なんて表現したらいいかわかんなくて、開発支援系サービスって謎表現したけど…。なんつーか、開発支援向けのサービス?クラウドってやつ?ってかいわゆる外部がやってくれる系のサービス(モニタリング/ホスティング/etc)が充実してますよね。んで、一介のWebエンジニアのおれがこの先生きのこるにはどうするかを真剣に考えていたところだった。きのこ。何割かはネタ。 思いついたものを挙げてみる。AWSGitHubは割愛。言うまでもねーだろ…。 New Relic http://newrelic.com/ 有名なNew Relic。これも説明するまでもないかな。今のチームでコレのお金払う版を使ってるんだけど、「外部APIとの通信個所とDBとの通信個所が遅いように思えるので調査しますわ」→「それNew Relicで見れるよ」とか「各テーブルへのアクセス頻度集計しますわ」→「それNew Relicで見れるよ」

    blueribbon
    blueribbon 2013/11/12
    ・「New Relic」→外部APIとの通信個所とDBとの通信個所が遅いので調査等 ・「Percona Cloud Tools」→DBに特化した「New Relic」 ・「Treasure Data」 ・「Google Cloud SQL」 ・「MongoLab」 ・「Travis CI」 ・「Coveralls」
  • http://www.2ch-search.net/blog/3

    blueribbon
    blueribbon 2012/06/28
    ・InnoDBでテーブルごとにデータ領域を作成 ・バイナリログを削除 ・プロセスにunauthenticated userが溜まっている場合 ・メモリチューニングの基本はbuffer size ・slow_query_logを設定 ・explainを使ってクエリの効率を調べる
  • テレビが進化する可能性を追う!日本の閉鎖的な放送業界を揺り動かす「SPIDER」のさらなるチャレンジ(佐々木 俊尚) @gendai_biz

    先進的なTV機器として非常に強い注目を集めている「SPIDER」が今春、新たな段階へと踏み出そうとしている。これは日テレビの未来を考えていく上で、非常に重要な意味をはらんでいる。 SPIDERの持っている意味をひとことで表すのは難しいが、この機器についての同社の公式説明はこうだ。「テレビの番組もCMも検索できる全チャンネル同時録画レコーダー」。野村総研出身の有吉昌康氏が設立したベンチャー企業PTPが、2007年から発売している。昨年春には地デジに対応し、画面インタフェイスやリモコンもまるでアップル製品のような洗練されたものへと一新された。 新しい展開とは何か。それは端的に言えば、テレビのウェブ化であり、構造化である。つまりはテレビ放送がこれまで、ITの潮流の中で取り残されてきた部分を補おうとしているのだ。 具体的にいえば、キー局やローカル局を含めて全国で放送されているすべての番組を、デ

    テレビが進化する可能性を追う!日本の閉鎖的な放送業界を揺り動かす「SPIDER」のさらなるチャレンジ(佐々木 俊尚) @gendai_biz
    blueribbon
    blueribbon 2012/04/01
    ・番組メタデータの全国共通のデータベースが必要 ・ウェブをアクセス解析し、ページビューを計測し、クリック率や成約率を見るように、番組の視聴者の行動を徹底的に数値化することができるようになる
  • 米国議会図書館は、なぜTwitterの全ログを保存するのか

    blueribbon
    blueribbon 2011/10/02
    「これは素晴らしいアーカイブになるだろう。エリザベス朝時代の英国を研究していて、当時の日常生活について詳しく知りたくなった場合を考えてみてほしい――何が飲食され、どんな冗談が話され…」
  • データベースの内部動作を知る

    SQLのプログラミングは奥が深い。特にパフォーマンスの観点から、そう言えるだろう。 みなさんご承知の通り、同じ結果を出すプログラムでも、SQLの書き方次第で処理時間に何倍もの差が生じ得る。効率の悪いSQLを書いてしまう原因は、多くの場合、リレーショナルデータベースの内部動作やアプリケーションに関する理解不足である。両者をよく知った上で最適なSQLを書けるようになることは、システムエンジニアとしての重要なスキルの一つである。 特集『基礎から理解するデータベースのしくみ』では、リレーショナルデータベースの内部動作について、基的な部分を分かりやすく解説している。SQLプログラミングに役立つことはもちろん、SQLチューニングやデータベース設計のための基礎知識としても不可欠だ。 イントロダクション ブラックボックスのままでいいの? Part 1:SQL文はどのように実行されるのか SQL実行までの

    データベースの内部動作を知る
  • YouTube人気急上昇

    【2016年滋賀】無資格作業員「ちゃんと塗れてるかな?」→釣り上げた全長5m800kgの鉄骨の下敷きとなり絶命【ゆっくり解説】

    YouTube人気急上昇
  • CiNii Articles

    JaLC IRDB Crossref DataCite NDL NDL-Digital RUDA JDCat NINJAL CiNii Articles CiNii Books CiNii Dissertations DBpedia Nikkei BP KAKEN Integbio MDR PubMed LSDB Archive 公共データカタログ ムーンショット型研究開発事業

    blueribbon
    blueribbon 2011/03/01
    日本で刊行された学術論文情報を検索の対象とする論文データベースサービス
  • ジェイ・リスティングのカテゴリー検索

    JディレクトリーはWEBサイトをテーマ・ジャンル別のカテゴリーへ分類したリンク集です。コミュファが運営するブロードバンドポータルサイト。名古屋港水族館の海洋生物をライブで映像配信する「コミュファ光 水族館」が目玉コンテンツ。マイワシ、カツオなどの回遊魚が見られる黒潮水槽や、オーストラリアのグレートバリアリーフをモデルにサンゴ礁の海を再現したサンゴ礁の海など、自宅にいながら水族館を楽しめる。仕事の合間の気分転換に、ゆったりと泳ぐ魚を眺めてみては。

    blueribbon
    blueribbon 2010/10/20
    ライブドアの運営する「人」情報サイト
  • 「ガンダム事典」はこうして作られた

    ガンダム生誕30周年を記念して刊行された「総解説ガンダム事典 Ver.1.5」の背景には、約10年の歳月とともに育まれた巨大なデータベースがあった。編者である皆河有伽さんに話を聞く。 2009年、ガンダム生誕30周年を記念して、「総解説ガンダム事典 Ver.1.5」という書籍が講談社から刊行された。機動戦士ガンダムからVガンダムまでの作品をカバーし、サンライズ監修のもとで宇宙世紀の歴史技術、MS・MA(モビルスーツ・モビルアーマー)について392ページというボリュームでまとめ尽くした1冊だ。 特に注目すべきは後半のMS・MA図鑑で、例えば、リック・ドムの発展系である「ドワス」といったマニアックな機体まで紹介している(知ってました?)。ガンダムファンにとっては欠かせない資料だろう。 ただ、ひと口に事典を作るといっても、ガンダムシリーズの作品には、そこから派生した小説や関連アイテムが数多く存

    「ガンダム事典」はこうして作られた