学者ならずとも、データを使って考察したり、仮説を検証する機会はあるもの。コンピュータ技術の発達により、面倒なデータ集計や難しい計算は、すべてコンピュータにお任せできるわけですが、「その結果から、何を読み解き、どう考えるか？」はヒトが担うべき重要な役割ですね。こちらでは、統計のスペシャリスト直伝のデータ活用術をご紹介しましょう。 統計学の博士課程に在学しているNathan Yauさんは、数々のデータ分析の経験から、データを活用するコツとして、以下のようにまとめています。 細部に注目する データ分析では傾向やパターンにばかり目がいきがちだが、同様に「異常値」にも注目することが大切。見逃している視点がここに潜んでいることも。 大局で捉える データひとつひとつを別々に捉えるのではなく、データひと塊をザクっと捉えて、大きく考えることを心がけよう。 予断を持たない データ分析は可能な限り客観的に行うべ

職業威信スコアというのは、一般の人々の職業に対する評価の高さについてアンケートをとって、その平均点を計算してつくったものです。 具体的には、数百人から数千人の人々にアンケートをとって、「世間では、いろいろな職業について、地位が高いとか低いとか言いますが、以下の職業についてあなたは、高いと思いますか、低いと思いますか、当てはまるものを選んでください」とかなんとか尋ねて、「医者」「銀行員」「国会議員」「缶詰製造工」といった数十の職業について、「高い= 100点」「やや高い=75点」「中ぐらい=50点」「やや低い=25点」「低い=0点」という5段階で評価してもらいます。 そして、全員の評価の平均点をそれぞれの職業について計算する訳です。 難しい理屈は何も無い、実にシンプルなつくりです。 職業威信スコアのための質問項目や調査票などは以下から見ることができます。 http://srdq.hus.os

皆大好き自分も大好きな二十歳街道まっしぐらにはネタ帳という記事が定期的に挙がります。自分も普段記事にするネタをあれこれ自力で探している訳ですが、カメきちさんのネタ放出はかなり美味しい。という訳で有り難くご相伴に預り、 【ネタ帳】bitlyで短縮されたURLから動画だけを抜き取ったサイト「bitly.tv」 + 25記事*二十歳街道まっしぐらより拝借。 元々の絵は当然英語(YjWta.jpg (1024×767))なんだけど、ちょいと単語が分かりにくいので自分なりに妥当な用語をあてて日本語化してみました。 とってもひどい蛇足 まあ、普通にグラフ作ってるだけなら棒グラフ、線グラフと円グラフがあれば足りると思います。組成分析のためにウオーターフォール使うあたりになるとパレート分析やマトリクス分析に手が出始めて多分こういった図にまとめると言うのは厳しいかと(^^;; 後ですね、散布図が右にも左にも

近ごろ「最近の若者はダメ」が、（また）流行っているようなので、自エントリをまとめてみる。もし、「最近の若者は…」を見かけたら、ここを思い出してほしい。 きっかけは、職場の飲み会。「近ごろの若い連中はダメだ！」と一席ぶつオッサンがいたこと。それって、昔から言われてますね、と返すと、「何年何月何日に誰が言った！？出典どこだよ？何の根拠でそう断定できるんだよ？」ってオマエは小学生か。そこで調べてみたところ… ―――――――――――――――――――――――――――――――――――――― 1.　近ごろの若者は当事者意識がなく、意志薄弱で逃げてばかりいて、いつまでも「お客さま」でいる件について　[URL] 「最近の若者はダメだ」と昔から言われているが、特に今の若者はひどい。当事者意識が欠如しており、いつも何かに依存し、消費し、批判するだけの「お客さま」でいつづけている――という小論。出典を隠すと、内田

2009年12月08日02:00 カテゴリ書評/画評/品評Math 統計思考力養成ギブス - #書評_ - 統計数字を読み解くセンス 化学同人竹内様より献本御礼。 統計数字を読み解くセンス 青木繁伸 こんな本を待っていた。 統計思考が重要なことは不透明な時代を見抜く「統計思考力」」を読めばいやでもわかるし、「統計数字を疑う」をよめば統計をそのまま信じようとはしなくなる。 しかしそれでは一体全体統計というものをどう扱えばいいのか。 本書には、それがある。 本書「統計数字を読み解くセンス」は、疫学という、統計を最も実践的に扱う学問の専門家が、統計のどこに目をつけ、どこに注意するのかを実際に統計を処理しながら学んでいく一冊。 目次 - KAGAKUDOJIN BOOKSHELLより 第１章　統計数字はじめの一歩 - データの集計と分析 一　どんなデータがあるのだろう カテゴリーデータ / 数値デ

政権前夜を迎えたはずの民主党に新たな問題が浮上した。小沢一郎代表の公設第1秘書の逮捕もさることながら、肝心な経済政策が民意と大きく乖離していることが日経ビジネスの調査で明らかになった。 日経ビジネスは今年1月から2月にかけて、全衆院議員480人と上場企業の会長・社長、日経ビジネスオンラインの読者を対象に「第2回　経済政策アンケート」を行った（下図参照）。 ＞＞＞図の左側を拡大する　　　　＞＞＞図の右側を拡大する このアンケートは、日本経済が復活するためにどのような政策が必要かについて、17の質問で聞いたものだ。衆院議員で回答があったのは147人。質問のうち、具体的な政策内容を聞いた15問について、彼らの回答をクラスター分析（類似度を数値化し、近いものを集めて集団を作る）という方法で分類したところ、政党の枠を超えた4つの集団ができあがった。これを仮にA党、B党、C党、D党と名づけた。 上の図

上げておきます。 Rを高速化するための10の方法 id:syou6162 自己紹介 吉田康久 id:syou6162 syouでおk Tsukuba大学の4年生 最近の出来事 卒研おわた ノンパラメトリック回帰 自分でRのパッケージを作ってみた 初めて!! 漢ならコードで語れ、ということで自分のパッケージを作った - Seeking for my unique color. Google summer of code Rのプロジェクトがあるので応募しようと思っている ここから本題 Rを高速化するための10の方法 注意 割とアドバンスな内容を話すかも だけど、R初心者の人にも役に立つような話も折り混ぜていくので聞いてやってくだしあ＞＜ きっかけ 卒論が理論&シミュレーション Macbookをがんがん回す まともに回すと3日かかる＞＜ 3つのステップ Rレベルでの高速化 Cレベルを使った高速化

確率論と統計学は俺がまとめるから、他の分野はお前らの仕事な。 確率論 Index of /HOME/higuchi/h18kogi 確率空間 生成されたσ-加法族 確率の基本的性質 確率変数とその分布 分布の例 分布関数 期待値、分散、モーメント 期待値の性質 独立確率変数列の極限定理 大数の弱法則(Weak Law of Large Numbers) 確率1でおこること 大数の強法則 中心極限定理 特性関数 Higuchi's Page Brown運動 Brown運動のモーメントの計算 連続性 Brown運動の構成:Gauss系として Brown運動に関する確率積分 空間L^2の元の確率積分 伊藤の公式(Ito formula) 日本女子大学理学部数物科学科の今野良彦先生のところにあった資料 最尤法とその計算アルゴリズム 収束のモード 大数の法則と中心極限定理 指数分布族モデルにおける最

集合知プログラミング 作者: Toby Segaran,當山仁健,鴨澤眞夫出版社/メーカー: オライリージャパン発売日: 2008/07/25メディア: 大型本購入: 91人 クリック: 2,220回この商品を含むブログ (277件) を見る当初はサンプルコードがPythonということで購入した本書ですが、読んでみると内容の素晴らしさに驚嘆しました。私が今までに読んだオライリーシリーズでも屈指の名作だと思います。 『集合知プログラミング』とは 『集合知プログラミング』は、Amazonの協調フィルタリングのように、ウェブ上のデータを収集してユーザーの嗜好にあったコンテンツを推薦したり、大量のデータを分かりやすく分類・可視化するプログラムを簡単に実装する技術を解説した書籍です。Webプログラミングをかじったことのある方でしたら、だれしもAmazonのような推薦サービスを作ってみたいと思ったこと

先日、とあるパーティで、統計学者の松原望先生と会った。 松原望先生は、早期からベイズ統計学の重要性を世にアピールしてきた先駆者である。ぼくは、経済学部の大学院在学時に、選択科目ではあったが、松原望先生の「ベイズ統計学」という講義を受け、そこでベイズ理論の指南をしていただいた。ぼくは『確率的発想法』NHKブックスや『使える！確率的思考』ちくま新書の中で、ベイズ理論を紹介していて、それが多くの読者にウケて、この二冊はセールス的にも良い実績を出しているのだけど、正直言ってここに書いてあることの多くは、松原望先生の講義の受け売りである。そういう意味では、下品ないいかたになるが、大学院の数ある講義の中で最も「金に換えることのできた」講義が先生の講義だった、ということになる。 そのときは、放送大学の教材であった『統計的決定』という本を教科書に使った。これがめちゃくちゃいい本で、今でもベイズ統計学に関し

本当に若い人は海外旅行離れしてるのかな。 若人よ、旅に出よ: 大石英司の代替空港 ここ最近ずっと言われて来たことですが、極めて由々しき事態だと思います。 若人よ、旅に出よ: 大石英司の代替空港 ホントかね？ オレはゼミの後輩にディベート教えている関係で、大学3年・4年を10年以上定点観測できる環境にあるんだけど、そういう変化を感じないんだよな。旅行離れしてる気配はない。世代による変化、時系列的な変化を感じないんだよね。 http://www.asahi.com/national/update/0707/OSK200807070014.html 海外を旅する若者が急速に減っている。 http://www.asahi.com/national/update/0707/OSK200807070014.html こんな記事もあるんだけどさ。でも、母集団としての海外旅行者は増えているわけで。 旅行者

gooリサーチ結果 (No.54) 「2003年の感動に関するアンケート」調査結果 ～もっと感動するための「感動探し」が積極的に行われ、その市場規模は5兆円～ 国内最大級のインターネットアンケート・サービス「gooリサーチ」(*1)を共同で提供する株式会社三菱総合研究所(本社：東京都千代田区、取締役社長：谷野 剛)と株式会社NTT-X (本社：東京都千代田区、代表取締役社長：中嶋 孝夫)は、gooリサーチ・ホームページ上で「2003年の感動に関するアンケート」調査を実施しました。有効回答者数は17,400名でした。 ■ 感動ビジネス市場規模は5兆円 「もっと感動するために、意識的に行っていること（「感動探し」と呼ぶ）」があると答えたのは38.6％。中高年ほど「感動探し」を行う割合が高まり、60代では57.6％が行っている。 「感動探し」の内容は、10代・20代は「映画を見る」、30代・40