アメリカ大統領選挙の番狂わせ（後編）～ 標本調査における偏り②｜統計学習の指導のために（先生向け）
（注）上記2人の他にも候補者がいたため、合計は100％にならない。 それまで予想をことごとく的中させていた割り当て法による調査ですが、この失敗により、世論調査そのものへの疑いの目が向けられるようになりました。事態を重く見た関係者は、多くの学者や専門家による検討委員会を設置し、失敗の原因を詳細に検討しました。 その結果、それまで採用されていた割り当て法には以下のような欠陥があることが指摘されました。 割り当て法は、調査対象者が合衆国の有権者全体の縮図となるように、地域や性・年齢別に調査対象者数を割り当て、その人数に対して調査を行う方法である。 属性ごとの調査対象者数の割り当てを受けた調査員は、その人数にあう対象者を見つけて調査をすることになるが、属性内の個々の対象者の決定は調査員の個人的判断に委ねられている。 その結果、調査員の好みや調査への依頼のしやすさなど、調査員の主観の介入が避けられず
アメリカ大統領選挙の番狂わせ（前編）～ 標本調査における偏り①｜統計学習の指導のために（先生向け）
統計調査や世論調査においては、調べようとする対象（母集団）を漏れなく調査すること（全数調査・悉皆調査）はコストや時間などの制約から難しいことが少なくありません。このため、母集団の一部を標本（サンプル）として選び出して調査を行い、その結果から母集団全体の傾向を推察する標本調査（サンプル調査）によって行われることが一般的になっています。 このような標本調査では、母集団の姿をできるだけ正確に反映する標本を抽出すること、つまり標本の「偏り」をできるだけ少なくすることがカギになります。今日までに何通りもの標本抽出の方法が考案され、実際に統計調査や世論調査で使われていますが、ここでは標本抽出の方法で明暗が分かれた1936年のアメリカ大統領選挙予測の例をご紹介します。 1936年のアメリカ大統領選挙は、「暗黒の木曜日」（1929年10月24日）に端を発した世界大恐慌、ヨーロッパ、アジアなどにおける世界的
時系列データの相関係数はあてにならない
元官僚の高橋洋一氏が時系列データの相関係数が高い事を論拠にしているが、この論証方法は全くもって厳密ではない。 計量経済学では時系列データの相関係数はあてにならない事は80年代から良く知られており、これに関連した業績でエングルとグレンジャーは、2003年にノーベル経済学賞を受賞している。 高橋氏のトリックを説明したい。世の中には時間とともに変化していくトレンド*1と言うのが多くある。このトレンドがあるデータを二つ比較すると、どちらも時間に対して相関しているため、相関があるように見えてしまう。 例えば戦後、一人あたりの米の消費量は減少し、コンピューターの普及台数は飛躍的に伸びたが、この二つの現象を結びつけて考える人はいない。しかし、米の消費量とコンピューターの普及台数は、高い相関を持つ事になる。 実データの場合は屁理屈をつける事も可能かも知れないので、シミュレーションして確かめてみよう。
安倍内閣に批判的なメディアは内閣支持率が低いという俗説について: 311後の日本の政治論壇
■残念な世論調査攻撃 一部のフリージャーナリスト、あるいは週刊誌やスポーツ紙の記事執筆者は世論調査を毛嫌いしている。それなりに適切な世論調査を行うためには、それなりの資金力が必要であり、現代において世論調査報道は大手メディアの独占物であるかのようになっている。こうした大メディアへの対抗心、悪く表現して嫉妬が、近年の世論調査叩きのベースにあるのは間違いないだろう。もちろん、それを読んで喜ぶ読者が向こう側にいてのことである。 もっとも、こうした業界内ルサンチマン的な批判は、結局自らの調査不足、無知などをさらけ出すだけに終わることが多い。たとえば2012年の衆院選期間中に大量にRTされた週刊ポストの「鳥越俊太郎氏 若者ら除外する世論調査結果の信憑性に疑問」という記事では鳥越俊太郎氏が「選挙に関する世論調査の結果を発表する前に選挙の担当者が数字を"調整"するのをしばしば見てきた」と述べているが
9万タイトル170万枚の AV のサンプル画像を集めた | ぱろすけのメモ帳
By Robert McDon. 皆様こんにちは！ 先日の記事『16万タイトルの AV の ID を dmm から集めた』の続きです。前回は IDBy Robert McDon. 皆様こんにちは！ 先日の記事『16万タイトルの AV の ID を dmm から集めた』の続きです。前回は ID を集めたので、今回はそれを元に画像をもりもりとダウンロードします。 画像の処理とかにトライするのはまた後日。今回の記事はダウンロードまでです。 大量のデータを用いれば何か出てくるかもしれないという期待、楽しいですね。 そういえば前回の記事について「ビッグデータ」という言葉を絡めてコメントをいただきましたが、正直この程度ではビッグデータでも何でもないと思います。レコード数16万というのはデータベースとしてはたぶん特に多くもないほうです。また、今回ダウンロードした総データ量は107GBですが、一般にビッグ
そのデータ、言うほど強く「相関」してますか？ CORREL関数と分析ツールで相関係数を求める
『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day
ソーシャルゲームの確率への疑問、そしてユーザーが勝つ方法について - No Name Yet
ここ最近、『アイドルマスターシンデレラガールズ』（バンダイナムコゲームス）のガチャで散財といった話題が飛び交っているソーシャルゲーム界隈。 「ソーシャルゲームが抱える潜在リスク 「射幸心」あおる仕組みとは」 「 モバイルSNSゲームが儲かる本当の理由。かーずSPはなぜ１５万もつぎ込んだのか？」 「 ソーシャルガチャ課金誘導はすでにネットゲームを超えた」 コンプガチャや予告ガチャのほか、「ガチャで当たりが出る確率を運営が操作している」という話も、こうしたエントリでは語られている。ガチャの形式は置いておいて、確率については、全体の確率はその時々で上下させていることはあるだろうが、確率で選ぶと宣言していることについて、恣意的に結果を操作することはないだろう、と僕は考えていた。 しかし、「運営がアナウンスした確率通りに抽選が行われなかったのではないか」という例が『ドラゴンコレクション（ドラコレ）』
世界のマクロ経済指標の変化が超わかりやすいアプリ－GapMinder - My Life After MIT Sloan
これはMITの先生に教えてもらったサイト。 世界の国々のマクロ経済指標の変化がひと目でわかる、という優れものアプリ－GapMinder http://www.gapminder.org/world/ あらゆる経済学のサイトの中でも、特に優れている、ということで近年注目を浴びているサイトだ。 経済指標の歴史がすぐ分かる視認性の良さだけでなく、見た目にも美しく、さらに遊んで楽しい、素晴らしいサイト。 超オススメ。 あ、でも1度見ると1時間くらい遊んじゃうと思うから、覚悟して望むように（笑） でもこのサイトで遊んでいるだけで、マクロ経済について色々なことが学べる。 （更にその年に何が起こったかを調べるためのWikipediaがあれば万全） いろんな種類の指標があるのだが、ここでは一番メジャーな、縦軸に平均寿命を、横軸に一人当たりGDPをとったグラフをご紹介。 平均寿命はその国の国民の健康状況を表
オススメされた統計学本を列挙 - ミームの死骸を待ちながら
冬に二週間シンクタンクでインターソすることになった。クリスマスとか関係ない。インターンで扱うテーマに統計の理解が必要となったため勉強したいという遅延学習法精神で、今のうちに統計学をざっくり勉強しておきたい。そもそも二年前、ブログを立ち上げた理由は「インターンの内容(Ruby)を先走って勉強する」ためでした。性格変わってない。 ところが僕の持っている統計本は こんなもんなので*1、何か一冊「ガチの教科書」がほしいなと思った。生物で言うと Molecular Biology of the Cell みたいな。そこでTLに聞いてみたところ、いろいろ教えてくれました。はてな人力検索とかもう不要ですね。大した答え来ないし*2 以下のメモは自分のために。といいつつアフィを張るのは下心。 統計学入門 (基礎統計学) 作者: 東京大学教養学部統計学教室出版社/メーカー: 東京大学出版会発売日: 1991/
RjpWiki - RjpWiki
RjpWiki はオープンソースの統計解析システム R に関する情報交換を目的とした Wiki ですRjpWiki はオープンソースの統計解析システム 《R》 に関する情報交換を目的とした Wiki です † どなたでも自由にページを追加・編集できます． (初めて投稿・既存記事への追加・修正を行なう方はこのページ末の注意*1を御覧下さい) ページへのファイル添付については、画像ファイルのみパスワードなしで可能としてあります(ページ上部「画像添付」より)。その他のファイルの添付はパスワードを入力することで可能です(ページ上部「ファイル添付」より)。現在のパスワードは, Rでの round(qt(0.2,df=8),3) の実行結果です。 スパム書き込みに対処するため、書き込み系の処理に対してパスワードを設けました。ユーザ名の欄には，Rで round(qt(0.2,df=8),3) を実行
おかげですぐにカラクリが見抜けた - *minx* [macska dot org in exile]
いまわたしは、反売買春派の人たちと、リアルでいろいろやり取りしいる。 わたしの住んでいるところとそれほど離れていないんだけど、最近街頭売買春増え過ぎじゃね？とかで地域の住民が無茶苦茶怒ってて、集会開いたりデモやって「警察は片っ端から売春婦も客も捕まえろ！刑務所に長い間入れてやれ！」とか騒いでいるので、メディア戦略を含めていろいろあるのね。それでさ。 何百人も集めて公開のパネルをやるというので見に行ったら、パネリストの何人もが「売春をはじめる平均的な年齢は１２歳から１４歳」という数字を何の疑いもなく提示し、それが当たり前の前提として話がどんどん進んでいくのね。それがもし事実だとすると、売買春とはすなわち子どもの性的搾取とそれ以後みたいなものだ、ということになってしまう。 でも普通に考えれば、それってありえないじゃん？ 仮に正規分布に近似しているとすると、平均１３歳として、２１歳で売春をはじめ
![おかげですぐにカラクリが見抜けた - *minx* [macska dot org in exile]](https://cdn-ak-scissors.b.st-hatena.com/image/square/7693d472293479f40e8d217c939c66fdcca6871e/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F17680117127031685996%2F17680117127031699368%2F1555341858)
統計学の面白さはどこにあるか - hiroyukikojimaの日記
先日、とあるパーティで、統計学者の松原望先生と会った。 松原望先生は、早期からベイズ統計学の重要性を世にアピールしてきた先駆者である。ぼくは、経済学部の大学院在学時に、選択科目ではあったが、松原望先生の「ベイズ統計学」という講義を受け、そこでベイズ理論の指南をしていただいた。ぼくは『確率的発想法』NHKブックスや『使える！確率的思考』ちくま新書の中で、ベイズ理論を紹介していて、それが多くの読者にウケて、この二冊はセールス的にも良い実績を出しているのだけど、正直言ってここに書いてあることの多くは、松原望先生の講義の受け売りである。そういう意味では、下品ないいかたになるが、大学院の数ある講義の中で最も「金に換えることのできた」講義が先生の講義だった、ということになる。 そのときは、放送大学の教材であった『統計的決定』という本を教科書に使った。これがめちゃくちゃいい本で、今でもベイズ統計学に関し
フランスにベビーブーム到来！ 日本の未来は？ - NTTコム リサーチ 調査結果
日本など先進諸国が少子化に悩む中、フランスは今、ベビーブームに沸いている。フランスの合計特殊出生率※は、1965年の2.82から1994年には1.65まで低下。その後、徐々に上昇し始め、2000年に1.88、2006年には2.00まで回復した。いまや欧州でトップの出生率を維持しており、少子化対策のモデル国として注目されている。パリの街中では、かつてないほどに子ども向けのブティックやヘアサロン、カフェなどが充実し、ベビーカーを押す姿も多くみられるという。 一方日本は、1994年の1.46から2005年には過去最低の1.26まで落ち込み、2006年に若干回復したものの1.32にとどまっている〔図1〕。
有効求人倍率の推移表
有効求人倍率の推移年有効求人倍率有効求人数有効求職者数就職件数1990 1.40 1,814,807 1,294,185 113,3321991 1.40 1,805,631 1,290,153 106,7091992 1.08 1,553,333 1,433,026 108,2841993 0.76 1,275,820 1,669,074 111,7471994 0.64 1,186,463 1,848,098 120,6281995 0.63 1,233,449 1,954,365 126,6841996 0.70 1,393,689 1,980,970 128,6801997 0.72 1,493,094 2,070,944 132,3061998 0.53 1,265,216 2,394,818 137,30019990.481,206,889 2,529,993 144,1772
「平均のひとつ覚え」から卒業 〜社会人なら知らなきゃ恥ずかしい統計の基礎知識 | Web担当者Forum
1日あたりの訪問者数を単純に平均すると次のようになる。 単純な平均訪問者数：4699人 しかし、このサイトは週末のアクセス数は平日の数分の1しかないため、平日と週末を分けて考えてみるのもいいだろう。そこで、平日と週末でそれぞれ平均を出すと、次のようになる。 平日の平均訪問者数：6223人 週末の平均訪問者数：888人 これで、平日は6223人より少なければ「アクセスが少なかった」、週末は888人より多ければ「アクセスが多かった」と判断していいのだろうか。 週末の平均はたしかに代表的な数値となっているが、どうも平日の平均がおかしい。グラフを見ても、ほとんどの平日は5000人以下と、平均よりも1000人以上少ないアクセス数になっている。 よく見ると9月14日のアクセス数が非常に多い。この日は、あるページがヤフーニュースで紹介されたために、非常に多くの人がサイトを訪れていたのだ。ヤフー以外にも人
『「不安も事実である」とか言い出す人たち』
免許の更新に行ってきた。ぜんぜん乗ってないので、ゴールドカード('-^*)/。法律の改正ポイントなどを講習で聞いたんだけど、すごい厳罰化。もー車乗らない！お金かかるし。 午前中の受付時間に間に合わず、警察署の近くの喫茶店でぽーっとしながら、本読んでましたが、この本おもしろかったよ。トロント大学の統計学の先生の本です。 「運は数学にまかせなさい―確率・統計に学ぶ処世術/ジェフリー S.ローゼンタール」 ジョエル・ベスト（→ハロウィーンの猟奇殺人って実はなかったんですけどって調べた犯罪学者です）の本を読んでいると、「不安を煽る」のに数字とか確率が誇張されたものが使われがちでございまして、そういうの彼は「スタット・ウォーズ」といっております。そういうのに疲れちゃってこうなってしまっている人もいるようです。「私たちは何も本当のことを知ることはできない、あらゆる視点を受け入れ、権威とされているどんな
管理人の本が出ます。 : 少年犯罪データベースドア
2007年10月18日14:29 管理人の本が出ます。 このたび、少年犯罪データベース主宰の私は、築地書館から『戦前の少年犯罪』という本を出すことになりました。 10月25日の発売ですが、書店に並ぶのは29日以降になりそうです。すでにアマゾンでの予約を受け付けております。 いままでウェブ上で少年犯罪データベースを展開してきたわけですが、戦前に幻想を持っているような年配の方にも情報を届けるには本の形式のほうがいいかと思い立ったものですから。 少年犯罪データベースをご覧になっているみなさまには、戦前のほうがいまよりも小学生による殺人事件なんかが多くて、少年による親殺しも多発していたことはすでにご存知であろうかと思います。しかし、たとえば、噂には聞いたことのある旧制高校生というものがどれほどひどい存在だったかはとんと知りますまい。 毎日のように街中で暴れて民家に火をつけて回るわ窓ガラスは何百枚も
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Population Division | Department of Economic and Social Affairs | United Nations
World Population Prospects: The 2006 Revision Population Database
Amazon.co.jp： 統計学入門基礎統計学: 本
