DSIRNLP #3 LZ4 の速さの秘密に迫ってみるGrafana LokiではじめるKubernetesロギングハンズオン（NTT Tech Conference #4 ハンズオン資料）NTT DATA Technology & Innovation
グーグルはコードの品質向上のため「バグ予測アルゴリズム」を採用している
グーグルでは、社内のプログラマによって作り出される大量のコードの品質を保つため、チェックイン前にユニットテストとコードレビューが行われているそうです。しかし、コードが大量になってくると、ユニットテストやレビューをすり抜けるバグも少なからず発生します。 そこでコードの品質をさらに高めるために、グーグルでは「バグ予測アルゴリズム」を採用。バグがありそうな部分をレビュアーにアドバイスする仕組みを採用したとのこと。 そのバグ予測アルゴリズムとはどんなものなのか。Google Engineering Toolsブログに投稿されたエントリ「Bug Prediction at Google」（グーグルにおけるバグ予測）で説明されています。 ソースコードの修正履歴を基に予測 コードの中にバグがありそうな箇所を分析する手法としては、「ソフトウェアメトリクス」がよく用いられます。これはコードを静的に分析して、
【公園】遺伝的アルゴリズムでブランコの漕ぎ方を学習させた。
前回は私が作成したアルゴリズムで漕いだ。今回はコンピュータにアルゴリズムを学習させる。補足評価：踏み台の初期位置からの最大移動距離。選択：評価の高いほうから4人。交叉：4人(A,B,C,D)からランダムに2人選ぶ(AとAなど同じ人を選ぶ場合もある)。一方から遺伝子の前半、他方から遺伝子の後半をもらう。突然変異：ランダムな場所を選び、0と1を逆転させる。何箇所行うかはランダム(0個から3個の間)。早送り無し版http://www.youtube.com/watch?v=w1MF0Iz0p40YouTube版⇒ http://www.youtube.com/watch?v=8vzTCC-jbwM
DextroII先生のロマサガ閃きシステムのアルゴリズム講座
つしま（あなたの原稿はどこから） @chartreuse37 @DextroII 先生ッ！ サガシリーズの閃きシステムの概念ってどうなってるんですか！？ って弟が言ってました よかったらちらっと教えてください 2011-11-13 18:26:54
商品レビューからやらせを探すソフトウェア、その正確性なんと90％！
ネットショッピングで参考になるのはやはりレビュー。 現物を見る事ができないオンラインショッピングなので、レビュー読んで参考にするってことありますよね。ホテルやレストランもそうです。が、そのレビューがやらせだとしたら？ 嘘八百並べたものだとしたら？ 八百長だとしたら？ こんないい事書いてるなんて嘘に違いない！ いや待てよ、こんな悪い事書いてるなんてもしかしたらライバル業者からの潰しかもしれない。...確実に存在するやらせレビュー、しかしどれがそうなのかを判断するのは難しいですよね。疑い始めると何もかも怪しく思えてきます。 そこで、アイビー・リーグの研究者がやらせレビューを判断するアルゴリズムを開発しました。研究チームは、とあるシカゴのホテルのやらせレビュー400件と本物レビュー400件からやらせレビューでの言葉や文脈のパターンを分析。その結果、やらせレビューはその内容が広く大雑把なのに対して
MapReduce以外の分散処理基盤BSP, Piccolo, Sparkの紹介 - Preferred Networks Research & Development
どうも，実は今年から開発チームにjoinしていた中川です．可愛い犬の写真がなかったので，可愛いマスコットの画像を貼っておきます． 最近MapReduceとかその実装であるHadoopとかをよく聞くようになりました．これはつまり，それだけ大量のデータをなんとか処理したいという要望があるからだと思います．しかし当たり前ですが，MapReduceは銀の弾丸ではありません． ということで，最近気になっているMapReduceとは違ったアプローチを取っている分散処理基盤について，社内のTechTalkで話した内容を簡単にまとめて紹介したいと思います． Bulk Sychronous Parallel このアルゴリズム自体は1990年に誕生したものです．長いのでBSPと書きます．さて，グラフから最短経路を求める時，MapReduceは使えるでしょうか？このような論文が出るくらいですから出来ないことはあ
パターン認識と機械学習（PRML）まとめ - 人工知能に関する断創録
2010年は、パターン認識と機械学習（PRML）を読破して、機械学習の基礎理論とさまざまなアルゴリズムを身につけるという目標（2010/1/1）をたてています。もうすでに2010年も半分以上過ぎてしまいましたが、ここらでまとめたページを作っておこうと思います。ただ漫然と読んでると理解できてるかいまいち不安なので、Python（2006/12/10）というプログラミング言語で例を実装しながら読み進めています。Pythonの数値計算ライブラリScipy、Numpyとグラフ描画ライブラリのmatplotlibを主に使ってコーディングしています。実用的なコードでないかもしれませんが、ご参考まで。 PRMLのPython実装 PRML読書中（2010/3/26） 多項式曲線フィッティング（2010/3/27） 最尤推定、MAP推定、ベイズ推定（2010/4/4） 分類における最小二乗（2010/4/
コンピューターの考えるセックスの音とは？
まぁ、いろいろな音があるでしょうけれども。 インターネット上に溢れかえるポルノ！ 見たい人、見たくない人、見せたくない人がいますよね。画像認識の技術により、ポルノ画像をブロックしてくれるソフトウェアはその精度をどんどんあげています。では動画や音声のポルノコンテンツは？ 韓国科学技術院（KAIST）の研究室がポルノ音を聞き分ける新たなアルゴリズムを開発しています。その内容は、よりハイピッチでより同じ言葉を繰り返すものはポルノである可能性が高いとして見分けるというもの。ほほぅ。なんと94％の的中率なんだそうです。たまに、ドロドロ愛憎激ドラマなんかが混ざってしまうそうですが、かなり正確なフィルターですね。 というわけで、ハイピッチで同じ言葉を繰り返し喋ることが多い人、ポルノだと勘違いされないようにご注意を！ [New Scientist] そうこ（Sam Biddle 米版）
Googleアルゴリズム200項目全てを特別公開 – マーケティングブログ
Googleアルゴリズムの200の要素を発見しましょう！（Let’s Try to Find All 200 Parameters in Google Algorithm） は2009年に書かれた記事ですが、パンダアップデートが適用された今現在（2011年4月）でも重要項目が多く書かれているもので。 多くはGoogleの特許（合衆国特許出願0050071741）に基づいていますが、筆者のアンが自身の解析結果や予測を盛り込んでいる事で、より実践に近い内容になっています。 SEO初心者の方は、これからのウェブ制作の軸に、SEOエキスパートの方はもう一度自身のサイトを見直す目次として確認してみてはいかがでしょうか。 ドメインに関する13要因 ドメイン年齢 ドメイン取得からの長さ ドメイン登録情報（Who is情報）の表示/非表示 ドメイン種類（サイトレベルドメイン（.com や co.uk） ト
diffの動作原理を知る～どのようにして差分を導き出すのか | gihyo.jp
UNIXの基本的なコマンドの1つであるdiff。 これに実装されているアルゴリズムは実に興味深い世界が広がっています。 本稿では、筆者が開発した独自ライブラリ「dtl」をもとに「diffのしくみ」を解説します。 はじめに diffは2つのファイルやディレクトリの差分を取るのに使用するプログラムです。 ソフトウェア開発を行っている方であれば、SubversionやGitなどのバージョン管理システムを通して利用していることが多いかと思います。本稿ではそのdiffの動作原理について解説します。 差分の計算の際に重要な3つの要素 差分を計算するというのは次の3つを計算することに帰結します。 編集距離 2つの要素列の違いを数値化したもの LCS（Longest Common Subsequence） 2つの要素列の最長共通部分列 SES（Shortest Edit Script） ある要素列を別の要
MinHashによる高速な類似検索 - Preferred Networks Research & Development
年が明けてもう一ヶ月経ちましたね．岡野原です． 今日はMinHashと呼ばれる手法を紹介します．これは特徴ベクトルの高速な類似検索に利用することができます(クローラーの文脈だとShingleとして知られている）． 今や世の中のあらゆる種類のデータが，高次元のバイナリベクトルからなる特徴ベクトルで表されて処理されるようになってきました．例えば文書データであれば文書中に出現する単語やキーワードの出現情報を並べた単語空間ベクトル（Bag of Words）で表し，画像データも，SIFTをはじめとした局所特徴量を並べた特徴ベクトル（とそれをSkecth化したもの）として表せます．行動情報や時系列データも特徴量をうまく抽出する．グラフデータもFast subtree kernels[1]と呼ばれる方法で非常に効率的に特徴ベクトルに変換することができ，グラフの特徴をよく捉えることができるのが最近わかっ
知ってる？ クレジットカード番号の意味と暗算認証術
知ってる？ クレジットカード番号の意味と暗算認証術2011.01.24 12:0027,285 satomi 暗算で偽造カード見分けられるなんて...知らなかった！ 毎日のように使うクレジットカード。丸暗記して時間セーブしてる人も、あの数字16桁の意味までは知らないんじゃ？ 16個の数字にはそれぞれ意味があるんですよ。米国で人気のオンライン資産管理サービス｢Mint｣がズバリ図解してくれました！ （図の訳） 1）最初の1桁：主要産業識別子 （MII:Major industry identifier）。カード発行者の業界を表します。 0 予備 1、2 航空 3 旅行・娯楽 4、5 銀行・金融 6 商品輸送・銀行 7 石油 8 通信 9 国ごとの割り当て分 2）MIIを含む最初6桁：発行者識別番号（IIN:Issuer Identifier Number）。カード発行者の身元を表します。 [
TechCrunch
Atlassian announced this morning that it is acquiring video messaging service Loom for $975 million, the same company that had a $1.53 billion valuation in May 2021 when it announced a $130 million Se Investing apps help anyone access the stock market to make trades. Alpaca, a San Mateo-based startup, offers stock and crypto brokerage trading services via API that enables investing fintech compani
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
TechCrunch
個人投資家必見、アルゴリズム取引の凄さが何となく分かる動画「アルゴリズムが形作る世界」 : 市況かぶ全力２階建
顔を認識する無人機、敵対心を判別するシステム
TechCrunch
Engadget | Technology News & Reviews
http://chasen.org/~daiti-m/paper/vb-nlp-tutorial.pdf
http://www.cs.stanford.edu/people/ang/papers/nips06-mapreducemulticore.pdf