つながりをデータから解き明かしたい ~ 複雑ネットワークの世界とそれを活用した不正検知システム，さらに向こうへ | メルカリエンジニアリング
つながりをデータから解き明かしたい ~ 複雑ネットワークの世界とそれを活用した不正検知システム，さらに向こうへ この記事は Merpay Tech Openness Month 2021 の14日目の記事です．こんにちは，メルペイのMachine Learningチームのhmjです． 今回は昨年に引き続き「集団的な不正の検知」をテーマに，ここ一年間で少しづつ進めてきた集団的な不正の傾向分析や，検知のための機械学習パイプラインの構築・運用として Vertex Pipelinesの使用を検討しているので，それらの分かったことなどを紹介します． 昨年の記事はこちらとなります． Overview 「集団的な不正の検知」といっても，実際に定義は自明ではありません．その言葉を聞いた人によって，想像する集団の大きさや形，特徴などは様々です． 今回は，カード決済を利用した取引での集団的な怪しい取引のケース
DNS問い合わせの可視化 | ある研究者の手記
DNS問い合わせの可視化 最近、データをまとめたり可視化したりしてその性質を調べる探索的データ分析(例)にはまっています。と、同時にネットワーク分析にもちょっと手を出しており、その2つの派生物としてドメイン名問い合わせの結果を可視化してみました。 これを読んでいる人にはもはや説明の必要はないと思いますが、一応書いておくと、世の中のwww.google.comやwww.amazon.co.jpのようなドメイン名はサーバの場所を直接示しているわけではなく、「この名前を持っているサーバのIPアドレスはなんですか？」というのをDNSサーバという別のサーバに問い合わせることで目的のサーバのIPアドレスを教えてもらい、その後目的のサーバへ接続します。以前は正引き（ドメイン名からIPアドレスを問い合わせる）と逆引き（IPアドレスからドメイン名を問い合わせる）が対称構造になるように設定するのが主流でしたが
PageRankアルゴリズムを使った人事評価実験 | 株式会社サイバーエージェント
2-2-1.一般的な360度評価による評価方法 問題点 一般的に評価プロセスが公開されていないため、最終評価までのプロセスが不透明である 全員が全員を評価するのは多数の社員がいる場合は不可能である ランダム抽出によるお互いの評価を行うと、まったく違う専門分野を評価したり、まったく関わりあいのない人を評価することになり精度が下がる 2-2-2.専門分野での評価者による評価方法 問題点 *評価者になる人材の不足 高い専門スキル、会社とのビジョンマッチ、メンバーからのその専門分野での高い信頼の全てを備えている人材が専門分野毎に必要。 さらに、評価の納得性を保つためにはメンバーからの信頼がある人材ではないと評価できない。 *評価者によって評価ポイントの違いがある 同じ分野の技術者でも、スキルの価値をどこに置いているかというスタンスの違いから評価ポイントにゆらぎが発生する。 さらに評価者自体
インターネットのどのページ間も19クリック以下で辿ることができるという研究成果が発表される
ネットワーク科学者のアルバート・ラズロ・バラバシ教授(ルーマニア生まれのハンガリー人)が18日に発表した論文によると、ウェブ上のあるページAから別のページBへは、どんなに遠くても19個のリンクを辿ればつながる経路があるの […] ネットワーク科学者のアルバート・ラズロ・バラバシ教授(ルーマニア生まれのハンガリー人)が18日に発表した論文によると、ウェブ上のあるページAから別のページBへは、どんなに遠くても19個のリンクを辿ればつながる経路があるのだそうです。 彼によれば、現在のウェブ上にはおおむね1兆個の文書があり、(ページ数が全部で140億ページだという別の推計と、)それらの中でもっとも遠いノードの間でも、せいぜい19クリックで辿りつくことができてしまいます。 あるネットワーク内でのノード間の最短距離については、6次の隔たりというのがよく持ち出されます。知り合いを6人辿れば世界の誰にでも
高校生のセックス相関図から幸福と不幸を考える – 橘玲 公式BLOG
「 “モテキ”はなぜやってくるのか？」で“つながり”について書いたが、私たちはいったいどのようにつながっているのだろうか？ ここでは、それを可視化してみよう。 以下の3枚の図版は、いずれもニコラス・A・クリスタキス/ジェイムズ・H・ファウラー『つながり 社会的ネットワークの驚くべき力』に掲載されているものだ。 1枚目は、白人生徒が大半を占めるアメリカ中西部の中規模高校（仮名で「ジェファーソン高校」）のセックス相関図だ。 色の濃い点が男子、色の薄い点が女子で、複数の異性とつき合っている場合は2方向（もしくは3～4方向）に枝が伸びている。 これを見るとわかるように、枝の末端にいる生徒を除けば、すべての生徒が複数の異性と性関係を持っている。でもこれは、「アメリカの高校は風紀が乱れている」ということではない。 そもそもなぜ、社会学者がこのようなセックス相関図を描くことができたのだろうか？ それはこ
インフルエンサーより「仲のいい少人数グループ重視」の時代へ 書評「Grouped」【湯川】 | TechWave（テックウェーブ）
[読了時間：4分] インターネット上では情報が上から下の一方通行ではなく、相互に横に流れるー。そう言われるようになって久しいが、実際には「横の情報の流れ」の形ってはっきりと体系だって語られることが少なかった。マスメディアに代わって力を持つと言われるようになったインフルエンサーからの情報発信だって、所詮は上から下への一方通行の情報の流れ。 ところが最近読んだ「Grouped: How small groups of friends are the key to influence on the social web (Voices That Matter)」という本の中には、横同士の相互の情報の流れについて興味深いデータや考察が幾つも掲載されていた。 参考までに代表的なものを幾つか見てみよう。 大半のコミュニケーションは親密な数人が相手 本の中で紹介されていたのは、Stefana Broad
Flavor network and the principles of food pairing - Scientific Reports
As omnivores, humans have historically faced the difficult task of identifying and gathering food that satisfies nutritional needs while avoiding foodborne illnesses1. This process has contributed to the current diet of humans, which is influenced by factors ranging from an evolved preference for sugar and fat to palatability, nutritional value, culture, ease of production and climate1,2,3,4,5,6,7
あけましておめでとうございます 2012 - なめらかライフゲーム - まめめも
あけましておめでとうございます。日本のプログラマには古来より「正月はフラクタル」という習わしがあります。正月はフラクタルに触れて心穏やかに過ごそうというものです。 というわけで動画を作りました。何かわかるでしょうか。 答えは、ライフゲームのグライダーとブロックの衝突です。セルをそのまま四角で表示するのではなく、アニメーションでなめらかにつないで表示してみました。 グライダー銃 (上) と宇宙船 (下) をグライダーから作る様子。 銀河 (左) とヒキガエル (中央) とパルサー (右) 。かなりきもい。 まあ、ライフゲームはフラクタルかというと違う気がしますが気にしない。一応フラクタルらしいドラゴン曲線も。辰年だし。 実装を簡単にいうと 普通のマスの代わりに電荷みたいなものを配置して、ポテンシャル場を計算する ポテンシャル場に対して marching squares で等高線を描く という
visualcomplexity.com | A visual exploration on mapping complex networks
Project Description: Please provide a description of the project.
バタフライ効果 - Wikipedia
「バタフライ・エフェクト」と「バタフライエフェクト」はこの項目へ転送されています。その他の用法については「バタフライ・エフェクト (曖昧さ回避)」をご覧ください。 バタフライ効果（バタフライこうか、英: butterfly effect）は、力学系の状態にわずかな変化を与えると、そのわずかな変化が無かった場合とは、その後の系の状態が大きく異なってしまうという現象[1]。カオス理論で扱うカオス運動の予測困難性、初期値鋭敏性を意味する標語的、寓意的な表現である[2]。 気象学者のエドワード・ローレンツによる、「蝶がはばたく程度の非常に小さな撹乱でも遠くの場所の気象に影響を与えるか?」という問い掛けと、もしそれが正しければ、観測誤差を無くすことができない限り、正確な長期予測は根本的に困難になる、という数値予報の研究から出てきた提言に由来する[3]。 意味[編集] ローレンツ方程式における初期値鋭
TechCrunch | Startup and Technology News
Although the focus of the fund is not just to solely back women, it hopes to focus its efforts there when possible. Apple will automatically assign a passkey to each user so they can log into Apple accounts on the web without needing any password. The company will allocate a passkey to Apple IDs starting with iOS 1
ビジュアライジング・データ（オライリー・ジャパン） - かふぇ・べいぶ別館
先日A池氏に「M井さんが監訳した本で使われているProcessingって何？」と質問したら，「私はよく知らないので，送ります！」と，いきなり献本して頂いた． ビジュアライジング・データ ―Processingによる情報視覚化手法 作者: Ben Fry,増井俊之(監訳),加藤慶彦出版社/メーカー: オライリージャパン発売日: 2008/12/01メディア: 大型本購入: 35人 クリック: 718回この商品を含むブログ (65件) を見るざっと見て思い出したが，ProcessingはJavaで記述された可視化環境で，独自の言語仕様からJava言語に一旦変換して実行する．もちろん，ライブラリをJavaプログラムやActionScriptのプログラムから直接呼び出すこともできるらしい． ちょっと目を惹いたのは，アメリカ地図に簡単にプロットできること．当然日本地図にも簡単にできるだろうから，ちょ
Organic Layout
Class OrganicLayouter is a multi-purpose layouter for undirected graphs. It produces clear representations of complex networks and is especially fit for application areas such as Bioinformatics Enterprise networking Knowledge representation System management WWW visualization Mesh visualization OrganicLayouter is based on the force-directed layout paradigm. When calculating a layout, the node
グラフを扱うJavaライブラリ「Jung」の紹介 - Twitterのグラフ構造を視覚化 - public static void main
java-ja 第12回のLTで話そうと思ったのですが、出番がなかったので資料をブログで公開しておきます。 Jungは研究などでグラフ構造が出たときに、理解しやすくするために可視化するのに使っています。他にもいくつかグラフを扱うライブラリは存在していますが、日本語の資料があったのと拡張可能なことが多かったのでJungを結果的に使うようになりました。 以下はそのJungについての簡単な解説です。 Jungとは Jungの正式名称はJava Universal Network/Graph Frameworkで、ネットワーク(グラフ) 構造の分析や視覚化を行うためのJavaのOSSライブラリです。グラフ理論、データマイニング、ソーシャルネットワーク分析のアルゴリズムを数多く実装しています。 安定バージョンは1.7.6で最新は2.0betaで、BSDライセンスで使用できます。 http://jun
Processing + Cytoscapeによる三次元空間での複雑ネットワーク可視化 - Viz/Sci/Dev Log
Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! Uploaded with plasq's Skitch! 色々と実験中。 作っていて気がついたけど、ネットワークのノードを表示する場合は、
TechCrunch Japanese アーカイブ � 6次の隔たりは今では3次？
The full trailer for “The Witcher” season three was released on Thursday, giving viewers a taste of what to expect in the next installment of the hit Netflix series. In the new trailer, Geralt con Firefly Aerospace has acquired launch and in-space transportation service provider Spaceflight Inc., in a bid to expand its on-orbit capabilities for customers. Firefly did not disclose the terms of t
Finding Community Structure in Mega-scale Social Networks
Download PDF Abstract: Community analysis algorithm proposed by Clauset, Newman, and Moore (CNM algorithm) finds community structure in social networks. Unfortunately, CNM algorithm does not scale well and its use is practically limited to networks whose sizes are up to 500,000 nodes. The paper identifies that this inefficiency is caused from merging communities in unbalanced manner. The paper int
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
dfltweb1.onamae.com – このドメインはお名前.comで取得されています。
好ハオ
http://wordpress.rauru-block.org/index.php/1682