富士通研究所が深層学習の高速化技術を開発、GPU64台で速度27倍、「世界最高速」実現
富士通研究所は、ディープラーニング（深層学習：多層ニューラルネットによる機械学習）を複数のサーバーで効率的に分散処理させ、学習を高速化する技術を開発した。これまで学習に1週間かかっていたところを、6時間ほどに短縮できる。ニューラルネットの設計と検証のサイクルを高速に回すことができ、研究開発の効率を高められる。 データ容量が大きく分散化が難しいとされる画像認識用ニューラルネット「AlexNet」で実験したところ、GPU64台の並列化で、GPU1台と比較して処理速度を27倍に高められた。「我々が確認しているAlexNetの高速化では、これが世界で最も速い」（富士通研究所 コンピュータシステム研究所 データシステムプロジェクト 主任研究員の田原司睦氏）。 富士通研究所は、今回の技術について特許を出願済み。富士通のAI技術「Human Centric AI Zinrai」の一つとして2016年度中
Hadoopはどのように動くのか ─並列・分散システム技術から読み解くHadoop処理系の設計と実装 記事一覧 | gihyo.jp
第21回Sparkの設計と実装［2］～Sparkにおけるデータ共有の仕組みと耐障害性の実現方法 猿田浩輔，山田浩之 2016-06-08
第1回 なぜ、Hadoopはどのように動くのか、を学ぶのか | gihyo.jp
はじめに ビッグデータ解析のためのシステム基盤として、Hadoopをはじめとするオープンソースのデータ処理ソフトウェア（データ処理系）が広く利用されつつありますが、当該データ処理系をすでに利用している、もしくは利用の検討をしている読者の方々の中には、たとえば以下のような問題を抱えている方が少なからずいらっしゃるのではないでしょうか。 データ処理系の使い方はなんとなくわかるが、その内部をあまり理解できていない。または、内部の動作原理がよくわからないので、本格的に使う気にならない。 同様の目的を達成する複数のデータ処理系において、どれを使って良いかがよくわからない。または、適切に使い分けられていない気がする。たとえば、どのような場合にHadoopを用いて、どのような場合に同類のデータ処理系であるImpalaやSparkを用いれば良いかが“明確に”わからない。 このような問題を解決するには、
分散遺伝的アルゴリズムの説明
分散遺伝的アルゴリズム（Distributed Genetic Algorithm : DGA） 分散遺伝的アルゴリズム（Distributed Genetic Algorithm : DGA）とは単一母集団GA（Single Population Genetic Algorithm : SPGA）の母集団を複数の分割母集団（島）に分割し，各島内で遺伝的操作を行うというGAの並列化モデルの１つである．DGAでは各島間で解探索の情報を交換するために，移住という操作を行う． DGAの流れを右下図に示す．SPGAの流れと異なるのは移住（Migration）という操作が加わった点である． 移住は，数世代に一度，各島内で選ばれた１つまたは複数個の個体（移住個体 : Migrant）を別の島と交換することで実現される．このとき，各島内における移住個体の割合を移住率（Migration Rate），何世
Folding@home - Wikipedia
Folding@home（フォールディング・アット・ホーム[4]、FAH、F@hとも呼ばれる）は、タンパク質の動的なふるまいをシミュレートすることで、科学者が様々な疾患に対する新しい治療法を開発できるよう支援することを目的とした分散コンピューティングプロジェクトである。 これにはタンパク質のフォールディングやタンパク質の動きのプロセスが含まれており、ボランティアのパソコン上で実行される分子動力学シミュレーションに依存している。Folding@homeは、2000年10月1日にビジェイ・パンデ教授の指揮のもと、スタンフォード大学で発足した。2019年以降は、セントルイス・ワシントン大学医学部に拠点を置き、パンデ教授の元教え子であるグレッグ・ボーマン博士が指揮している。 このプロジェクトは、分散コンピューティングや科学研究を行うために、グラフィックス処理装置（GPU）、中央処理装置（CPU）、
BOINC client–server technology - Wikipedia
Visual diagram of BOINC client–server structureBOINC client–server technology[1] refers to the model under which BOINC works. The BOINC framework consists of two layers which operate under the client–server architecture. Once the BOINC software is installed in a machine, the server starts sending tasks to the client. The operations are performed client-side and the results are uploaded to the serv
S4: Distributed Stream Computing Platform
We've got your back )Buyer Protection ProgramWhen you buy a domain name at Dan.com, you’re automatically covered by our Buyer Protection Program. Our unique & carefully designed domain ownership transfer process is the best rated service in the market. Buyer Protection ProgramWhen you buy a domain name at Dan.com, you’re automatically covered by our unique Buyer Protection Program. Read more about
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - citusdata/citus: Distributed PostgreSQL as an extension
climateprediction.net - Wikipedia
DBIS - Databases and Information Systems