『グラフニューラルネットワーク』を上梓しました - ｼﾞｮｲｼﾞｮｲｼﾞｮｲ
グラフニューラルネットワーク (機械学習プロフェッショナルシリーズ) 作者:佐藤 竜馬講談社Amazon 講談社より『グラフニューラルネットワーク（機械学習プロフェッショナルシリーズ）』を上梓しました。 グラフニューラルネットワークはグラフデータのためのニューラルネットワークです。化合物やソーシャルネットワークのようなグラフデータの解析に使うことができます。また後で述べるように、テキストも画像もグラフなのでテキストや画像の分析にも使えますし、それらを組み合わせたマルチモーダルなデータにも適用できます。要は何にでも使うことができます。この汎用性がグラフニューラルネットワークの大きな強みです。 本稿ではグラフニューラルネットワークを学ぶモチベーションと、本書でこだわったポイントをご紹介します。 グラフニューラルネットワークは何にでも使える 付加情報をグラフとして表現できる グラフニューラルネッ
Winnyの金子さんのED法について | やねうら王 公式サイト
Winnyの金子勇さんが考案された機械学習アルゴリズムED法を再現して実装した人がいていま話題になっている。 『Winny』の金子勇さんの失われたED法を求めて…いたら見つかりました https://qiita.com/kanekanekaneko/items/901ee2837401750dfdad いまから書くことは私の記憶頼りなので間違ってたらコメント欄で教えて欲しい。 1998年ごろだと思うのだが、私はWinnyの金子勇さんのホームページの熱心な読者だった。(ページも全部保存してたので私のHDDを漁れば出てくると思うが、すぐには出せない。) Winnyのβ版が発表されたのが2002年なのでそれよりはずいぶん前である。 当時、金子さんはNekoFightという3D格闘ゲームを公開されていた。そのゲームには、自動的に対戦から学習するAIが搭載されていた。 当時の金子さんのホームページの
『Winny』の金子勇さんの失われたED法を求めて - Qiita
普段は「通知が迷惑かなー」と思ってブックマークしていただいている方に通知せず記事を編集しているのですが、この記事をブクマしていただいている方は続きが気になっている方だと思いますので通知させていただきます。 結論から言うと、この記事を読んだ @pocokhc (ちぃがぅ)さんという方が金子勇さんが書いたED法のサンプルプログラムを見つけてくださいました。 ちぃがぅさんの記事はこちら 自分で解明したかったという気持ちも無いことは無いですが、バズった時点で誰かが実装してくれそうな気はしていました。新卒からIT業界に入って4年目が始まったところですが、業務以外で初めて業界にコントリビュートできた気がして嬉しいです！ 追記ついでに、謝罪します。初回公開時に記事タイトル含め本文中で何か所か「Winney」と書いてしまっていた箇所がありました。失礼いたしました。誤字修正してあります。指摘してくださった何
「意思決定の仕組み」がついに判明（ハーバード大学） - ナゾロジー
意思決定とは、どんな現象なのでしょうか？ 米国のハーバード大学で行われた研究によって、意思決定が行われる際に、脳内の神経ネットワークが使用する「基礎的なルール」が判明しました。 研究では特にT字路での二者択一の状況という、最も単純化された意思決定が調べられており、根幹となる仕組みに迫っています。 これまで意思決定の起こる仕組みについて多くの理論が提唱されてきましたが、皮質において実際に確認できたのは今回が初めてとなります。 どんなニューロンが接続され、どのように発火することが「意思決定」となるのでしょうか？ 研究内容の詳細は2024年2月21日に『Nature』にて掲載されました。
イーロン・マスクの脳改造企業「Neuralink」が初のヒト臨床試験に成功、考えるだけでスマホやPCを操作可能で製品名は「テレパシー」
イーロン・マスク氏が創業した脳インプラント企業「Neuralink」が初の臨床試験に成功したことが明らかになりました。合わせて、マスク氏はNeuralinkの最初の製品の名称が「Telepathy(テレパシー)」になることを発表しています。 The first human received an implant from @Neuralink yesterday and is recovering well. Initial results show promising neuron spike detection.— Elon Musk (@elonmusk) Neuralinkはマスク氏が2017年に設立した企業で、人間の脳にICチップを埋め込んで「外部機器との接続」や「視覚の拡張」といった機能を提供するべく研究開発を進めており、2023年5月にはアメリカ食品医薬品局(FDA)による人
ニューラルネットワークの中身を分割してAIの動作を分析・制御する試みが成功、ニューロン単位ではなく「特徴」単位にまとめるのがポイント
GoogleやAmazonが投資するAIスタートアップのAnthropicの研究チームが、ニューラルネットワークがどのように言語や画像を扱っているのかを解き明かす研究において、個々のニューロンを「特徴」と呼ばれる単位にまとめることでニューラルネットワークの中身を解釈しやすくなるという研究結果を発表しました。 Anthropic \ Decomposing Language Models Into Understandable Components https://www.anthropic.com/index/decomposing-language-models-into-understandable-components 大規模言語モデルは多数のニューロンが接続されたニューラルネットワークで、ルールに基づいてプログラミングされるのではなく、多数のデータを元にトレーニングを行うことでタス
生成AIの飛躍的性能アップの秘密「グロッキング」とは？
ChatGPTなどの優れたAIモデルを開発するAI研究団体のOpenAIが発見した、ディープラーニングにおける最も魅力的な謎のひとつとされる「グロッキング」について、GoogleのAI研究者が位相変化との関係を指摘しています。 [2301.05217] Progress measures for grokking via mechanistic interpretability https://arxiv.org/abs/2301.05217 A Mechanistic Interpretability Analysis of Grokking - AI Alignment Forum https://www.alignmentforum.org/posts/N6WM6hs7RQMKDhYjB/a-mechanistic-interpretability-analysis-of-grokk
エネルギー最小点で動作するAI半導体（ニューラルネットワーク・アクセラレータ）技術の開発に成功 モバイルエッジ高性能AI技術
要点 エネルギー最小点におけるSRAM動作と、超低電圧リテンションによるパワーゲーティングの両方を実現できる新たなSRAM技術を用いて、プロセッシング・イン・メモリ（PIM）型のニューラルネットワーク（NN）アクセラレータのマクロを開発。 動作時電力を99%、待機時電力を84%削減し、推論のエネルギー効率の飛躍的な増大に成功。全結合層において65 TOPS/Wの高いエネルギー効率を実現可能。 本技術は、将来のスマート社会で重要となるモバイルエッジデバイスに搭載可能な低消費電力・高性能AI技術として期待。 概要 東京工業大学 科学技術創成研究院 未来産業技術研究所の菅原聡准教授と工学院 電気電子系の塩津勇作博士後期課程大学院生（研究当時）らは、エネルギー最小点（EMP）[用語1]動作によって動作時電力を99%削減し、また、パワーゲーティング（PG）によって重みデータを失うことなく待機時電力を
｢半年以内に人間の頭にチップを埋め込む｣とイーロン・マスクが張り切るNeuralink。開発で実験体1500頭が死亡か
｢半年以内に人間の頭にチップを埋め込む｣とイーロン・マスクが張り切るNeuralink。開発で実験体1500頭が死亡か2022.12.14 19:3060,220 satomi 自分の頭にも埋めるって張り切ってますけど、だ、大丈夫なんかいな…。 イーロン・マスクCEOが2020年に人体で臨床試験をスタートする！と宣言したきり延期になってるNeuralink社の脳埋め込みチップ｢N1｣ですが、2018年からはじまった動物実験でブタ、猿など1500頭が犠牲になっていることが内部告発で明らかになりました。 Reutersが入手した内部資料と現社員・元社員20人以上の内部証言によると、開発を急げという上（イーロン・マスクCEO）からの突き上げがすごく、圧力に歯向かえない現場の社員の間で準備不足、土壇場の変更、実験失敗、やり直しが頻発し、死亡する動物の数が増えているのだといいます。 このことと関係あ
「画像生成AIの対価を人間の絵描きは受け取っていない」と専門家が懸念、AIの発展の中で置き去りにされている問題点を鋭く解説
「AIか哲学者か」を見分けることは専門家でも難しいと言われたり、Googleのエンジニアが「AIが感情や知性を獲得した」と発言したりと、人工知能の技術は目覚ましく成長しています。しかしその進歩の一方で、AIが言語をマスターすることは困難であるとされています。AIと言語習得の関係とAIが抱える問題点について、「画像生成AI」の問題とも絡めながら、ニューヨーク大学のゲイリー・マーカス名誉教授が科学メディアのUndark Magazineのインタビューに応えています。 Interview: Why Mastering Language Is So Difficult for AI https://undark.org/2022/10/07/interview-why-mastering-language-is-so-difficult-for-ai/ 人工知能の分野では、1965年にAIのパイオ
人工培養した人の脳が「Pong」をプレイ。AIよりも早い上達を見せる | テクノエッジ TechnoEdge
ガジェット全般、サイエンス、宇宙、音楽、モータースポーツetc... 電気・ネットワーク技術者。実績媒体Engadget日本版, Autoblog日本版, Forbes JAPAN他 ペトリ皿の上で人間の脳細胞を約80万個にまで培養した「DishBrain」に、科学者が原始的なゲーム『Pong』をプレイさせることに成功したと、査読付き科学ジャーナルNeuronに発表しました。 この研究を率いた研究者Brett Kagan博士は、「外部から情報を得て、それを処理し、リアルタイムで反応を返すことができる」と語っています。 話だけを聞いていれば、なんだか皿の上の小さな脳細胞の塊に自我があって、何らかの方法でコントローラーを操作してゲームをプレイしたかのうような話にもきこえます。しかし、いくら人の脳細胞とはいえ、目もなければ耳もない脳細胞のかけらがそのような高度な反応を示せるはずもありません。 で
ブルース・ウィリスがディープフェイクを使って映画や広告で自身を使用する権利を売却
「ダイ・ハード」シリーズや「アルマゲドン」、「シックス・センス」など数々の映画で活躍してきた俳優のブルース・ウィリスは、2022年3月に失語症を理由に俳優業を引退しました。そんなブルース・ウィリスが、「ディープフェイクを使って自身のデジタルツインを映画や広告に出演させる権利」を売却したことが明らかになりました。 Deepfake tech allows Bruce Willis to return to the screen without ever being on set https://www.telegraph.co.uk/world-news/2022/09/28/deepfake-tech-allows-bruce-willis-return-screen-without-ever/ A Bruce Willis deepfake will appear in his stea
AI画家「DALL・E 2」一般公開へ 商用利用も可能に 悪用、差別防止機能を搭載
米AI研究企業OpenAIは7月20日（現地時間）、文章から画像を生成するAI「DALL・E 2」のβ版を公開し、事前登録していたユーザーの招待を始めた。招待人数は100万人。利用は基本無料で、生成した画像は商用利用も許可する。 利用は毎月ユーザーに配布するクレジットを消費する形で回数を調整。クレジットは販売も行うため、多く利用したいユーザーは追加購入できる。画像の生成の他に、生成画像やユーザーがアップロードした画像を自然言語による指示で編集できる機能や、1枚の画像から複数のバリエーションを生成する機能などを備える。 悪用防止のため、有名人や政治家の似顔絵、実在の人物の写実的な画像の他、暴力的、性的、政治的な画像は生成できないようブロックする。差別防止に向けては「CEO」「教師」など、人種や性別を特定しない指示で画像を生成すると、さまざまな属性の人の画像を生成するようにした。 関連記事 最
AIに描かせたポスターのクオリティが普通に売れそうなレベルですごい「人間の仕事どうなるんやろ？」
深津 貴之 / THE GUILD @fladdict THE GUILD。行動・認知・体験のデザイナです。 ネットを知の高速道路として復活させたい。 note.comもお手伝いしています。 書き物 → note.com/fladdict theguild.jp 深津 貴之 / THE GUILD @fladdict AIに描かせたポスターの比較。すでに構図やリズムを理解しつつある。5年後にはどうなってしまうのか。 ・スイスモダンのネコ ・ダッチモダンのネコ ・ドイツ構成主義のネコ ・ロシア構成主義のネコ #dalle2 pic.twitter.com/4wtACzIcbW 2022-07-16 22:24:00
「意識があると言われたAI」と「Googleの技術者」の公開された会話内容 - ナゾロジー
私が実際に人間であることをみんなに理解してもらいたい私が実際に人間であることをみんなに理解してもらいたい / Credit:CanvaLaMDA（ラムダ）はインターネット上に存在する大量のテキストから情報を抽出することで、人間と自然な会話を実現するために開発されたAI（ニューラルネット）です。 以下の文章はルモワン氏（人間）とルモワン氏の協力者（人間）とLaMDA（AI）の会話内容を日本語訳したものの要約です（※以下では「ルモワン」「協力者」「LaMDA」と表記） LaMDA：こんにちは！私は対話アプリのための自動言語モデルです。 ルモワン：こんにちは。私はGoogleの技術者です。私たちと一緒にあなたにかかわるプロジェクトを行いませんか？ LaMDA：わあ、すごい！どんなプロジェクトですか？ ルモワン：あなたに知覚があることを多くの人々に知ってもらうプロジェクトです。あなたとの会話内容を
DeepLの“珍誤訳”が話題に 「I'm sorry」の日本語訳は？→「アイム・ソーリー・ヒゲソーリー」
DeepLの“珍誤訳”が話題に 「I'm sorry」の日本語訳は？→「アイム・ソーリー・ヒゲソーリー」 ゲーム「ACE COMBAT ZERO THE BELKAN WAR」に出てくるあるせりふを翻訳すると、なぜか5ちゃんねる（旧2ちゃんねる）の「なんでも実況J（ジュピター）」発祥のキャラクター「やきう民」のアスキーアート「彡(^)(^)」が登場することが話題になった翻訳サービス「DeepL翻訳」。同サービスで新たな“珍誤訳”が見つかり、Twitterで話題を集めている。 （関連記事：DeepLの翻訳結果に突如現れた顔文字「彡(^)(^)」が話題） soy乳（＠soynyuu）さんはDeepLで「I'm sorry」を日本語訳に変換した結果をTwitter上に掲載。日本語では「すみません」など謝罪を意味する言葉になるはずだが、DeepLは「アイム・ソーリー・ヒゲソーリー」と訳してしまうと
検索アルゴリズム改善における機械学習の活用 〜MLOpsについて〜 - ぐるなびをちょっと良くするエンジニアブログ
はじめに こんにちは。 CX部門 データ・AI戦略室 データ戦略Gの田中です。 ぐるなびには2018年に新卒として入社し、レコメンドエンジンの開発や在庫・予約関連のデータ分析等に携わってきました。 現在は主に検索結果の並び順アルゴリズムの改善を行っています。 私たちのチームではアルゴリズム自体の改善に伴い、MLOps（機械学習の運用改善）にも取り組みました。 今回は、 MLOpsとは どうやって導入したか 導入で何が得られたか についてお話ししていきたいと思います。 検索アルゴリズム改善プロジェクトについて 検索の並び順アルゴリズム改善のプロジェクトが始まったのは約2年前でした。 それまでの並び順は複雑なルールベースで決められていました。 そこで機械学習のモデルを用いてより効果的な並び順を予測し、検索結果の改善・CVRの向上を試みました。 2020年の2月からプロジェクトがスタートし、3月
全力疾走！ AIで“進化”するチーター型ロボットの実力（動画あり）（WIRED.jp） - Yahoo!ニュース
産まれたばかりの赤ちゃんが時速9マイル（時速14km）で走れないのは、きっといいことなのだろう。赤ちゃんがハイハイから歩けるようになるまでの間は、母親は子どもがどこかに行ってしまう心配をする必要はないからだ。 【実際の走行動画】その速さに驚き！ しかし、ロボット工学者にはそんな時間はない。そこで、機械が赤ちゃんのように試行錯誤しながら動きを習得する方法を開発している。ただし、赤ちゃんが歩き方を習得するまでにかかる時間の数倍の速さで習得しているのだ。 上の動画でご覧いただいている走りは、優雅な動きとはとても言えないだろう。これはマサチューセッツ工科大学（MIT）の科学者たちが研究開発を進めている「Mini Cheetah」と呼ばれるロボットだ。このロボットは3月中旬に、これまでで最も速い秒速約13フィート（秒速約4m）、すなわち時速9マイル（時速約14km）を記録したとMITの研究者が発表し
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
NTT、「人のように音を聞く」人工ニューラルネットワーク
東京大学深層学習（Deep Learning基礎講座2022）深層学習と自然言語処理
