イスラエルが衛星テレビ局「アルジャジーラ」の国内事務所を閉鎖し公式ウェブサイトへの接続も遮断
現地時間の2024年5月5日、イスラエル政府は中東の衛星テレビ局「アルジャジーラ」がイスラエル国内に置く事務所を閉鎖し、イスラエル国内からのアルジャジーラ公式ウェブサイトへのアクセスも遮断しました。 Israel shuts down local Al Jazeera offices in ‘dark day for the media’ | Israel | The Guardian https://www.theguardian.com/world/article/2024/may/05/israel-shuts-down-local-al-jazeera-offices-in-dark-day-for-the-media イスラエル政府は2023年10月以降、外国人ジャーナリストによるガザ地区への立ち入りを禁止しており、2023年10月から続くイスラエルとイスラム教原理主義組織「ハマ
なぜ Apple が M4 をいきなり発表したのか? TSMC ロードマップとローカルAI時代の幕開け - 狐の王国
昨晩、Apple が新型 iPad Pro と iPad Air を発表した。一部で予想されていた通り、M3 はスキップして M4 が搭載された。Air も M3 ではなく M2 が搭載された。これは Apple Silicon を製造する TSMC の動向をある程度追いかけてる人にとっては、とても合点がいく展開だったと思う。 www.apple.com Apple Silicon でも TSMC の N3B と呼ばれる 3nm 世代を使って製造されるのは iPhone 15 Pro に搭載される A17 Pro だけになるんじゃないかと考えていた。なぜなら TSMC N3B はたいへん歩留まりが悪い、つまり不良品率が高くて製造コストが高いと報じられていたからだ。それを改善した N3E もすでに動いていて、Apple 製品以外はこちらを使うことになるだろうとも報じられていた。 実際は Ap
1つの大きなLLM（大規模言語モデル）を複数のGPUで力を合わせて動かそう | IIJ Engineers Blog
地方拠点の一つ、九州支社に所属しています。サーバ・ストレージを中心としたSI業務に携わってましたが、現在は技術探索・深堀業務を中心に対応しています。 2018年に難病を患ったことにより、定期的に入退院を繰り返しつつ、2023年には男性更年期障害の発症をきっかけに、トランスジェンダーとしての道を歩み始めてます。 LLM群雄割拠の時代 昨今、ローカルGPUで駆動できるようなLLM（大規模言語モデル）もかなり増えてきて、キャッチコピー的に「ついに我が家にもGPT-4が！」とか言われるようになってまいりました。パラメータ規模で言えば70億～130億(7B-13B)パラメータ、700億(70B)パラメータ、1400億(140B)パラメータあたりのモデルが活発にリリースされているように見受けられます。 大きなモデルをGPU寄せ集めしつつ遊びたい！ しかしながら、コンシュマー向けのGPUにおいては、7B
もしもブラックホールに落ちたら…… NASAが再現動画を公開 近いほど“時間がゆっくり”になる現象など解説
もしブラックホールに落ちたらどうなるか？──米NASAは5月6日（現地時間）、その疑問の答えとなる“ブラックホールに突入する様子”を再現した動画を公開した。NASAが持つスーパーコンピュータによって制作したシミュレーション映像で、360度動画を含む複数の解説動画をYouTubeで公開している。 映像内で突入するのは、太陽の約430万倍の質量を持つ超巨大ブラックホール。これは天の川銀河の中心に位置するブラックホールの大きさに匹敵するという。動画はブラックホールから約6億4000万km離れた位置から始まり、ブラックホールの中にある光さえも脱出できないほど強い重力がかかる領域の境界「事象の地平面」を目指していく。 映像ではブラックホールが近づくにつれて、周りにある円盤や背景がゆがんでいく様子を確認できる。なお、映像は2パターンあり「事象の地平面をわずかに外れ、ブラックホールを往復して戻ってくる展
論文検索のポストGoogleか。事業開発を加速する「Memory AI」とは | Forbes JAPAN 公式サイト（フォーブス ジャパン）
日本の大企業が注目するリサーチツールをご存知だろうか。3億件以上の研究論文から技術の相関性を瞬時に可視化できる「Memory AI」なるもので、2023年6月にプレベータ版をリリースすると、半年でキリンホールディングスや大正製薬など大手企業約20社が顧客になった。 注目される理由は、企業の研究開発や事業開発担当者が技術調査や分析にかかる工数を最大で9割削減できるからだ。日本は特許出願件数で2022年、28.9万件で世界3位。国・地域別のGDP（国内総生産）に占める研究開発費総額の割合が3.59%と高く、ここ20年間で世界最高レベルにある（※）。科学技術においてこれだけ充実した環境にありながら、大きな問題がある。研究開発の最初の工程となる調査や分析には短くて半年、長いと1年半もの時間が必要になる。この非効率性に着眼したのが、当時、ニューヨーク州立大学の学生だった畑瀬研斗が設立したMEMORY
Pika、RunwayMLなど動画生成AIサービスを同一プロンプトで比較した結果。OpenAI Soraでも実際は膨大なガチャと後編集 | テクノエッジ TechnoEdge
こうした動きと並行して、OpenAIは一部の映像クリエイターにSoraを試用してもらい、その作品を積極的に公開しています。中でも僕が注目したのは、「パンクロック・ピクサー」の異名を持つshy kidsというカナダの映像プロダクションが制作した「Air Head」です。これは頭が黄色い風船で出来ている主人公が、自転車に乗ったり、サボテンだらけの通路を歩いたり、風に飛ばされた頭を胴体が追いかけるといった内容の、アイデアに満ちていてAI生成動画の可能性を示す1分21秒の小品でした。 ところが、4月半ばにfxguideというオンラインメディアがshy kidsを取材して、Soraの実際の使用感を語った”Actually Using SORA”という記事を掲載したのです。 それによると、Soraも他の動画生成AIと同じく、どのような映像が生成されるかはスロットマシン（昨今の日本風にいえば、ガチャ）の
KAN: Kolmogorov-Arnold Networks
Inspired by the Kolmogorov-Arnold representation theorem, we propose Kolmogorov-Arnold Networks (KANs) as promising alternatives to Multi-Layer Perceptrons (MLPs). While MLPs have fixed activation functions on nodes ("neurons"), KANs have learnable activation functions on edges ("weights"). KANs have no linear weights at all -- every weight parameter is replaced by a univariate function parametriz
AIにフォーカスしたRDB「Oracle Database 23ai」正式リリース。AI用のベクトルサーチなど可能に
AIにフォーカスしたRDB「Oracle Database 23ai」正式リリース。AI用のベクトルサーチなど可能に オラクルはAIにフォーカスしたデータベース「Oracle Database 23ai」の正式リリースを発表しました。 Oracle Database 23aiは、昨年（2023年）9月にリリースされた「Oracle Database 23c」にAI関連をはじめとする新機能を追加した上で、「23c」の名前を変更したものだと説明されています。 参考：［速報］Oracle Database 23cが正式リリース。JavaScriptストアドプロシージャ、DBに自然言語で問い合わせなど新機能。Oracle CloudWorld 2023開幕 Bring #AI algorithms to where your data lives with Oracle Database 23ai
PCの操作をすべて録画＆文字起こしして過去の操作を丸ごと検索可能にするアプリ「Windrecorder」
PCを使っていると、過去の操作内容やブラウザで閲覧していた情報を思い出したくなるタイミングが頻繁に発生します。そんな時に役立ちそうなPC操作記録アプリ「Windrecorder」がオープンソースで開発されています。 GitHub - yuka-friends/Windrecorder: Windrecorder is a memory search app by records everything on your screen in small size, to let you rewind what you have seen, query through OCR text or image description, and get activity statistics. https://github.com/yuka-friends/Windrecorder I made an o
LEIA: 言語間転移学習でLLMを賢くする新しい方法
Studio Ousiaと理化学研究所に所属している山田育矢です。 この記事では、大規模言語モデル（LLM）の性能を向上させる新しい方法であるLEIA（Lightweight Entity-based Inter-language Adaptation）を紹介します。 LLMは言語によって性能に顕著な差があり、訓練に使われるテキストが最も多い英語において特に性能が高い傾向があることが知られています。LEIAは、LLMが蓄えている英語の知識を他の言語から使えるようにする訓練を施すことで、英語以外の言語でのLLMの性能を向上させる新しい手法です。 この度、英語・日本語の2言語LLMであるSwallowの7Bと13Bのモデルに対してLEIAによる訓練を施して性能向上を行ったモデルを公開します。 ライセンスは、Swallowと同様のLlama 2 Community Licenseです。これらのモ
傑作インディーゲーム『Papers, Please』『Return of the Obra Dinn』はどうやってUnityで作られた？ 開発者ルーカス・ポープ（Lucas Pope）氏に訊く、“制約”から考えるゲームの作り方
2023年2月にUnity Japanの代表に就任した大前氏は、2010年ごろから「Unity」が日本で浸透するために尽力してきた人物で、Unity Japanの立ち上げにも関わってきた。かつてはゲームプログラマーとしてフロム・ソフトウェアで『デモンズソウル』などの開発に取り組み、またUnityでは『COGEN』の開発などに携わっていた経歴も持つ。 そんな大前氏がゲーム開発者との連帯を深めるべく、電ファミニコゲーマーを通じ、彼が聞き手を担う連載企画が進行していた。上述したような経歴を持つ大前氏の視点から、現在のゲーム開発についてや、ゲームを作っていく生き方などについて、いろいろな話ができれば面白いのではないか──と考えていたのだ。 しかし準備を進めていた最中の2023年9月、Unity本社が発表した新料金ポリシー「Unity Runtime Fee」がゲーム開発者を中心に大きな混乱を招いた
NEC、世界トップレベル性能の高速な大規模言語モデル (LLM) cotomi Pro / cotomi Light を開発
NECは、LLM(Large Language Model：大規模言語モデル)「cotomi(注1)」のラインアップ拡充のため、学習データやアーキテクチャを刷新した「cotomi Pro」「cotomi Light」を開発しました。 昨今の生成AIの急速な発展に伴い、様々な企業や公共機関が、LLMを活用した業務変革の検討・検証を進めています。具体的な活用シーンが見えてくる中で、導入・運用に際してレスポンスタイム、業務データ連携や情報漏洩・脆弱性等のセキュリティ面など、お客様ニーズにあったモデル・形態での提供が求められています。 NECは、高速性と高性能の両立がお客様の課題解決に必須と考え、LLMのラインアップを拡充しました。今回開発した「cotomi Pro」「cotomi Light」は、グローバルのLLMと同等の高い性能を、十数倍の速度で実現する高速・高性能なモデルです。一般的に、LL
金子勇さんのED法のシンプルな解説を試みた - Qiita
はじめに @pocokhc(ちぃがぅ)さんが、金子勇さんのED法を実装してMNISTの学習に成功しました。 金子勇さんの失われたED法 金子勇さんの失われたED法発掘の経緯 ここではちぃがぅさんのコードを元に、ED法をシンプルに解説していきたいと思います。 ED法をわかりやすく解説するため、今入力を(1,0)としたとき(0)を推論するXOR問題を考えてみましょう。 ED法の場合, 入力、重みともに正負(p,n)２つ分の変数を用意する必要があります。 例えば 入力を(1,0)とすると 1 (p) ,1 (n), 0 (p), 0 (n) の4つとバイアス分の2つの p n が必要です。 また, 3層構造として中間層のニューロンをp, n 2つのみとします。 中間層のニューロンを２つとしたときは、 p, n の２つと, バイアス用のp, n の２つが必要です。 中間層のニューロン各々は、そのニ
言語モデルを高位合成でFPGAに実装してみた
言語モデルを高位合成でFPGAに実装してみた Turing株式会社のリサーチチームでインターンしているM1の内山です。 Turing株式会社では大規模基盤モデルによる完全自動運転を目指しており、その実現に欠かせない技術として大規模言語モデルの研究開発を行っています。 Generative AI LLMの広範な知識と思考能力に加え、視覚情報やセンサーデータなどの多様な入力を受け入れることで、車の周囲の状況を正確に認識します。さらに、世界モデルを適用することで、高度な空間認知と身体性を獲得し、実世界に対応した生成AIを実現します。 https://tur.ing/ より引用 しかしながら、従来の大規模モデルはデータセンターという大量のGPU・潤沢な電源・安定した地盤を備えた豊かな環境で処理されるものであり、対して自動車というものは余りにも狭く、電源が乏しく、振動が大きいという劣悪極まりない環境
「さくらのクラウド検定」誕生 今夏に初試験 難易度は「ITパスポートよりやや難しい」
さくらインターネットは4月24日、クラウドサービス「さくらのクラウド」の検定制度を設けると発表した。「クラウド化に取り組む企業やITの学びを深めたい学校の先生、次世代を担う子どもたちなど、広範囲に渡るDX人材育成のために検定の設立を決定した」（同社） 初回の検定試験は今夏開催予定。オンラインでの受検が可能という。出題範囲は「デジタル技術の基礎」「さくらインターネットのサービス」「さくらのクラウドでのアーキテクチャ設計」。難易度は「ITパスポートよりやや難しい」（同社）といい、4月末には学習用のオンライン教材や例題も提供するという。 【訂正：2024年4月26日午後11時36分】当初、例題が公開されているとしましたが、さくらインターネットの発表に修正があり、実際には例題は未公開であることが分かりましたので、記事本文を訂正しました。 関連記事 さくらインターネットの株価急伸 ガバメントクラウド
LLMプロダクト開発者がMac Studioを買ってローカルLLMを触るべき理由｜erukiti
もしあなたがLLMを使ったプロダクトを何かしら開発している、もしくは興味があるのなら、メモリを大量に積んだMac Studioの購入を検討すべきです。 対象読者NVIDIAが絶対にいいという人はこの記事の対象読者ではありません。また、用途によって、ローカルマシンによるローカルLLMが向いてる・向いてないは明確にあるので、向いてない用途にしか使わない人も対象読者ではありません。あしからず。 また、この記事は別にNVIDIAをdisる意図はありません。みんな違っていい。NVIDIAもいい選択肢ですが、Mac Studioも悪くないですよ、と言いたい。 結論LLMプロダクト開発において、今年はもはやローカルLLMを無視できない、してはいけない状況です。 LLMプロダクト開発をする会社の視点でいえば、是非とも80GB以上の十分なGPUメモリを積んだマシンを用意できるようなアジリティを持つのが望まし
ED法への生理学的な考察 - Qiita
初めまして。普段は産婦人科医をしつつAIの医学応用に関する研究をしています。 Qiitaは見る専でしたが、以下のバズっている記事を拝見した時、生理学の神経構造の話をふと思い出したのでメモ代わりに記載しようと思います。 読みにくい部分があれば申し訳ありません。 とくに@pocokhc(ちぃがぅ)さんの記事のコード詳細と実験内容を見ていた時、実際の神経系の構造とあまりに似ていたことにびっくりしました。 まず、興奮性ニューロンと抑制性ニューロンの2種類から構成されるED法の構成ですが、これは実際の神経系でも同様の構造になっています。実際の神経はシナプスのつながりをニューロンと言います。信号を伝える側の興奮性シナプスに電気が走ると、電位依存性のカルシウムチャネルが開き、Caが放出されます。このCaの影響でシナプスの末端にある小さな袋から神経伝達物質（中枢神経系では主にグルタミン酸）が放出されます。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Convolution Block Attention Module (CBAM) | Paperspace Blog
Stack Overflow and OpenAI Partner to Strengthen the World’s Most Popular Large Language Models - Press release - Stack Overflow
[みんなのケータイ]いまさらながらiPhoneの「HEIC形式」がちょっとめんどくさい![[みんなのケータイ]いまさらながらiPhoneの「HEIC形式」がちょっとめんどくさい](https://cdn-ak-scissors.b.st-hatena.com/image/square/3b9fe1e66090731858e0cf2d511a8307f6de8942/height=288;version=1;width=512/https%3A%2F%2Fk-tai.watch.impress.co.jp%2Fimg%2Fktw%2Flist%2F1587%2F113%2F02.jpg)
