LINEから36億(3.6B)パラメータの大規模言語モデル(LLM)が公開されたので早速遊んでみた。正確には遊んだのは昨日のデイリーAIニュースなのだが、面白かったのでこちらにも転載する。 細かいやり方は大先生のページを参照のこと。 例によってこんな関数を書いた def line(prompt): # 推論の実行 input_ids = tokenizer.encode(prompt, add_special_tokens=False, return_tensors="pt") tokens = model.generate( input_ids.to(device=model.device), min_length=50, max_length=300, temperature=1.0, do_sample=True, pad_token_id=tokenizer.pad_token_i

フガクラ @fugakura 怖ぇー、chat gpt使ってたら「視覴」という見慣れない言葉を吐き出したので検索したところ、ヒットするサイトがほとんど直近日付のAI出力された文章だった これっていわばAIのハルシネーションが生み出した存在しない単語なのでは…？ pic.twitter.com/TVXWcNlVWh 2023-06-08 08:51:02

株式会社サイバーエージェント（本社：東京都渋谷区、代表取締役：藤田晋、東証プライム市場：証券コード4751）は、最大68億パラメータの日本語LLM（Large Language Model、大規模言語モデル）を一般公開したことをお知らせいたします。 近年、OpenAI社が開発した「ChatGPT」※1 を始めとする生成AI・LLMは急速な進化を遂げており、世界中のあらゆる業界・ビジネスにおいて活用が進んでいます。 一方、既存のLLMのほとんどは英語を中心に学習されているため、日本語および日本文化に強いLLMは少ない状況です。 ■最大68億パラメータの日本語LLM（大規模言語モデル）の公開について こうした背景のもと、当社は日本語LLMの開発に取り組んでおり、このたび一部モデルをHugging Face Hubにて公開いたしました。公開されたモデルはオープンな日本語データ※2で学習したもので

今のGPT4は実践投入レベルの使い方もあれば、そうでない使い方もあると思っている。今回のポストでは、私がやった執筆支援の実験を8つほど紹介し、物書き目線から3段階評価した。○は作品制作にすでに実戦投入している利用方法。△は自分が実作に活用はしていないものの、ユーザビリティが良くなれば使いたいと思えるもの。×は現状だと使い所がない、ありがたみがないなと思ったものである。 1）AI読者モニター：書いた小説を読んでもらって感想や質問をGPTに自動生成させる → △使って意味ある場面はありそうPython-docxを利用して該当の位置にGPTの感想や質問を自動挿入 できた〜！ボタン1つ押せばChatGPTにWordで小説を読ませて「ここまで読んだときにこういう感想を持ったよ」とか「こういう疑問を持ったよ」みたいなことをコメントさせられるようになった。仮想モニタ読者の反応をヒントに執筆支援ができんじ

小話をどうぞ。 ＊　　＊　　＊ 犬売ります とある新聞広告より 「犬売ります。何でも食べます。子どもが好きです」 ロミオとジュリエット A「読書は好きですか？」 B「はい、読書は大好きです」 A「ロミオとジュリエットは読んだ？」 B「はい、ロミオは読みましたが、ジュリエットはまだです」 単位がほしい 女学生「単位をください 、何でもしますので」 教授「本当に、どんなことでもしてくれるのかい？」 女学生「お望みのことを何でも……秘密のことでも」 教授「それじゃ、してくれるかね……勉強を」 ＊　　＊　　＊ 面白い小話を聞いたときに感じる「おかしみ」は、AIも感じることができるのだろうか？　「ユーモアがある」とか「ウィットに富む」ことを、AIは理解できるのだろうか？ OpenAIでやってみた。 最初に「今から面白い小話をします。この話の面白さを教えてください」と宣言する。その上で、小話をする。い

らけしで @lakeside529 サイバーパンクによくある戦闘服って 英語でなんていうの？ AI> "powered exoskeleton combat suit" がええよ はえー やってみよ ... ... すご。これまじのまじで使える… #ChatGPT #anythingv3 #AIart #AIイラスト pic.twitter.com/k2GO4c6OdB 2022-12-01 23:23:07

AIひらめきメーカーは、AIを使って無限にアイデアを生成できるサービスです。 入力ワードから連想できるアイデアを、たった1クリックで生成します。ワンタップで生成します。 今すぐアイデアが欲しい方へ、新しいひらめきを得てみませんか？

くりぷとバイオ@研究×新規事業開発 @cryptobiotech 企業で研究×新規事業開発に励む人 | 修士卒→大手メーカー研究職→Ph.D.取得→新規事業開発職 | 生成AIとDeepTech勉強中 | BiotechとFoodtechが好き | ココナラで院生就活支援→https://t.co/d94kwtA29T | note→ https://t.co/pvmKzQaD1A https://t.co/0FG5b9HSAL くりぷとバイオ@研究×新規事業開発 @cryptobiotech 1st author論文持ってる修士就活生が増えてるようで、それを達成してるM1後輩に話を聞いてみたら「日本語で文章書いて全部DeepL翻訳で英語化→英語化された文章をgoogle翻訳、みらい翻訳で日本語化→違和感ないか確認→指導教官に提出」というプロセスを踏んでるらしい。そりゃ早くなるわけだ。すご

人工知能を研究している非営利団体OpenAIが開発した言語モデル「GPT-3」を使用して、何者かが海外掲示板のRedditに1週間近く投稿を続けていたことが分かりました。GPT-3による投稿は、最終的に開発者の手によって停止されましたが、発覚するまでの間GPT-3は誰にも気付かれることなく、Redditユーザーと言葉を交わしていたと報じられています。 kmeme: GPT-3 Bot Posed as a Human on AskReddit for a Week https://www.kmeme.com/2020/10/gpt-3-bot-went-undetected-askreddit-for.html Someone let a GPT-3 bot loose on Reddit — it didn’t end well https://thenextweb.com/neural

「GPT-3は我々の『書く』ということを変える力を秘めている」と考えた大学生が、実証用にGPT-3に記事を作らせたブログを開設したところ、2週間で2万6000人が訪れ、ソーシャルニュースサイト・Hacker Newsで一時的に1位になったそうです。これだけ多数の目に触れてなお、「GPT-3によるものではないか」と疑いをかけた人はわずかだったとのこと。 My GPT-3 Blog Got 26 Thousand Visitors in 2 Weeks - Excavations https://liamp.substack.com/p/my-gpt-3-blog-got-26-thousand-visitors 2020年7月に技術者のマヌエル・アラオス氏が、GPT-3に関するブログ記事を公開して大きな話題となりました。 「GPT-3はビットコイン以来の破壊的な可能性を秘めている」というブロ

人間が書いたものと見分けが付かないぐらいに精度の高い文章を生成できる言語モデル「GPT-2」の後継である「GPT-3」が、人工知能を研究する組織・OpenAIにより公開されました。 GitHub - openai/gpt-3: GPT-3: Language Models are Few-Shot Learners https://github.com/openai/gpt-3 [2005.14165] Language Models are Few-Shot Learners https://arxiv.org/abs/2005.14165 OpenAI debuts gigantic GPT-3 language model with 175 billion parameters https://venturebeat.com/2020/05/29/openai-debuts-giga

「日本語はいつ使えるようになりますか」「中国語はいつ使えるようになりますか」この2つの質問をこれまで幾度となく受けてきました。今こそ喜んでお答えしましょう。「今日！」「今天！」 今年初めに大幅な改善を加えたDeepLのニューラルネットワークアーキテクチャを使うことで、日本語と中国語でかつてないほど上手く訳文を作れるようになりました。DeepLが求める翻訳基準を満たしているかどうか確かめるために、今回もブラインドテストを行いました。ブラインドテストでは、オンラインで使える様々な翻訳システムで訳した文章とDeepL翻訳で訳した文章を並べ、翻訳システムの名前を伏せた状態で日本語と中国語の翻訳者に示し、それぞれ評価してもらいました。またしても、DeepLの翻訳が他よりも優れているとして選ばれる頻度が最も高いという結果になりました。結果はこちらです。 日本語と中国語は独自の言語体系を持っているため、

最近の機械翻訳の進歩は本当にすごい。以前「みらい翻訳」を試してみて、その精度におののいたのですが（「みらい翻訳」を使って仕事をしました。（使用感） - 日比嘉高研究室）、先日来、DeepL翻訳という新手のサービスが登場して話題になっています。 gigazine.net そこで、この度も実際にやってみました。検証材料はつい先日作ったばかりの、自分の論文の英文要旨です。英語を日常的に使わない研究者が、もっともしばしば直面する「英語を書かなければならない場面」です。 以下（１）原文の日本語要旨、（２）有料校正サービスを利用した完成版、（３）Google翻訳、（４）みらい翻訳、（５）DeepL翻訳、の順に、結果を貼り付けました。 （１）原文の日本語要旨 この論考では、「満洲」における日本語書籍の小売史を考える。主たる対象となるのは日本語の書物を扱った書籍店である。とりわけ、これまでほとんど手をつけ

昨年暮れに、新 企業の翻訳者を目指す皆さんへという本を出版しましたが、その本を機械翻訳を使ってまるまる１冊英語に翻訳してみました。翻訳済みの英語はこちらです。PDFファイルを無料でダウンロードいただけます。 使った機械翻訳システムはみらい翻訳です。Google翻訳やMicrosoft Translatorも試してみましたが、少なくとも昨年夏にいろいろ試した結果、（英日はわかりませんが）日英の翻訳品質が一番良い印象でした。もっとも、定量的な評価をしたわけではないので、あくまでも「印象」です。 私は1980年代の終わりころに機械翻訳の研究をしていました（学位も機械翻訳の研究でいただきました）。ですので、ある程度は機械翻訳のことはわかっていると思っていました。初期のもくろみは、辞書の整備と十分な前編集を行うことで、ほぼ後編集なしで本１冊をまるまる英訳することでした。後で述べるように、今の機械翻訳

Google傘下の人工知能開発企業DeepMindは病気の予測やエネルギー効率化などさまざなまな分野でAIアルゴリズムを役立てています。2019年10月15日(火)、新たにDeepMindは古代の碑文から「抜け落ちた記述」を予測するアルゴリズムを開発したと発表しました。人間の専門家が2時間かける作業を、AIはものの数秒で完了するとのことです。 [1910.06262] Restoring ancient text using deep learning: a case study on Greek epigraphy https://arxiv.org/abs/1910.06262 Restoring ancient text using deep learning: a case study on Greek epigraphy | DeepMind https://deepmind.c

変なモノ好きで、比較文化にこだわる2人組（1号＆2号）旅行ライターユニット。中国の面白可笑しいものばかりを集めて本にした「 中国の変-現代中国路上考現学 」（バジリコ刊）が発売中。 前の記事：国境の街で年を越し、カウントダウン時差を見てみたい ＞ 個人サイト 旅ライターユニット、ライスマウンテンのページ スマホで翻訳は楽しい たとえばこんな出口案内が 翻訳アプリを介してこんな結果となる。かっこいい。 出口は輸出の意味もあるから東北輸出となってるけど、なかなかがんばっているのではないだろう 中国語簡体字から日本語漢字に翻訳してくれる。便利だ。便利なうえに未来だ。 こんな感じで街のいろんな場面で翻訳をかけてみた。なお画像の文字が小さくて見にくい場合は、クリックすると大きいサイズで見られる。（スマホの場合はタップしてさらに二本指で拡大） 昭和な雰囲気漂う下町の一角の焦点の並びを翻訳する 本来は「

デジタルドキュメント2023ウェビナーでメタデータ野村社長が特別講演：『マニュアルの社内知識や商品知識をchatGPTに人間以上に親切・適切に回答させる』メタデータ株式会社 11月02日 18時00分 『毎日こつこつ俺タワー』「木槌【ハロウィン】」登場＆ピックアップ！SEモバイル・アンド・オンライン株式会社 11月02日 18時00分 明日香野の西日本と東日本のトピックをまとめた広報誌「明日香野だより」2023年11月号配信開始明日香食品株式会社 11月02日 18時00分 明日香野の広報誌「道中茶寮新聞」最新2023年11月号を配信開始明日香食品株式会社 11月02日 18時00分 再生可能エネルギー入門セミナー　12月10日　山形県遊佐町で開催　RAUL株式会社代表 江田健二が登壇しますRAUL株式会社 11月02日 18時00分 社会ニュースの一覧へ

会話が見える！　世界最速の「リアルタイム字幕」にびっくり：水曜インタビュー劇場（瞬時公演）（1/5 ページ） 「UDトーク」というアプリをご存じだろうか。目の前の会話が次々に字幕になるサービスだが、その仕組みはどうなっているのか？　アプリを開発した青木秀仁さんに聞いたところ……。 2月某日、幕張メッセ（千葉市）。記事のネタを探すために、記者はとあるセミナーを聴講していたところ、大きなモニターに釘付けとなった。 モニターには、登壇者の発言がリアルタイムで文字になって映し出されていたのだ。「ITmedia ビジネスオンラインって最高ね」と発言すると、瞬時に「ITmedia ビジネスオンラインって最高ね」と表示される。それだけではない。日本語の横で、英語のスペルも次々に並んでいたのだ。 よーく見ると、ところどころで“おかしな日本語”も登場する。例えば、「ITmedia ビジネスオンラインって再考

開発したAIの解答システムは、クラウドサービス「Amazon Web Services」（AWS）上のサーバで動作させた結果を用いているが、サーバ自体は特別ハイスペックなものではなく「性能が良いラップトップPCとほぼ同等の計算性能のもの」（山田さん）という。 敗北したクイズ王の1人は「狐につままれたようだ」と漏らしたという。「終盤は人間が答えると歓声が上がっていた。人工知能のコンペなのに（笑）」（山田さん） 対戦は「クイズボウル」という形式（英語）で行われた。まずコンペティションに参加するチームが開発したAI同士で争い、優勝したAIが人間のクイズ王チームと戦う。クイズ王チームは、米クイズ番組「Jeopardy!」の優勝者で「Who Wants to be a Millionaire？」（邦題：クイズ＄ミリオネア）で好成績を収めた人物など6人だ。 クイズボウルの特徴は、“早押し”で答えること