Anond AI開発日記 - Hatena Developer Blog
こんにちは。Anond AIを研究している id:cockscomb です。 私たちはこの度、このAI時代を制するプロダクト、Anond AIを開発しました。本エントリではその詳細について説明します。 Anond AIとは Anond AIはいわゆるGenerative AIで、人類が匿名で日記を書くことをアシストしてくれるものです。私たちは日記に芸術性を感じる文化を持っていて、「日記文学」という言葉もあります。Generative AIによって、名前を隠して楽しく日記を書くことをサポートし、匿名日記文化のさらなる発展に寄与できないか、と考えました。 Anond AIは、rinna/japanese-gpt2-mediumをはてな匿名ダイアリーのデータを用いてファインチューニングし、ドメイン適応させたものです。 Anond AIの開発 Anond AIは実験的なプロダクトのため、Hatel
ChatGPTやGoogleのBardに匹敵する精度の日本語対応チャットAI「Vicuna-13B」が公開されたので使ってみた
カリフォルニア大学バークレー校などの研究チームがオープンソースの大規模言語モデル「Vicuna-13B」を公開しました。Vicuna-13BはOpenAIのChatGPTやGoogleのBardに近い精度で回答を生成でき、日本語にも対応しているとのこと。実際に動かせるデモも公開されていたので、使ってみました。 Vicuna: An Open-Source Chatbot Impressing GPT-4 with 90%* ChatGPT Quality | by the Team with members from UC Berkeley, CMU, Stanford, and UC San Diego https://vicuna.lmsys.org/ GitHub - lm-sys/FastChat: An open platform for training, serving, a
Reddit - Dive into anything
Installing Windows Subsystem for Linux (WSL) >>WSL installation is optional.<< If you do not want to install this, you can skip over to the Windows specific instructions below for 8-bit or 4-bit. This section requires an NVIDIA GPU. On Windows, you may receive better performance when using WSL. To install WSL using the instructions below, first ensure you are running at least Windows 10 version 20
日本語Alpacaデータを用いてJapanese-Alpaca-LoRAを作ったので公開します【期間限定デモページあり】｜kun1emon
⚠️注意今回公開するのはLoRAを用いて作成したLLaMAの日本語化Adapterでありモデル自体ではありません。 LoRAをマージするベースのLLaMAは商用不可であり、今回公開するAdapterで日本語化したモデルも商用利用はできません。 OpneAIの利用規約で、OpenAIサービス、ChatGPTの出力結果を競合モデル開発用途に利用することはできません コンテンツ生成者はできません。 詳細は記事後半で述べていますが利用規約が適用されるのはコンテンツ生成者までです。 概要2022年の11月末にOpenAIからChatGPTが発表されてから、それに追随するようにGoogleからBard、MetaからLLaMAなど大規模言語モデル（LLM）が発表されました。さらにLLaMA 7Bを「text-davinci-003」を用いて「Self-Instruct」で作成された52Kのデータセット（
Alpaca-loraを日本語タスクでファインチューニングする - Qiita
Alpaca-LoRAという家庭用GPUでも大規模言語モデルのFineTuningが可能なモデルが発表されました。 本記事では、livedoorニュースコーパスを使用してAlpaca-LoRAをFineTuningしてニュースのタイトルを考えさせるというタスクに挑戦してみます。 技術の概要 Alpacaとは Alpacaとは、先日Metaが発表したLLaMa 7Bをtext-davinci-003によるself-instructで生成されたデータを使用してFineTuningした言語モデル。 生成したデータは52K個で生成コストは500ドル以下と低コストです。 人間による予備評価では7Bという比較的小さなモデルにも関わらず、text-davinci-003に似た挙動を示すという報告があげられています。 Alpaca-LoRAとは Alpaca-LoRAとはAlpacaで作成したデータセット
フィンランド語だけ仲間はずれ？北欧の言語事情 - 北欧情報メディアNorr
Hei!! Moi!! 北欧の国は兄弟みたいな関係だと言われることがあります。 背が高くて、碧眼。ブロンドで美男美女。国旗も似てる。 こんな絵に書いたような北欧のステレオタイプを持っている人も多いかも。それか、スウェーデン単体、デンマーク単体で切り離して覚えていると言うよりは北欧という地域で覚えている人も多いかもしれません。 それにスウェーデン、フィンランド、ノルウェーの国の位置を正確に答えられない人も多いのでは？ だから、なんとなく似ているイメージを持っているのかも。北欧、北欧と地域で語られることも多いから、いざそれぞれについて聞かれると解答に困ってしまうかもしれませんね。 たしかに北欧はどこも良いイメージがあって、 ・高福祉社会 ・幸福度 ・平等 ・教育 ・平和・安全 こんな枕詞がどこにも当てはまりがちかも。 ただ！！フィンランド語は他の北欧言語と全くと言っていいほど違う。 初見で聴き
文字体系（表音文字/表意文字/表語文字）について
みなさん、ここでルシェルが文字体系について説明するだワン(^^♪ いわゆる「文字」といわれるものは、大きく分類すると以下の３つになるだワン！ ①表音（ひょうおん）文字 ・・・ 一つの文字で音素（おんそ）または音節（おんせつ）を表す文字体系のこと。 ②表意（ひょうい）文字 ・・・ ひとつひとつの文字が意味を表している文字体系のこと。 ③表語（ひょうご）文字 ・・・ ひとつひとつの文字が意味だけでなく、発音（はつおん）も同時に表している文字体系のこと。 ちょっと難しいので、桃舟先生の「桃」を例に説明するね。 ①表音文字の代表例は「アルファベット」「ひらがな」「カタカナ」ね。 A、B、C、あ、い、う、カ、キ、ク、など一つの文字では意味を表せないけど、「PEACH」「もも」「モモ」といったように文字を組み合わせることで、「PEACH」「モモ」「もも」といった単語（たんご）や音（おん）に変換して意味
チャットボットAIの返答は全て「幻覚」、最大の難関はハルシネーションの善悪問題
2023年における最重要テクノロジーは「ChatGPT」に代表されるチャットボットAI（人工知能）だ。Webを検索せずともユーザーの調べたいことに答えてくれるチャットボットは、Google検索を脅かす存在になると見なされ始めている。 マイクロソフトが「ChatGPTベースのBing」を準備か 米メディアのThe Informationは2023年1月3日（米国時間）、米Microsoft（マイクロソフト）が2023年3月にも、同社の検索エンジンBingにChatGPTベースの機能を提供する可能性があると報じている。 ChatGPTベースのBingではユーザーが検索クエリーを入力すると、その結果としてURLのリストが従来のように表示されるだけでなく、ChatGPTが生成した回答文が出所表記付きで出力されるのだという。ユーザーはURLに飛んで原文を読み込まなくても、ChatGPTが生成した文章
対話型チャットAI「ChatGPT」開始から1週間も経たないうちにユーザーが100万人を突破、そもそもChatGPTとは一体何なのか？
AIの研究・開発を行う団体「OpenAI」のサム・アルトマンCEOが、2022年12月1日にテスト版が一般公開された「ChatGPT」のユーザー数が100万人を突破したと発表しました。 Explainer: What is OpenAI’s chatbot ChatGPT and what is it used for? | Reuters https://www.reuters.com/technology/chatgpt-what-is-openais-chatbot-what-is-it-used-2022-12-05/ OpenAI’s ChatGPT crosses 1 million users, CEO says they might have to monetise this at some point | Technology News,The Indian Expres
OpenAIが高性能文字起こしAI「Whisper」を発表、日本語にも対応し早口言葉や歌詞も高精度に文字起こし可能
画像生成AI「DALL・E 2」や文章生成AI「GPT-3」といった高性能AIを開発してきたAI開発組織のOpenAIが、新たに音声を超高精度で認識して文章に書き起こせるAI「Whisper」を発表しました。発表と同時に公開されたサンプルでは「早口のセールストーク」や「ハイテンポな曲の歌詞」などの音声でも問題なく文字起こしできる性能の高さが示されています。 Introducing Whisper https://openai.com/blog/whisper/ GitHub - openai/whisper https://github.com/openai/whisper Whisperはインターネット上から収集された合計68万時間におよぶ音声データでトレーニングされた文字起こしAIです。OpenAIのブログ記事には「早口のセールストーク」「K-POPの曲」「フランス語」「独特なアクセン
ピジンとクレオールの違いについて
ピジン（pidgin）とクレオール（creole）の違いについてピジンとクレオールの違いについてです。簡単にいうと以下のように分けられます。 ピジン：異なる言語を話す人々の共通語として、互いの言語が混合して生まれた新たな言語。誰の母語話者でもない。クレオール：ピジンが母語話者を持つようになったもの ピジンとはピジンは「異なる言語を話す人々の共通語として、互いの言語が混合して生まれた新たな言語」と言われます。 ただ、一般にピジンというと、16世紀以降アフリカ・東南アジア・中南米・カリブ海などの欧米諸国の植民地で、ヨーロッパ系言語と現地語の接触で生まれたものを指すことが多いです。 植民地では、入植者と現地の人との間でコミュニケーションする必要がありました。 ただ、お互い共通言語を持たないので、意思疎通は難しかったと考えられます。 今もそうですが、お互いの共通言語がない場合、簡単な単語のみを使う
ヒトの言語獲得 “のど“の構造が関係か 京大研究グループ | NHK
ヒトが進化の過程で言語を操れるようになったのは、サルに比べてのどの構造が単純で、音を安定して出せるからだとする研究結果を、京都大学などの研究グループがまとめました。ヒトが言語を獲得した過程の解明につながる成果として注目されています。 京都大学ヒト行動進化研究センターの西村剛准教授らの研究グループは、ヒトが言語を獲得した過程を解明しようと、のどにある「声帯」に着目し、ヒトに近い43種類のサルののどの標本と比べました。 その結果、どのサルにも声帯の近くに、ヒトにはない「声帯膜」という組織があることを発見しました。 さらにチンパンジーなどで、のどの動きを観察する実験などを行った結果、声帯膜は声帯から出た音を増幅し、声を大きくする役割などを担う一方、声帯と互いに作用してしまい、声の大きさや高さを一定に保つのが難しいことが分かったということです。 声帯膜を持たないヒトは声帯を震わせて音を出し、唇や舌
𓁲 𓀀 𓀁 𓀂 𓀃 𓀄 𓀅 𓀆 𓀇 𓀈 𓀉 𓀊 𓀋 𓀌 𓀍 ..
𓁲 𓀀 𓀁 𓀂 𓀃 𓀄 𓀅 𓀆 𓀇 𓀈 𓀉 𓀊 𓀋 𓀌 𓀍 𓀎 𓀏 𓀐 𓀑 𓀒 𓀓 𓀔 𓀕 𓀖 𓀗 𓀘 𓀙 𓀚 𓀛 𓀜 𓀝 𓀞 𓀟 𓀠 𓀡 𓀢 𓀣 𓀤 𓀥 𓀦 𓀧 𓀨 𓀩 𓀪 𓀫 𓀬 𓀭 𓀮 𓀯 𓀰 𓀱 𓀲 𓀳 𓀴 𓀵 𓀶 𓀷 𓀸 𓀹 𓀺 𓀻 𓀼 𓀽 𓀾 𓀿 𓁀 𓁁 𓁂 𓁃 𓁄 𓁅 𓁆 𓁇 𓁈 𓁉 𓁊 𓁋 𓁌 𓁍 𓁎 𓁏 𓁐 𓁑 𓁒 𓁓 𓁔 𓁕 𓁖 𓁗 𓁘 𓁙 𓁚 𓁛 𓁜 𓁝 𓁞 𓁟 𓁠 𓁡 𓁢 𓁣 𓁤 𓁥 𓁦 𓁧 𓁨 𓁩 𓁪 𓁫 𓁬 𓁭 𓁮 𓁯 𓁰 𓁱 𓁳 𓁴 𓁵 𓁶 𓁷 𓁸 𓁹 𓁺 𓁻 𓁼 𓁽 𓁾 𓁿 𓂀 𓂁 𓂂 𓂃 𓂄
トップ - IPA 国際音声字母（記号）
IPAは、世界のすべての言語音を同定し分類する基準を設定することを目指して、国際音声学協会（International Phonetic Association）が制定したものである。 IPAでは図のように言語音をまず超分節音と分節音に、さらに後者を母音と子音に分類する。 子音は気流によって2つのチャートに区分され分類される。子音（肺気流）のチャートには、横軸に並ぶ11種類の調音点と、縦軸に並ぶ8種類の調音法が示される。それらの交差からなる枠（セル）内の左・右の位置が、それぞれ無声・有声の発声であることを意味する。 母音チャートは縦軸に4値の狭広特徴、横軸に3値の前奥（前後）特徴の区分を設けた台形の模式図を用いる。これら2種類の特徴の値の交点の左・右の位置により、それぞれ非円唇・円唇という2値の円唇性の区別が表わされる。 なお、現行のIPAでは、母音と子音は全く異なる基準（特徴）の用語で分
「S級」の起源は何か？ 過去の新聞記事から探ってみた。 - RainbowVortex
本稿は一般にＡ級の上の階級としてＳ級という言葉が使われるようになったのはいつ頃からか、またそれはどのような起源によるものなのかを過去の新聞記事から明らかにしようとするものである。 目次▲PAGE TOP 長い記事になるので、例により目次を置く。 ・はじめに ・仮説を立てる ・ヨミダス・聞蔵IIを使う ・ヨミダスで検索してみる ・聞蔵IIで検索してみる ・検索結果の分析 ・最初にＳ級という言葉が使われたのはいつ？ ・スナイプ級って何？ ・ヨットの「Ａ級」って何？ ・Ｓ級のジャガイモ ・最上位クラスの意味で最初に「Ｓ級」が使われたのは？ ・調査結果の考察 ・最後に はじめに▲INDEX 古くはスプリガンのＳ級エージェントや、幽☆遊☆白書のＳ級妖怪など、最近ではワンパンマンのＳ級ヒーローなどの例にみられるように、漫画作品における格付けではＡ級の上にＳ級が置かれることがよくある。もちろんビデオゲー
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
One click install fails on windows 10 · Issue #680 · oobabooga/text-generation-webui
4bit model loads but doesn't output. UnboundLocalError: local variable 'reply' referenced before assignment · Issue #681 · oobabooga/text-generation-webui
GitHub - oobabooga/text-generation-webui: A Gradio web UI for Large Language Models. Supports transformers, GPTQ, AWQ, EXL2, llama.cpp (GGUF), Llama models.
『言語オタクが友だちに700日間語り続けて引きずり込んだ言語沼』正誤表 - 株式会社あさ出版 ビジネス書、ビジネスコミック、健康、語学書等を発行
清水 潔 on Twitter: "「大日本帝国とか、大東京とか、大江戸とか、日本人はなぜ『大』を付けるんですか？本当は小さいのを知ってるから？」 と外国人に聞かれて返答に詰まった。"
