Dify で RAG を試す｜npaka
1. RAG「RAG」(Retrieval Augmented Generation) は、最新の外部知識の習得とハルシネーションの軽減という、LLMの2つの主要課題に対処するためのフレームワークです。開発者はこの技術を利用して、AI搭載のカスタマーボット、企業知識ベース、AI検索エンジンなどをコスト効率よく構築できます。これらのシステムは、自然言語入力を通じて、さまざまな形態の組織化された知識と相互作用します。 下図では、ユーザーが「アメリカの大統領は誰ですか？」と尋ねると、システムは回答のためにLLMに質問を直接渡しません。代わりに、ユーザーの質問について、知識ベース (Wikipediaなど) でベクトル検索を実施します。意味的な類似性マッチングを通じて関連するコンテンツを見つけ (たとえば、「バイデンは現在の第46代アメリカ合衆国大統領です...」)、LLMに発見した知識とともにユ
焦点：中国農村住民の過酷な老後、わずかな年金で死ぬまで働く現実
中国陝西省西安の路上で３０年にわたって路上で自家製パンを販売していた６７歳のフー・デジさんは、できることならそろそろ楽な生活を送りたかった。写真は４月、北京のショッピングモールで清掃業務に従事するフーさん（２０２４年 ロイター／Tingshu Wang） [北京/香港 ８日 ロイター] - 中国陝西省西安の路上で３０年にわたって路上で自家製パンを販売していた６７歳のフー・デジさんは、できることならそろそろ楽な生活を送りたかった。 ところが、実際には今、年上の妻とともに北京の外れまで出向いて午前４時から毎日、弁当調理の仕事をこなした後、１時間以上かけて市内中心部のショッピングモールに移動。１３時間も清掃業務に従事している。そこでの収入は毎月４０００元（５５２ドル）だ。
トラぺジウムが人生に残る大傑作だった｜ジスロマック
なにか作品を見ても、「これは自分にとって関係のないことだな」と思ってしまう。ファンタジー、SF、お仕事もの……この世のあらゆるエンターテインメントは、人を気持ちよくさせるための娯楽装置として作られている。 だけど、そんな気持ちのいい作品を見るたび、心のどこかで「人生そんな上手くいかねーよ」と思ってしまう。だから、ずっと心のどこかで、なにもかもが「他人事」な気がしていた。あの主人公も、あの作品も、なにもかも自分にとっては無関係の出来事だった。 でも、『トラぺジウム』を見た時、あまりそう思えなかった。 この映画、端的に言うと「アイドルに焦がれて焦がれ続けた主人公が、なにもかも計算づくでアイドルグループを結成するものの、結局上手くいかず解散する」という内容になっている。極論を言うと、「アイドルを目指して志半ばで大失敗する映画」である。まぁ、とんでもない内容だと思う。 でも、この「上手くいかず解散
エンジニア3年目までに読んで良かった書籍 - Yuki Watanabe's Blog
未経験からエンジニアになり3年が経ちました。 この3年間はベテランエンジニアとの差を埋めるべく、プライベートの時間の大半を学習に充ててきました。幸い少しずつ成長を感じられ、業務では難易度の高い仕事を任せてもらえるようになったと感じます。このキャッチアップのために100冊以上の技術関連書籍を読んだことでしょう。 ここ最近、知人やTwitter経由で知り合った方から、私が学習に使った書籍について質問を頂くことが多いです。そこで、今後参照していただきやすいように、これまで私が読んで良かった書籍を1つの記事にまとめようと思います。 前提：エンジニアとして経験した技術 書籍について 全エンジニア向け Web / インターネット イラスト図解式 この一冊で全部わかるWeb技術の基本 (★) HTMLコーダー＆ウェブ担当者のための Webページ高速化超入門 (★) Webを支える技術 -HTTP、URI
プロダクトマネジメントクライテリア
プロダクトマネジメントを体系化したクライテリアです。企業がプロダクトを成功に導くために必要な要素を多角的かつ具体的に記載してあります。対象はプロダクトマネージャー個人ではなくプロダクトを取り巻くチームとし、プロダクトマネジメント全体をスコープにしています。
日本語特化の言語モデル「Japanese Stable LM 2 1.6B」をリリースしました — Stability AI Japan
ポイント Japanese Stable LM 2 1.6B（JSLM2 1.6B）は16億パラメータで学習した日本語の小型言語モデルです。 JSLM2 1.6Bのモデルサイズを16億パラメータという少量にすることによって、利用するために必要なハードウェアを小規模に抑えることが可能であり、より多くの開発者が生成AIのエコシステムに参加できるようにします。 ベースモデルとしてJapanese Stable LM 2 Base 1.6Bと、指示応答学習（Instruction tuning）済みのJapanese Stable LM 2 Instruct 1.6Bを提供します。両モデルともStability AI メンバーシップで商用利用が可能です。また、どちらのモデルもHugging Faceからダウンロードすることができます。 Japanese Stable LM 2 Base 1.6B
元コンサルの回顧本に「現場に数値目標を与えると数値目標は達成されるが数値化されてない部分が必ず失われる」例として上げていたことの内容がキツい
林司@るーしゃんず @Archangel_HT 元コンサルの回顧本に書いてあったんだけど、現場に数値目標を与えると、その数値目標は達成されるが数値化されてない部分が必ず失われる、とされてるんだよね。バスの定時発車率にインセンティブを与えたら確かに率は上がったけど、信号無視とかするようになった、とか例を挙げてた。 x.com/Dirg_rocketdyn… 2024-05-06 16:24:48 dirG @Dirg_rocketdyne 論文誌出版社というボトルネック 「研究社会を海外の商業的な科学情報機関が席巻しており、彼らの提供するデータを論文評価の代理指標に使っているのは全く好ましくない。」 「研究者の数値評価は有害」 ノーベル化学賞・野依良治氏の憂い - 日本経済新聞 nikkei.com/article/DGXZQO… 2024-05-06 15:40:04
【未経験者大歓迎】RAG超入門：AWSが推奨するRAGを体験するハンズオン - Qiita
2024/5/5更新：生成AIに興味を持った方向け、続編を投稿しました。 「Qiitaに聞いた！！」をAmazon Bedrockで作った！（Claude 3でRAG） タイトルはふざけてますが、プロンプトエンジニアリングにより本投稿と同様の内容を行う解説をしています。 （BedrockのClaude 3モデルと、Google検索を使った構成です） 生成AIはとても注目度が高い技術ですが、すこしとっつきにくいところがあるかもしれません。新しいモデルや活用手法が毎日のように登場し、ウォッチし続けるのはかなり大変です。 タイミングを逃して入門できていない方向けに、 とりあえず作って体感してみよう というコンセプトで、ハンズオン記事を作成しました。🎉🎉🎉 ハンズオンの内容は「RAG」です。RAGは生成AIの活用法としてよく出てくるキーワードです。ハンズオンでは、ただのRAGではなく最先端の
「正常な忘却」は決して悪いことではない──『忘却の効用: 「忘れること」で脳は何を得るのか』 - 基本読書
忘却の効用: 「忘れること」で脳は何を得るのか 作者:スコット・A・スモール白揚社Amazon基本的に記憶力が良いことはこの社会を生き延びていくにあたって「良い」ことだとされている。記憶力を高めたいと思わない人がいるだろうか？ 認知症でもないのに忘れっぽかったり覚えが悪かったりすると、心配されることもあるだろう。しかし、「忘却する」ことは脳にあらかじめ用意されている、とても有益な機能でもある。 本書『忘却の効用』はコロンビア大学の神経精神科学教授であるスコット・モールが、忘却の利点について解説した一冊だ。記憶力が良い人、何もかも忘れない人(時折、そういう人がいるのだ)にも良い点はあるが、そうであるがゆえのデメリットも存在する。僕も人に呆れられるほど忘れっぽい方で、もう少し記憶力がよければなあと思う局面も多い(たとえばトークイベントで昔読んだ本の話をしようとしても全然内容を思い出せないと本当
ひとり社長の経理の基本｜Tetsuya Morimoto
2019年12月に自分の会社を設立した。 なんの考えもなく意味なく3月決算にしてしまい、4ヶ月弱で決算を迎え、2ヶ月以内に法人税を納める必要があるので5月に入ってから法人決算を行った。そのときに役立った本の紹介と実際に法人決算をやってみた経験談 (失敗談) を書いておく。 (2024-05-05 追記) 本稿の続編として時間が経ってからわかったことなどをまとめました。 法人設立のきっかけ仕事を辞めようと思ったとき、次にやりたいことはとくになかったし、40歳を超えて年齢的にも雇ってくれる会社をみつけるのは難しいだろうということは容易に予測できた。少し転職活動をしてみたものの、自分自身にやりたいことがないのもあり、あまり手応えを感じなかったので消去法のような流れで起業することにした。 私の場合、会社設立 freee を使って法人設立のための手続きをした。必要な手続きや書類作成など、法人登記まで
ChatGPT登場後に仕事急増も単価はダウン？ 買いたたかれる「ビデオ編集」スキルの今後
ChatGPT登場後に仕事急増も単価はダウン？ 買いたたかれる「ビデオ編集」スキルの今後：小寺信良のIT大作戦（1/3 ページ） ChatGPTをはじめとするAIの登場で、メディアではなくなる仕事・なくならない仕事といった特集が組まれた。だが昨今はこうした記事を見かけないのは、まだ具体的にAIの影響が観測できないからだろう。 そんなAIの爆心地ともいえる米国で、フリーランス500万人に対して、生成AIの登場がフリーランスの労働市場にどのような影響を与えたかといった調査が発表された。リサーチしたのは、労働市場動向などの分析を得意とするBloomberryで、元データは世界最大級のアウトソーシングサイトUpworkが公開した求人データである。 ChatGPTのリリース1カ月前の2022年11月と、普及した2024年2月を比較した調査となっている。詳細はオリジナルサイトを見ていただきたいが、パッ
日本語の情報発信を一切やめてみる｜TAKUYA
こうやって書くことで踏ん切りを付けようという意味も込めて書く。 すっかり英語での活動に慣れて、友達もできて、そっちのほうが心地よく感じるようになった。Twitterでは日本語アカウントの@craftzdogの方はもうほとんど開いておらず、@inkdrop_appの方に普段はログインしている。後者の方がフォロワー数も既に1万人以上多い。 vlogを始めて喋るようになってからは、頭の中の独り言まで英語になりつつある。日本に住んでて生活圏は完全に日本語だが、情報空間での活動はほぼ英語になった。 それで気づいたのは、英語圏に日本の界隈の情報は滅多に流れてこないことだ。だから最近の日本のコミュニティの動向が一切分からなくなった。言い換えれば、日本語で活動している限り海外の人は全く感知できないという事だ。 日本語の情報発信をやめたいと思ったきっかけは、最近書いた記事がバズったにも関わらずアプリへの集客
1日9000歩で健康寿命延伸 AI指標で分析 京都府立医科大（時事通信） - Yahoo!ニュース
「健康寿命」を延ばすには1日9000歩が目標―。京都府立医科大の研究グループが1日の歩数と健康状態との関係を、人工知能（AI）を使って開発した指標などから分析したところ、こんな結果が出た。「自分は健康だ」と自覚するには1日1万1000歩となった。いずれも年齢や性別による違いは見られなかったという。論文は1日、英医学誌電子版に掲載された。 【ひと目でわかる】企業の生成AI活用状況 健康寿命は健康上の問題なく、日常生活を支障なしに送れる期間を示し、厚生労働省の2019年調査では、男性72．68歳、女性75．38歳だった。 研究グループは昨年、AIを使った機械学習で年齢や性別、病気の有無など約40項目から健康寿命を予測する指標を開発。今回は19年の国民生活基礎調査と国民健康・栄養調査の両方の対象となった成人約4900人のデータを基に健康状態や同指標と、歩数との関係を調べた。 その結果、歩数が増え
「Bluesky」「Python」「Vim」「404」「ぬるぽ」などIT関連のかわいい高品質ロゴを作りまくる人物現る、BlueskyやReact公式が早速ロゴを実装するなど爆発的な盛り上がり
IT関連の高品質な自作ロゴを大量に含むGitHubリポジトリが、プログラマーやゆっくり実況者として活動するさわらつき氏によって公開されました。当該リポジトリは公開直後から大きな注目を集めており、すでにBlueskyでは「Kawaiiモード」の実装が進んでいるほか、Reactの公式サイトにもさわらつき氏のロゴを表示する隠しモードが実装されています。 GitHub - SAWARATSUKI/ServiceLogos: ロゴを可愛く作ろう 節度を持って利用してくださいね🫠 https://github.com/SAWARATSUKI/ServiceLogos さわらつき氏が作成したロゴの例は以下の通り。これはPythonのロゴです。 C言語 Vim Visual Studio Code Discord GitHub 404エラー 「ぬるぽ」のロゴもあります。 これはBlueskyのロゴ。 2
実写ドラマ版「フォールアウト」は既に6,500万人が視聴―アマプラ史上2位の偉業 | GameBusiness.jp
話題沸騰の実写ドラマは、アメリカのみならず世界各国で視聴されているとのことです。
Macを使いこなす！知ってるだけで差がつく小技・裏技40選
macOS Sonomaをベースに、Macの知られざる小技・裏技を一気に40個紹介してます。知らないテクニックも必ずあるはず！ ◆おすすめの初期設定動画 https://youtu.be/yOCJaY-IeIc Apple製品や周辺機器 / Macのあるデスクづくりを中心にガジェットの情報お届けしております。 チャンネル登録はこちら！→https://www.youtube.com/channel/UCRlsT-5KoV_J-JoG9WQFzGw?sub_confirmation=1 ------------------------------------------------------- ▼今回のチャプター（目次） 00:00 - Macを使いこなすために知っていたい小技・裏技40TIPS ＜Finder系 (8項目)＞ 00:55 - クイックルック ファイルを選択して
Kindle Oasisが好きすぎる - n0te
Kindle Oasisが好きすぎる僕たちは、次世代Oasisの登場をずっとずっと待っている。 しかし、なかなか次世代機が登場しないうちに、手持ちのKindle Oasisは壊れ、交換や買い替えを重ねること数回。気がつけば手元のKindle Oasisは5台目となっていた。 第11世代のKindle Oasisは未だ発表される気配がないけれど、5台目のKindle Oasisにも不調が見え始めたのを契機として、これまでの愛機たちの記録をここに残しておこうと思う。 一代目 Kindle Oasis「進撃の」 進撃の巨人の表紙を映したまま、動かなくなってしまったKindle Oasis。厳密にいうと、何度か動かそうとするものの、画面に線が増えるばかりで、最終的には線が増えることすらなくなってしまった。原型を残しつつも無機質な線に覆われたその佇まいは、硬質化した巨人のようでもある。 二代目 Ki
滅びてほしい認証系の実装の話
こんにちは、富士榮です。 ちょっと前に某所でダメダメな認証系の技術実装ってなんだろうねぇ、、という話をしていたことをXで呟いたところ、色々とご意見を頂けましたのでまとめて書いておきます。 考えていると結局のところ、サービス提供側が意図していることとは全然違うことが起きている気がするので、この辺はしっかり考えて実装したいところですね。（実装ミスは問題外として） カテゴリ滅びてほしいもの実装側がやりたいこと利用者が感じること実際に起きていること代替手法認証CAPTCHAbot避けぐにゃぐにゃ文字が読めない バイクと自転車の違いとは？ユーザの離脱、カゴ落ちパスキーの利用 新しいタイプのCAPTCHA（通常は画面に出ない） リスクベース認証との組み合わせによる抑制認証パスワード誰でも使える認証手段の用意忘れる。複雑なパスワードをそれぞれのサービス毎に管理するのは無理パスワードの使い回し。パスワード
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ITエンジニア、課長級の年収は中国の7割 日本は「安月給」 日本のITエンジニア賃金事情（上） - 日本経済新聞
Plurality勉強会1 - 西尾泰和のScrapbox