GPT-3を使って根拠付きで正確に質問応答してくれるシステムを作ってみる - Taste of Tech Topics

こんにちは。社内データサイエンスチームYAMALEXの@Ssk1029Takashiです。 最近はChatGPTが出て注目を浴びたり、BingにもChatGPTのように質問応答してくれるAIが搭載されるなど、OpenAIのGPTモデルが世の中を騒がせています。 私もChatGPT使ってみましたが、受け答え自体は人が書いていた文章と遜色なく、文章の自動生成もここまで来たか。。という感じでした。 そんなChatGPTの特徴の一つとして、回答には時々嘘が含まれるというものがあります。 ChatGPT自体は知識を持っているわけではないので、学習データにないことなどはそれっぽいけどでたらめな回答を返してしまいます。 ただし、最近追加されたBingのGPTでは、ChatGPTよりもはるかに正確な回答が返ってくるように感じます。 画面を見ると回答の根拠となっている詳細情報が出ています。 ここから推測する

[kazuph1986]

うん、最近触ってて根拠ありで回答ほしいならこうなるよねって内容の確認ができてよかった。

[mapyo]

すごい！！！

[hirokiky]

おもしろーい

[misshiki]

“GPT-3を使って根拠付きでなるべく正確な回答を返す方法を検証”

[mallowlabs]

“BingのGPTはまず回答の根拠となる情報を検索し、その情報をコンテキストとして質問に回答している”

[cartman0]

この手間考えるとbing優れてたのになあ

[KenichiroMurata]

うちのチームメンバーが検証してくれました。 Azure OpenAPI Serviceも利用できるようになってきて、もう少ししたらChatGPTもAzure OpenAI Service を通して使えるようになるみたいなので、実際の活用ができそうで楽しみ。

[Helico]

ソースを厳密に限定できれば使えるツールになりそう

[LM-7]

BingやPerplexityも同様の手法を使っていると思われるがそれでも不正確な情報が混じる。回答の正当性を検証する後処理を更に実装すべきではないか？

[zgmf-x20a]

ちょっとやってみたいな。

[jabberokkie]

ここまで無料のサービスで実験出来てるんじゃない？すげぇ時代だな。

[morioka]

つまりはretriever-readerモデルでやりました的な。新しいBingも基本はそうなのだろう

[shunkeen]

“GPT-4がBingに搭載される”／MicrosoftもOpenAIもGPT-4と断定した言い方はしてない気がするんだけど、正確な質問応答システムで、予想記事以外の出典を明らかにしたい。

[noseld]

検索→GPTは色々応用できそうだな

[NOV1975]

「GPT-3を使って根拠付きで」ここまではよい「正確に質問応答してくれる」これはどういう保証があるのか。今後の改善ポイントって書いてるのにタイトルにしちゃうかねえ。

[eagleyama]

これは普通にググったほうが早くて正確だと言ってはいけないのだろうか。

[kotesaki]

メモメモ