ChatGPT APIで「素人質問で恐縮ですが…」と鋭い質問してくるSlack Botを作った - Platinum Data Blog by BrainPad

本記事は、当社オウンドメディア「Doors」に移転しました。 約5秒後に自動的にリダイレクトします。 このたびブレインパッドは、LLM/Generative AIに関する研究プロジェクトを立ち上げ、この「Platinum Data Blog」を通じてLLM/Generative AIに関するさまざまな情報を発信をしています。 今回は、議論を活性化する質問をLLM技術によって生成できないかと考え、『この分野は素人なのですが…Bot』を開発した内容を、ご紹介します。 こんにちは、アナリティクスサービス部の藤田です。 ブレインパッドでは、有志による社内勉強会がとても活発で、ほぼ毎日何かしらの勉強会が開かれています。社内勉強会では、参加者による質問が重要な役割を果たします。質問によって、質問者は理解を深めることができ、他の参加者や発表者にとっても新しい視点を得ることができます。しかし、参加者が多い

[yarumato]

“前のステップの出力を次の入力の一部とする処理を4段階連続させる。Zero-Shot CoT（ステップバイステップで考えてください）の発展形Plan-and-Solve（サブタスク分割する計画→計画に従って実行）で出力の精度を上げる”

[strawberryhunter]

よく要点の一つ二つが抜けるのでこういうの欲しい。／①入力文章のトピックを抽出②トピックの一般的な論点を洗い出す③論点のうち入力文章に欠けている物を抽出④質問文の形式に加工

[masadream]

面白い！タスクを分割したほうが精度が上がるとかtipsもたくさん。

[YassLab]

“大まかなつくりとしては、Slackbotにメンションをつけて発表資料となるドキュメントのURLを送ると、内部で生成した質問をリプライで返してくれる、というツールになっています。 出力時間は15秒程度”

[nankichi]

“素人質問で恐縮ですが…の真の意味（その分野のエキスパートですが）”これネットミーム化してない？自分が学会等で発表してこの質問食らった人そんなにいないだろ

[deejayroka]

"資料を①トピックレベルに抽象化し、②そのトピックに関する一般的な論点を列挙。③資料と照らし合わせて不足している論点を抽出する。ステップを踏みました"

[zakkie]

そういう嫌味な謙譲表現はLLMは苦手だろうね。ワロタ。＞“素人質問で恐縮ですが…の真の意味（その分野のエキスパートですが）が反映されていない”

[napsucks]

これでゴリゴリに問い詰められたら泣いちゃう

[T-norf]

そのフレーズでの質問はやめてー。でも、こういう多段階のプロンプトは、人間と遜色ないパフォーマンスだしてくるパターンが増やせていいよね。組み合わせ無数にあって、私も考えてるけど悩ましいけど

[nikutaiha]

頭がいい...

[endo_5501]

ローカルにほしいよなあ、こういうの

[rrringress]

ブレストにいい

[sh19910711]

"社内勉強会では、参加者による質問が重要な役割 / 参加者が多い勉強会では少し質問しにくい空気があり、質問がないまま終わってしまう / ドキュメントのURLを送ると、内部で生成した質問をリプライ"