GPT-4の性能をBingと比較してみた｜IT navi

日本時間で3月15日未明、OpenAIが大規模言語モデルのGPTシリーズ最新バージョンであるGPT-4を発表しました。 GPT-4は、人間向けの試験問題やベンチマークテストで従来のモデルよりも高い成績を収め、日本語でもGPT-3.5の英語性能を超えているそうです。 また、GPT-4は、ChatGPTの有料版（月20ドル）に加入していれば、すぐに使用できます。 今回、MicrosoftがBingのチャットモードもGPT-4を利用していることを明らかにしました。そこで、実際にGPT-4の性能とBingの性能を比較してみることにしました。 ※表紙の画像は、プロンプトに「GPT-4」と入力して生成した画像です。 １．GPT-4についてChatGPTに聞いてみた ChatGPT（Model:GPT-4）に、GPT-4について聞いてみたところ、回答は以下のとおりでした。 問 GPT-4について教えてく

[matarillo]

多くがBingをシカトしてChatGPT ProのGPT-4に浮かれている中での比較記事はいいですね。

[shunkeen]

比較記事ありがてぇ〜！／調べものにはBing、真面目な文章はGPT-4（ただし、ハルシネーションに注意）、エンタメ系の文章はBingの創造性モード（ただし厳しい規制に引っかかる場合は、GPT-4）。

[mory2080]

弓曳き童子(からくり人形)は1/4の確率で"わざと的を外す" ノーミスだと人が脅威に感じたり、結果が分かっててつまらないとすぐ飽きてしまうからだという。AIが故意に計算間違いしてたらその時は警戒すべきだろう。

[n2sz]

BingはURL突っ込むだけで読んでくれるのが強力なんだよな。GPT-4とうまく使い分けが出来れば便利そう。

[debabocho]

Bingは解答をかなり短文・抑制的にして、ディテールから幻想を生成させないようにしてる感がある。面白みがないがWindows標準ツールとしては正しい判断か。質問返しで学習するやり方はチャットならでは。

[natu3kan]

ノイマンに負けるAI。Bingはリミッターあるから制限なしでやりたいなら直でGPT使うとはなるよね。

[shirotorabyakko]

何かを調べるのは検索機能+最新情報+参考サイト=Bing。レポート、記事、小論文等真面目な文章はGPT-4。ハルシネーションは要注意。エンタメ系の文章は、Bingの創造性モードorGPT-4

[dlive1]

Bingの方がより人間らしい会話という点にこだわっていて

[IIl]

Bingちゃんかわいい☺️

[hatepy]

TVでChat-GPT使ってる会社が紹介されてたけど、業務でそんなに嬉々として使ってて大丈夫なの？

[cooking_kawasaki]

GPTは算数苦手だな。Bingの登録待ち中に出来る、既成問題の中でも間違ってたし（方程式の解き方のやつ。もうちょい問題選んだらいいのにと思ったけど、間違うよ的な良心か）

[yuki_2021]

“ ”

[ABA]

Bingは生成するコードが途中で壊れて無意味な繰り返しにおちいることがままある気がする。ChatGPTでは遭遇したことが無い

[puglee]

数学の設問から文章生成まで，様々な状況について GPT-4 と Bing を比較している．Bing は GPT-4 ベースとのことだが，Microsoft がある程度チューニングしているということか．

[scorelessdraw]

答えの最後に「知らんけど」があると思っておけばよいな。知らんけど。

[htnmiki]

カノッサの屈辱ってフジテレビの深夜番組じゃなかったのか　←

[tal9]

比較記事助かる

[nayuta5150]

助かる

[gyogyo6]

大昔のコンピュータのイメージは「計算だけは正確」だったが、GPT-4は色々できるのに単純な掛け算を間違うのだな

[star_123]

Bingも最初より調整されていい感じになったな

[uunfo]

GPT-4に自身がGPT-4だと言う自我がないの、面白いな。この辺、学習リソースをリアルタイムで与えるようになると自我や意識が生まれるのでは／バランスの取れた意見を言うひろゆきw／数学は思考様式が違うのかしらね

[byaa0001]

数学の問題をそれぞれ解かせて、他方の回答において間違いがどこにあるか答えさせるとどうなるのだろう？

[hatest]

両方使って、より正確な回答を人が選択したほうがいいのかも

[mohno]

“正しい答え”を得るために使わない方がいいと思う。Bingは「検索にカスタマイズ」されているそうだし、実際、リンクを示してくれるのがメリット。架空の名前を作るみたいなアイデア出しには便利だよ。

[reef]

ChatGPT

[babamin]

比較面白い

[raitu]

“結論としては、何かを調べるのに使うのであれば、検索機能があって、最新の情報にも対応でき、参考にしたサイトも提示してくれるBingの方がよい”

[napsucks]

搭乗したばかりのころのchatGPTも自身をchatGPTとは認識していなかったな。GPT-4もそのうちアップデートされて理解するだろう。

[kei_1010]

良いまとめ。にしてもGPT4の想像を超えてこない残念さよ。