コード生成させてるけどコードの実行確度が50%→10%になったってのがどうしても信じられない。あとGPTモデルは素数について雰囲気で回答してるので、CoTしてるとしても正答率が下がった=性能劣化は違うんじゃないかな

canadie のブックマーク 2023/09/19 19:17

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4742411826840396239/comment/canadie" data-user-id="canadie" data-entry-url="https://b.hatena.ne.jp/entry/s/ainow.ai/2023/09/15/274623/" data-original-href="https://ainow.ai/2023/09/15/274623/" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fainow.ai%2F2023%2F09%2F15%2F274623%2F" data-user-icon="/users/canadie/profile.png">性能劣化は本当なのか？ChatGPTの性能を検証した3本の論文を解説 | AI専門ニュースメディア AINOW</a><br><p style="clear: left">コード生成させてるけどコードの実行確度が50%→10%になったってのがどうしても信じられない。あとGPTモデルは素数について雰囲気で回答してるので、CoTしてるとしても正答率が下がった=性能劣化は違うんじゃないかな</p><a class="datetime" href="https://b.hatena.ne.jp/canadie/20230919#bookmark-4742411826840396239"><span class="datetime-body">2023/09/19 19:17</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

性能劣化は本当なのか？ChatGPTの性能を検証した3本の論文を解説 | AI専門ニュースメディア AINOW

ainow.ai2023/09/19

はじめに ChatGPTが公開されて半年以上が経過し、そのユーザは急激に増えて世界的に普及しましたが、その一方でユーザの一部からは「ChatGPTは性能劣化したのではないか」という疑問が出てきました。同AIの性能に...

27 人がブックマーク・3 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

性能劣化は本当なのか？ChatGPTの性能を検証した3本の論文を解説 | AI専門ニュースメディア AINOW

はてなブックマーク

公式Twitter

はてなのサービス