GPTの仕組みと限界についての考察（１） - conceptualization
GPT4が登場してChatGPTが盛り上がってますね。 本記事は、GPT（を支えるTransformerという仕組み）をChatGPTユーザにとって分かりやすく説明し、その能力と限界についての見通しをよくしよう、という趣旨になります。 少し長くなりそうなので、全部で記事を3回に分けようと思います。 （１）大まかな背景と概要：本記事 （２）GPTの能力と可能性：実際の使用例とTransformerの仕組みを踏まえて説明 （３）GPTの限界と未来展望：Transformerの仕組みが持つ限界と研究の進展を予想 GPT3と4の違い： トークン長とは何か？ まずここから話を始めます。GPT-3は、パラメータ数が750億個（850GBの容量を食う）でトークン長が4097(GPT-3.5)でした。GPT-4は、パラメータ数は非公開でトークン長は32768ですので、ちょうど8倍になります。 さて、トーク
日本代表には、「走る技術」がない？岡崎慎司の専属コーチが語る本質。（木崎伸也）
「世界がどんどん走るサッカーをしているのに、南アフリカW杯以降、日本ではポゼッションという言葉が流行ってしまった」 杉本龍勇（岡崎慎司の専属フィジカルコーチ） 日本のサッカーには何かが足りない――。ブラジルW杯における日本代表の惨敗を見て、多くの人がそう感じたのではないだろうか。 技術水準が上がり、経験も積んで、戦術の引き出しも増えた。なのにW杯で1勝もできなかった。メキシコ人のアギーレが来ても、ボスニア・ヘルツェゴビナ人のハリルホジッチが来ても停滞感が漂い続けているのは、重要な何かが欠けているからに違いない。 そんなことを考えているとき、答えのひとつを示す人物に出会った。 フィジカルコーチの杉本龍勇（法政大学教授）だ。 陸上選手だった杉本はベルリン留学を経て、清水エスパルスのフィジカルコーチなどを歴任し、2012年から岡崎慎司の専属コーチを務めている。ブラジルW杯前には吉田麻也の指導も行
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
