”0、1、-1の3値を使っています。3通りというのは、2の1.58乗に相当するんですよ。だから実際は1.58bitになります”　3値は1bitじゃ表現できないよね。1.58bitも1bitより2bitに近い。それは1bit LLMと言っていいのか。1.5bit LLMでは。

u_mid のブックマーク 2024/04/16 16:22

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4752148761709964736/comment/u_mid" data-user-id="u_mid" data-entry-url="https://b.hatena.ne.jp/entry/s/www.itmedia.co.jp/aiplus/articles/2404/16/news064.html" data-original-href="https://www.itmedia.co.jp/aiplus/articles/2404/16/news064.html" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fwww.itmedia.co.jp%2Faiplus%2Farticles%2F2404%2F16%2Fnews064.html" data-user-icon="/users/u_mid/profile.png">生成AIでGPUがいらなくなる？　業界を揺るがす「1ビットLLM」とは何か、識者に聞いた</a><br><p style="clear: left">”0、1、-1の3値を使っています。3通りというのは、2の1.58乗に相当するんですよ。だから実際は1.58bitになります”　3値は1bitじゃ表現できないよね。1.58bitも1bitより2bitに近い。それは1bit LLMと言っていいのか。1.5bit LLMでは。</p><a class="datetime" href="https://b.hatena.ne.jp/u_mid/20240416#bookmark-4752148761709964736"><span class="datetime-body">2024/04/16 16:22</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！