Ryzen7000/8000シリーズにはNPU載ってるモデルがあるし、何気にAVX-512 VNNIもサポートしてるんで推論に使うと楽しそう/RADEON Instinct APUとかGH200みたいなゴッツイの使いたいわー。

agricola のブックマーク 2024/04/24 20:22

<blockquote class="hatena-bookmark-comment"><a class="comment-info" href="https://b.hatena.ne.jp/entry/4752525900850396672/comment/agricola" data-user-id="agricola" data-entry-url="https://b.hatena.ne.jp/entry/s/note.com/erukiti/n/n58a8180ea9fb" data-original-href="https://note.com/erukiti/n/n58a8180ea9fb" data-entry-favicon="https://cdn-ak2.favicon.st-hatena.com/64?url=https%3A%2F%2Fnote.com%2Ferukiti%2Fn%2Fn58a8180ea9fb" data-user-icon="/users/agricola/profile.png">LLMプロダクト開発者がMac Studioを買ってローカルLLMを触るべき理由｜erukiti</a><br><p style="clear: left">Ryzen7000/8000シリーズにはNPU載ってるモデルがあるし、何気にAVX-512 VNNIもサポートしてるんで推論に使うと楽しそう/RADEON Instinct APUとかGH200みたいなゴッツイの使いたいわー。</p><a class="datetime" href="https://b.hatena.ne.jp/agricola/20240424#bookmark-4752525900850396672"><span class="datetime-body">2024/04/24 20:22</span></a></blockquote><script src="https://b.st-hatena.com/js/comment-widget.js" charset="utf-8" async></script>

このブックマークにはスターがありません。
最初のスターをつけてみよう！

LLMプロダクト開発者がMac Studioを買ってローカルLLMを触るべき理由｜erukiti

note.com/erukiti2024/04/24

もしあなたがLLMを使ったプロダクトを何かしら開発している、もしくは興味があるのなら、メモリを大量に積んだMac Studioの購入を検討すべきです。対象読者NVIDIAが絶対にいいという人はこの記事の対象読者では...

221 人がブックマーク・38 件のコメント

他のコメントを読む

＼コメントがサクサク読めるアプリです／

はてなブックマーク

LLMプロダクト開発者がMac Studioを買ってローカルLLMを触るべき理由｜erukiti

はてなブックマーク

公式Twitter

はてなのサービス