tana005tana005 のブックマーク 2023/08/16 18:09

その他

このブックマークにはスターがありません。
最初のスターをつけてみよう!

【ローカルLLM】llama.cppの量子化バリエーションを整理する|Baku

    「llama.cpp」はMacBookなどでLlamaベースの大規模言語モデルを動かすことを目標とするアプリケーション。一応CPUのみでも実行でき、GPUの非力な環境でも動かしやすい。 llama.cppの量子化モデルllama.cpp(GGML)...

    \ コメントが サクサク読める アプリです /

    • App Storeからダウンロード
    • Google Playで手に入れよう