シェア
ぬこぬこ
2024年4月21日 01:12
概要ローカル LLM 初めましての方でも動かせるチュートリアル最近の公開されている大規模言語モデルの性能向上がすごいOllama を使えば簡単に LLM をローカル環境で動かせるEnchanted や Open WebUI を使えばローカル LLM を ChatGPT を使う感覚で使うことができるquantkit を使えば簡単に LLM を量子化でき、ローカルでも実行可能なサイズに