Ollamaしたい(ollama)

$ ollama run <モデル名>

ollamaはローカルで大規模言語モデル(LLM)実行できるツールです。 Mistral、 LlaMA、 CodeLlama、 Gemma などのモデルが簡単に使えるように設計されています。

インストールしたい

$ brew install --cask ollama-app
$ ollama --version
ollama version is 0.12.5

Homebrewでollamaをインストールできます。 アプリも使いたい場合はollama-appをインストールします。

モデルを取得したい(ollama pull)

$ ollama pull <モデル名>
$ ollama pull gpt-oss:20b

ollama pullで利用したいモデルを取得します。

注釈

gpt-oss:20bは13GBありました。

モデルを一覧したい(ollama list)

$ ollama list
$ ollama ls

ollama list(もしくは ollama ls)で取得済みのモデル一覧を表示できます。

モデルを削除したい(ollama rm)

$ ollama rm <モデル名>

ollama rmでモデルを削除できます。

モデルと対話したい(ollama run)

$ ollama run <モデル名>

ollama runでモデルと対話できます。

APIサーバーしたい(ollama serve)

$ ollama serve <モデル名>

ollama serve(もしくは ollama start)でモデルのAPIサーバーを起動できます。