
潜能ai
潜能ai,免费可联网搜索,超强! 智谱清言智能助手,ai全能型!
ollama 官方网站,中文版官网,强大的大语言模型(LLM)本地部署工具
ollama 官方网站,中文版官网,强大的大语言模型(LLM)本地部署工具



curl -sSL https://ollama.com/install.sh | sh
curl -sSL https://ollama.com/install.sh | sh
docker pull ollama/ollama
docker run -d --name ollama -p 11434:11434 ollama/ollama

Ollama的配置主要通过环境变量来完成。用户可以通过设置环境变量来指定推理设备(GPU/CPU)、缓存路径、并发数、日志级别等。以下是一些常用的环境变量配置:
export OLLAMA_DEVICE=cuda
export OLLAMA_CACHE_PATH=/path/to/cache
export OLLAMA_CONCURRENCY=4
ollama service start
localhost:11434。
ollama pull llama3
ollama run llama3







