大家好,我是AI使用导航的小航。
分享的【小红书利用AI做插画快速涨粉】的教程,大家都很喜欢,感谢大家的支持!
今天我们来整个神奇的项目,这个神奇的项目让咱们能在自家电脑上跑起类似GPT的大模型,而且还不需要联网!先不着急说教程。先说说它有哪些牛逼的地方:
① 不用买特别的电脑,家里的旧电脑跑起来也行。
② 安装超简单,跟点点鼠标似的,支持各种操作系统。
③ 不光是Llama 2和Gemma,还有一堆其他的AI模型可以用。
④ 围绕这个项目,已经有了一大堆的周边工具,比如网页界面、桌面应用、开发工具包什么的。
接下来,咱们来看看怎么一步步把这个项目跑起来。
一 、下载大模型
首先前往 https://github.com/ollama/ollama下载符合自己电脑的安装包,像小航用的是Mac电脑,就下的Mac版的安装包,如果你是Windows系统就下载Windows的安装包就行,大同小异。
2.安装大模型
下载完了之后,双击安装,根据提示一步步操作,最终打开命令行或终端窗口,敲入下面的命令,一键启动Llama2模型(小航的8GB内存也能成功装上)。
ollama run llama2
3、运行大模型
等它跑起来,看到界面上出现提示信息,说明大脑模型已经准备好了。我们来随便问个问题试试看吧。
4、装个类GPT页面
但这样使用,实在是太丑了,小航忍不了了。
接下来,我们来部署一个看起来像ChatGPT那样的网页界面,复制用下面的docker命令就行。
docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main
回车运行,很快啊,运行完毕了!
成功后,用浏览器打开 http://localhost:3000,自己的私人GPT就能用了,而且是离线的,数据更安全!
就这样,有了这个项目,咱们就能在家里电脑上跑起大模型来了,操作简单,用途广泛,真是个不错的好玩意儿!
如果你也喜欢折腾,是个AI狂热者,欢迎关注【AI使用导航】,这里有最实用的教程,期待与你一起学习AI!