GPT4All 一套专为强大、定制的大型语言模型设计的生态系统,能够在消费级CPU上本地运行。在GPT4All中,所使用的模型是一个3GB至8GB的文件,读者可以自行下载该文件,并将其插入到GPT4All的开源生态系统软件中。这一软件生态系统由Nomic AI提供支持并进行维护,其目的是确保系统的质量和安全性,同时也是为了推动任何个人或企业能够轻松地训练和部署自己的边缘大型语言模型。

总体平价是:

  1. 能不用就不用,不如网页版好用,但是网页版GPT4用不了的可以来用。
  2. 比较吃机器,像我这4090推理速度7tokens/秒,如果用CPU更慢。
  3. 对接API需要一定开发能力。
  4. 想省钱的可以尝试很不错。

我还是去用我的网页版的方便。

基于GPT4All的大型语言模型设计生态系统-LMLPHP

win系统安装

进入 GPT4ALL的官网 选择你对应的系统版本安装即可。

07-13 07:24