基于GPT搭建私有知识库聊天机器人(二)环境安装

文章链接:

基于GPT搭建私有知识库聊天机器人(一)实现原理

基于GPT搭建私有知识库聊天机器人(三)向量数据训练

基于GPT搭建私有知识库聊天机器人(四)问答实现


1、需要安装的包

pip3 install flask         //python开发web框架
pip3 install langchain     //LLM开发框架
pip3 install openai        //LLM
pip3 install wechatpy      //微信接口开发包
pip3 install pycryptodome  //加解密包
pip3 install pdfplumber    //读取和处理pdf
pip3 install streamlit     //用于绘制 UI界面
pip3 install pymilvus      //向量数据库工具包
pip3 install tiktoken      //计算token数和费用
pip3 install python-dotenv //环境配置加载

2、安装python

安装包地址:https://www.python.org/ftp/python

安装版本:3.8.10(>=3.8.1&<4.0)

  • 安装之前首先要安装各种依赖包

    yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make

  • 接下来下载python3.8.10

    wget https://www.python.org/ftp/python/3.8.10/Python-3.8.10.tar.xz

  • 然后解压

    tar -xvJf Python-3.8.10.tar.xz

  • 进入Python-3.8.10

    cd Python-3.8.10

    ./configure prefix=/usr/local/python3

    make && make install

  • 接下来添加软连接

    ln -s /usr/local/python3/bin/python3 /usr/bin/python3

  • 添加pip3连接

    ln -s /usr/local/python3/bin/pip3 /usr/bin/pip3

  • 设置pip源,建议使用豆瓣源,能达30Mb/s

    pip3 config set global.index-url http://pypi.douban.com/simple/
    pip3 config set install.trusted-host pypi.douban.com

3、安装pycharm

忽略

4、部署向量数据库

Milvus:https://www.milvus-io.com/overview

Pinecone:https://www.pinecone-io.com/

5、LLM密钥

5.1、openai

官网地址:https://openai.com/

5.2、Hugging Face(抱抱脸)

官网地址:https://huggingface.co/

6、安装langChain

pip install langchain

7、安装问题

**File “E:\python-projects\venv\lib\site-packages\numexpr_**init**_.py”, line 24, in from numexpr.interpreter import MAX_THREADS, use_vml, BLOCK_SIZE1 ImportError: DLL load failed while importing interpreter: 找不到指定的模块。**

解决办法:

通过从 https://www.lfd.uci.edu/~gohlke/pythonlibs/ 下载 numpy+mkl 包来修复它和 pip 从终端安装它(从下载的 whl 文件所在的位置)

下载适合您配置的正确版本。我使用 python3.6 所以我下载了 numpy‑1.19.5+mkl‑cp36‑cp36m‑win_amd64.whl

ImportError: urllib3 v2.0 only supports OpenSSL 1.1.1+, currently the ‘ssl’ module is compiled with OpenSSL 1.0.2k-fips 26 Jan 2017

解决办法:

//降低urllib版本

python3 -m pip install urllib3==1.26.6

你可能感兴趣的:(大语言模型,gpt,机器人)