HTTPSHandler & SSL Error

我在服务器ubuntu中，尝试使用pip3，但是出现下面的报错

ImportError: cannot import name 'HTTPSHandler'

通过查询资料，发现报错的原因是，该pip3.5中没有安装好openssl. 我尝试在python3.5中使用import ssl, 确实是会显示下面的报错信息

 然后我尝试安装SSL module，我之前在本地是安装过，应该还是比较容易，但是在服务器中却是各种方法都不有效。

尝试1：

首先，我检测服务器中是否有openssl。显示了版本信息，这个可能是在安装服务器的时候就自带了，或者其他人在使用服务器的时候可以用。

$ openssl version
OpenSSL 1.1.1g  21 Apr 2020

然后我尝试了在python2.7和python3.6中，导入import ssl都不会报错。这两个应该是ubuntu安装的时候自带的两个python版本。

然后我尝试了下面的方法，因为服务器中有openssl，而且是我可以接受的版本，我不需要重新下载，因此可能是像下面文章说的那样，是在安装python3.5的时候没有设置ssl

【下面是他文章的解释】

本人查阅资料发现，在./configure过程中，如果没有加上–with-ssl参数时，默认安装的软件涉及到ssl的功能不可用，刚好pip3过程需要ssl模块，而由于没有指定，所以该功能不可用。

  解决办法是重新对python3.6进行编译安装，用一下过程来实现编译安装:

cd Python-3.6.2
./configure --with-ssl
make
sudo make install

python3中pip3安装出错，找不到SSL_玩人的博客-CSDN博客_pip3 ssl问题

但是我尝试了一下，并没有成功，报错信息如下：

Python build finished successfully!
The necessary bits to build these optional modules were not found:
_dbm                  _tkinter
To find the necessary bits, look in setup.py in detect_modules() for the module's name.


Failed to build these modules:
_hashlib              _ssl




.....


rm /usr/local/lib/python3.5/lib-dynload/_sysconfigdata.py
rm -r /usr/local/lib/python3.5/lib-dynload/__pycache__
/usr/bin/install -c -m 644 ./Misc/python.man \
        /usr/local/share/man/man1/python3.5.1
if test -f /usr/local/bin/python3 -o -h /usr/local/bin/python3; \
then rm -f /usr/local/bin/python3; \
else true; \
fi
(cd /usr/local/bin; ln -s python3.5 python3)
if test "3.5" != "3.5m"; then \
        rm -f /usr/local/bin/python3.5-config; \
        (cd /usr/local/bin; ln -s python3.5m-config python3.5-config); \
        rm -f /usr/local/lib/pkgconfig/python-3.5m.pc; \
        (cd /usr/local/lib/pkgconfig; ln -s python-3.5.pc python-3.5m.pc); \
fi
rm -f /usr/local/bin/python3-config
(cd /usr/local/bin; ln -s python3.5-config python3-config)
rm -f /usr/local/lib/pkgconfig/python3.pc
(cd /usr/local/lib/pkgconfig; ln -s python-3.5.pc python3.pc)
rm -f /usr/local/bin/idle3
(cd /usr/local/bin; ln -s idle3.5 idle3)
rm -f /usr/local/bin/pydoc3
(cd /usr/local/bin; ln -s pydoc3.5 pydoc3)
rm -f /usr/local/bin/2to3
(cd /usr/local/bin; ln -s 2to3-3.5 2to3)
rm -f /usr/local/bin/pyvenv
(cd /usr/local/bin; ln -s pyvenv-3.5 pyvenv)
if test "x" != "x" ; then \
        rm -f /usr/local/bin/python3-32; \
        (cd /usr/local/bin; ln -s python3.5-32 python3-32) \
fi
rm -f /usr/local/share/man/man1/python3.1
(cd /usr/local/share/man/man1; ln -s python3.5.1 python3.1)
if test "xupgrade" != "xno"  ; then \
        case upgrade in \
                upgrade) ensurepip="--upgrade" ;; \
                install|*) ensurepip="" ;; \
        esac; \
         ./python -E -m ensurepip \
                $ensurepip --root=/ ; \
fi
Ignoring ensurepip failure: pip 7.1.2 requires SSL/TLS

因此可以发现，有一些module是无法安装的，其中就包括SSL。

然后我查了一下，python3.6应该是自带SSL，因此只需要在配置时，加上ssl就好了，也就是下面这个代码的作用：./configure --with-ssl。但是3.6和3.5是有区别的，在python3.5中ssl的部分是注解掉的，这也就是我尝试的第二个办法

尝试二：

我修改了python3.5配置文件关于ssl的部分，可以参考文章，具体来说就是修改了这里。【我不知道为什么他是3.6以上，没有尝试使用第一种方法】。但是3.5的也是修改这里。

PS: 我在很多文章里面，他们只修改了第一步，二没有修改.py文件，这次我尝试修改了两个文件

1.修改setup.dist

# 进入python3.6.5源码路径
cd /usr/bin/python3.6.5
# 修改setup.py文件
sido vim Modules/Setup.dist
 
# 修改结果如下：
# Socket module helper for SSL support; you must comment out the other
# socket line above, and possibly edit the SSL variable:
SSL=/usr/lib/ssl            # 你的ssl文件位置
_ssl _ssl.c \
        -DUSE_SSL -I$(SSL)/include -I$(SSL)/include/openssl \
        -L$(SSL)/lib -lssl -lcrypto

2.修改setup.py文件

# 修改setup.py文件

sudo vim setup.py
 
# 修改后结果如下 
# Detect SSL support for the socket module (via _ssl)
        search_for_ssl_incs_in = [
                              '/usr/local/ssl/include',
                              '/usr/contrib/ssl/include/openssl''
                             ]

3. 重新编译安装

sudo ./configure --enable-optimizations
sudo make -j 2

python3中pip3安装出错，找不到SSL_玩人的博客-CSDN博客_pip3 ssl问题python编译安装后ssl模块无法调用_SitVen的博客-CSDN博客

虽然我全部进行了修改，但是还是在安装python3.5的时候，显示ssl模块无法安装。

尝试3：

我以为是.so文件出现了问题，因此在可以使用ssl的python3.9中拷贝了该文件，并发到了3.5中，并修改了名称。但是没有成功，我猜测的原因是：第一不兼容，第二不是单纯的文件丢失，因此补充好文件是没有用的，因此根本没有进行安装。因此该方法适用于文件丢失的，当然可以从其他服务器进行拷贝，从本地其他版本的python库拷贝可能没用，因此我不是文件丢失，我也没有其他服务器可以用，因此我没有继续任何尝试了。

copy _ssl.cpython-35-x86_64-linux-gnu.so from python3.9 to python3.5 and rename it. 

参考: python - pip raises ImportError: cannot import name HTTPSHandler - Ask Ubuntu

尝试4：

直接重新安装一个版本，直接安装一个最新版本给python3.5就好了。就是安装openssl以及库libssl，

sudo apt-get install openssl
sudo apt-get install libssl-dev
sudo apt-get install bless

这些代码可以成功运行，并不会报错，甚至显示没有任何可以更新的内容。结果如下：

 但是我测试的时候，在导入import ssl，还是失败的。

参考：Ubuntu安装OpenSSL-良许Linux教程网

失败原因猜测：因为服务器存在多个版本的python，是否在使用apt-get的时候将ssl安装到了其他python版本中，或者其他路径下？

因此我去查了一下，apt-get的默认安装路径，在多个路径下。具体如下：

/var/cache/apt/archives

ubuntu 默认的PATH为

PATH=/home/brightman/bin:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games

apt-get install安装目录是包的维护者确定的，不是用户

$ dpkg -L packagename、

dpkg -L +软件包的名字，可以知道这个软件包包含了哪些文件， 这个方法可以列出所有安装后留在系统里的文件

参考：ubuntu中apt-get的默认安装路径。安装、卸载以及查看的方法总结_ifwantwill的博客-CSDN博客_apt list 路径

=> 因此我去查了下openssl确实在 /usr/bin和/usr/local/bin中都有，因此不是第一个问题的原因，因为我自己安装的python是在local那里，默认自带的python是在第一个路径下。为什么后面的路径下会存在一个openssl，可能是因为在之前有人使用和安装python3.9的时候，安装的。

除了该问题，我还有一个困惑，就是服务器是否只需要一个openssl，无论存在多少个python版本，这个问题还没有解决, 如果只需要一个，那么就是python和openssl链接的问题，如果每个python都需要，那么才需要下载和再安装。

我没有找到明确的答案，但是我认为是只需要一个，因为如果我们认为该版本需要升级，那么并不是针对哪个python路径执行，只需要向下面文章一样，手动或者自动的下载一个openssl资源，然后进行安装，如果需要两个版本进行切换，可以进行软链接。但是在链接的时候并没有任何指令是针对python版本。

参考：Ubuntu18.04安装Openssl-1.1.1 - osc_6oerel1o的个人空间 - OSCHINA - 中文开源技术交流社区

尝试5：

使用brew进行更新，其实就是更新下openssl，然后重新编译下python3.5（所需要的版本）就好了。但是由于我使用的服务器的brew 在安装的时候会有2个error，也就是在使用brew更新openssl的时候的指令会报错，但是这令个代码的错误在网上没有任何的信息，所以没有继续尝试该方法。

参考：python - ImportError: cannot import name HTTPSHandler using PIP - Stack Overflow