在Linux服务器上跑机器学习代码相关操作

前言

• 学习 Maching Learning，怎么能少得了服务器呢，本来想现在自己小菜鸟一枚，就自己在本地用 CPU 跑代码吧，等学得差不多了，再去找老师要个有 GPU 的服务器账号进阶。
• 忽如一夜春风来，千树万树梨花开。就在今天上午，对，没错，就是今天上午，打开实验室邮箱一看，My God！！！实验室为学生统一配备了4台曙光W780-G20 GPU服务器，感谢党，感谢祖国，感觉CCTV，感谢全国TV。。感动！！！
• 现在有 GPU 服务器了，由于小菜鸟基本没在服务器上进行过操作，所以抓紧学习一下基本操作，作为记录！

环境

• 本地和服务器操作系统均为 Ubuntu 16.04 LTS

ssh

• 在 Ubuntu 系统中，可以通过 ssh 与服务器相连接
  ssh 用户名＠服务器ip，如下所示

ssh [email protected]

scp

• 本地代码上传服务器，服务器代码下传到本地，需要的基本操作都是scp。
• 重要，无论是本地上传文件到服务器，还是服务器下传文件到本地，都是在本地终端进行操作的，本地终端，本地终端！！！

1 单个文件

• 1.1 从本地上传单个文件到服务器

scp /home/gcb/Desktop/a.py [email protected]:/home/LAB/guocb

• 1.2 从服务器下传单个文件到本地

scp [email protected]:/home/LAB/guocb/a.py /home/gcb/data

2 多个文件

• 2.1 从本地上传多个文件到服务器

scp /home/gcb/Desktop/{1,2}.py [email protected]:/home/LAB/guocb/

• 2.2 从服务器下传多个文件到本地

scp [email protected]:/home/LAB/guocb/{1,2}.py /home/gcb/Desktop/

3 文件夹

• -r 递归复制整个目录。
• 3.1 从本地上传文件夹到服务器

scp -r /home/gcb/data/ [email protected]:/home/LAB/guocb/

• 3.2 从服务器下传文件夹到本地

scp -r [email protected]:/home/LAB/guocb/data/ /home/gcb/Desktop/

运行代码

单个文件

• 当想用服务器跑单个文件时(此文件和其他文件没关系，可以自己独立运行)，有两种方法：
• 1，在本地输入命令，用服务器运行

ssh [email protected] python3 < /home/gcb/Desktop/a.py

• 2，将本地单个文件上传服务器，然后在服务器运行

# 上传到服务器
scp /home/gcb/Desktop/a.py [email protected]:/home/LAB/guocb
# 执行
python3 a.py

多个文件

• 当用服务器执行多个文件时(文件存在调用关系，不能独立运行)，不能在本地输入命令，在服务器运行，需要将本地上传到服务器，然后在服务器执行
• 可以按照多个文件上传，然后执行
• 也可以将这几个文件放到一个文件夹里(文件夹仅有这几个文件)，然后将文件夹上传服务器，个人建议，将文件放到一个文件夹里面，然后上传，执行，这样舒服

scp -r /home/gcb/data/ [email protected]:/home/LAB/guocb/

删除文件/文件夹

• 好了，我们现在呢，上传文件(/文件夹)到服务器了，当执行完之后，我们不想要了，咋办，删除呗！
• 删除文件　　rm -rf 文件名
• 删除文件夹　rm -rf 文件夹名

rm -rf 1.py　   # 删除文件
rm -rf data     # 删除文件夹

# 补充
touch 1.py      # 创建文件
mkdir data      # 创建文件夹

参考

• scp命令
• 在Linux服务器执行代码