day5-Linux文件管理

1.文件管理之：联网下载文件（wget、curl）、文件上传与下载（rz、sz）

--------------------------wget、curl联网下载文件--------------------------------

1.CentOs7   系统最小默认安装没有wget命令，需要进行安装
[root@oldboyedu ~]# yum install wget -

2.找到我们需要下载的资源
复制资源的链接地址------->

3.在linux上使用wget命令进行下载（默认下载到当前目录）
[root@oldboyedu ~]# wget
http://fj.xuliangwei.com/public/weixin.py

4.由于我们下载的是文件，所以我们可以使用cat   less   more   查看该文件
[root@oldboyedu ~]# cat weixin.py

5.使用wget下载资源时，指定保存的位置，并重新命名
[root@oldboyedu ~]# wget -O /opt/tt.png
http://fj.xuliangwei.com/public/ks.jpeg

6.下载资源时，如果不想重新命名，只想修改保存路径，请带上原有的名名称
[root@oldboyedu ~]# wget -O /opt/ks.jpeg
http://fj.xuliangwei.com/public/ks.jpeg

--------------------------curl------------------------------

curl   浏览网络上的资源
1.在线浏览网站资源内容（源代码）
[root@oldboyedu ~]# curl
http://fj.xuliangwei.com/public/weixin.py

2.使用curl将内容保存至本地，并重命名（如果没有明确指定路径，则表示当前路径）
[root@oldboyedu ~]# curl -o wei.txt
http://fj.xuliangwei.com/public/weixin.py

3.将资源保存至指定的路径
[root@oldboyedu ~]# curl -o /opt/weixin.py
http://fj.xuliangwei.com/public/weixin.py

---

PS:通常情况下我们推荐使用wget下载，但由于系统很多时候默认没有按照wget 会偶尔使用一下curl

练习：使用两种方式下载如下的两个文件
1.wget保存至本地 /etc/yum.repos.d/CentOS-Base.repo
 http://mirrors.aliyun.com/repo/Centos-7.repo
[root@oldboyedu ~]# wget -O  /etc/yum.repos.d/CentOS-Base.repo  http://mirrors.aliyun.com/repo/Centos-7.repo


2.curl保存至本地  /etc/yum.repos.d/epel.repo
http://mirrors.aliyun.com/repo/epel-7.repo
[root@oldboyedu ~]# curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo

3.最后执行一条命令检查   yum makecache

4.将阿里云的仓库源改为清华大学的源 
https://mirrors.tuna.tsinghua.edu.cn/
搜狐、网易、等等

--------------------rzsz上传下载文件---------------

1.如果无法将文件直接拖拽进Linux服务器
（1.）没有安装lrzsz，建议安装   yum  install  lrzsz  -y
 (2.) PS：只能上传文件，不支持上传文件夹，不支持大于4个G上传，也不支持断点续传
 (3.) sz  /path/file  只能下载文件     （任意单个文件），不支持下载文件

2.文件管理之：文件或命令查找（which、where）

----------------------命令查找--------------------

1.查找一个命令的绝对路径
当我们想执行一个命令的绝对路径时,先使用which command 查询绝对路径
which ls   查找ls命令的绝对路径

2.whereis也使用来查询命令的绝对路径
whereis ls   查找命令的路径、帮助手册、等
whereis -b ls   仅显示命令所在的路径

3.对于内核相关的一些命令,使用which whereis是无法查询到,需要使用type命令查询
type -a ls   查看命令的绝对路径(包括别名)

3.文件管理之：文件内容处理命令(sort、uniq、cut、sed、awk、wc、)

------------------------sort排序----------------

在有些情况下，需要对应一个无序的文本文件进行数据的排序，这时就需要使用sort进行排序了。

   sort [OPTION]... [FILE]...
   -r：倒序 -n：按数字排序 -t：指定分隔符(默认空格) -k：指定第几列, 指定几列几字符（指定1,1 3.1,3.3）

1.首先创建一个文件，写入一写无序的内容
[root@xuliangwei ~]# cat >> file.txt <

-----------------------uniq去重-------------------

如果文件中有多行完全相同的内容，当前是希望能删除重复的行，同
时还可以统计出完全相同的行出现的总次数, 那么就可以使用uniq命
令解决这个问题(但是必须配合sort使用)。

uniq [OPTION]... [INPUT [OUTPUT]]
选项：-c 计算重复的行

1.创建一个file.txt文件:
[root@xuliangwei ~]# cat >>file1.txt <

面试题: 请统计分析如下日志，打印出访问最高前10的IP

image.png

----------------------------------------cut截取字段(不太重要)----------------------

cut OPTION... [FILE]...
选项：-d 指定分隔符 -f 数字,取第几列 –f3,6三列和6列 -c 按字符取(空格也算)
[root@oldboyedu ~]# cat >>file2.txt <

PS: 实际生产使用过程中,很少使用到cut,通常都是使用awk,因为awk是取列专业户

---------------------------wc统计行号---------------------------
习题: 分析如下日志，统计每个域名被访问的次数。
[root@student tmp]# cat >> web.log < http://www.xuliangwei.com/index.html
http://www.xuliangwei.com/1.html
http://post.xuliangwei.com/index.html
http://mp3.xuliangwei.com/index.html
http://www.xuliangwei.com/3.html
http://post.xuliangwei.com/2.html
EOF
[root@oldboyedu ~]# cut -d "/" -f 3 web.log | sort |uniq -c | sort -nr
[root@oldboyedu ~]# awk -F "/" '{print $3}' web.log|sort |uniq -c |sort -nr

习题: 使用awk取出系统的IP地址，思路如下:
1.我要取的值在哪里 ifconfig ens32
2.如何缩小取值范围(行)
3.如何精确具体内容(列)

先拿到结果,然后提取有关键字那一行,最后使用awk取出那一列
[root@oldboyedu ~]# ifconfig ens32|grep "netmask" |awk '{print $2}'
10.0.0.200
[root@oldboyedu ~]# ifconfig ens32 | awk '/netmask/' |awk '{print $2}'
10.0.0.200
[root@oldboyedu ~]# ifconfig ens32 | awk '/netmask/{print $2}'
10.0.0.200

习题: 分析如下日志,请提取出访问次数最高的TOP10IP地址
习题: 将/etc/passwd文件中的第一行中的第一列和最后一列位置进行交换。
习题: 将/etc/sysconfig/selinux 文件中的SELINUX=enforcing替换成SELINUX=disabled