大数据必备shell工具

一、Shell    

1) 常用的shell工具                         

        awk sed sort cut                 

2)易出错的地方                    

        '' 单引号不解析里面变量的值         ""  双引号解析里面变量的值               嵌套 :看谁在最外面  3)经常使用的场景

        a.分发脚本(搭建集群)

        b.启停脚本(启动集群)

        c.与mysql的导入导出(数据同步)

         d.数仓层级内部(ETL开发)

你可能感兴趣的:(大数据技术,hadoop)