Moonpark98
Moonpark98

ambari2.7.3离线安装

部署Ambari2.7.3+HDP3.1.0+CentOS7

一、准备工作

1.1 Ambari版本介绍

  Ambari2.7.3支持HDP-3.1.0、HDP-3.0.1、HDP-3.0.0，本次安装我们选择HDP-3.1.0版本。

（注：Ambari各个版本对产品的支持可在Ambari版本支持界面查看）

ambari2.7.3离线安装_第1张图片
Ambari版本支持

1.2 搭建环境准备

1.2.1 软件版本

组件 版本
操作系统 CentOS7
Ambari 2.7.3
HDP 3.1.0.0
MySQL 5.7
OracleJDK8 JDK1.8.0_144

1.2.2 软件下载

  • 在CentOS7清华源镜像点击CentOS-7-x86_64-DVD-1810.iso下载CentOS7镜像。
  • 在Ambari2.7.3安装包下载地址下载Ambari2.7.3安装包。
  • 在HDP-3.1.0.0、HDP-GPL-3.1.0.0、HDP-UTILS1.1.0.22安装包下载地址下载HDP安装包。
  • 在OracleJDK8下载地址下载安装JDK8 1.8.0_144 linux_x64版本的安装包。

1.2.3 节点规划

Hostname IP 功能 内存 磁盘
node1 192.168.121.101 本地源+Ambari Server 4G 80G
node2 192.168.121.102 节点 4G 80G
node3 192.168.121.103 节点 4G 80G

二、搭建虚拟机

2.1 搭建node1虚拟机

  • 打开VMwear选择新建虚拟机
  • 选择自定义安装

  • 操作系统选择Linux，版本为CentOS7 64位


    ambari2.7.3离线安装_第2张图片
    CentOS7 64位
  • 设置虚拟机的名称为node1
  • 虚拟机内存设置为4G
  • 网络连接类型选择为(NAT)
  • 指定磁盘容量为80G

  • 完成创建


    ambari2.7.3离线安装_第3张图片
    虚拟机

    -在虚拟机设置中选择ISO镜像文件


    ambari2.7.3离线安装_第4张图片
    镜像
  • 开启虚拟机，安装操作系统，选择第一项，直接安装CentOS7

  • 设置时区为上海


    ambari2.7.3离线安装_第5张图片
    时区

  • 点击SOFTWARE SELECTION选择需要安装的软件，这里我们选择Minimal Install-Development Tools


    ambari2.7.3离线安装_第6张图片
    安装软件

  • 选择安装位置


    ambari2.7.3离线安装_第7张图片
    安装位置
  • 点击Begin Installation开始安装

  • 在等待安装的过程中设置root密码为root123


    ambari2.7.3离线安装_第8张图片
    root密码

  • 等待安装完毕，点击Reboot重启，登录


    ambari2.7.3离线安装_第9张图片
    登录

2.2 配置node1

2.2.1 配置IP

  • 在VM菜单栏中点击“编辑-虚拟网络编辑器-更改设置”，选择NAT设置查询网关IP为192.168.121.2


    ambari2.7.3离线安装_第10张图片
    IP设置
  • 在node1中打开文件
    vi /etc/sysconfig/network-scripts/ifcfg-ens33
    修改文件内容
#修改BOOTPROTO和ONBOOT
#修改BOOTPROTO
BOOTPROTO=static
IPADDR=192.168.121.101
NETMASK=225.225.225.0
GATEWAY=192.168.121.2
DNS1=114.114.114.114
DNS2=8.8.8.8
#修改ONBOOT
ONBOOT=yes
ambari2.7.3离线安装_第11张图片
修改文件
  • 修改完毕后重启网络
    service network start
    ambari2.7.3离线安装_第12张图片
    重启网络
  • 查看网络属性
    ifconfig
    若提示命令不存在，使用以下语句进行安装
    yum -y install net-tools
    ambari2.7.3离线安装_第13张图片
    安装net-tools
  • 使用ping命令测试网络状况
    ping www.baidu.com
    ambari2.7.3离线安装_第14张图片
    使用ping命令测试网络状况

2.2.2 关闭防火墙

  • 查看防火墙的状态
    systemctl status firewalld.service
    ambari2.7.3离线安装_第15张图片
    防火墙状态
  • 关闭防火墙,并再次查询状态
    systemctl stop firewalld.service
    systemctl status firewalld.service
    ambari2.7.3离线安装_第16张图片
    关闭防火墙
  • 关闭防火墙的开机启动，并查看是否设置成功
    systemctl disable firewalld.service
    systemctl is-enabled firewalld.service
    ambari2.7.3离线安装_第17张图片
    关闭开机启动防火墙

    若结果为disabled则表明设置成功

2.2.3 设置Hostname

  • 打开hosts文件
    vi /etc/hosts
    在文件结尾增加
192.168.121.101 node1 node1
192.168.121.102 node2 node2
192.168.121.103 node3 node3
ambari2.7.3离线安装_第18张图片
设置hosts
  • 打开sysconfig/network文件
    vi /etc/sysconfig/network
    修改HOSTNAME属性
    HOSTNAME=node1
    ambari2.7.3离线安装_第19张图片
    修改hostname
  • 修改hostname
    hostnamectl set-hostname node1
    并使用hostname命令查看是否修改成功
    修改hostname

2.2.4 设置阿里开源镜像本地源

  • 访问阿里开源镜像网站

  • 根据centos操作帮助进行操作


    ambari2.7.3离线安装_第20张图片
    ali源操作帮助 
#进行备份
mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup
#下载新的CentOS-Base.repo
curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo
#生成缓存
yum makecache
ambari2.7.3离线安装_第21张图片
ali源设置

2.2.5 安装时间同步服务

  • 安装ntp
    yum install -y ntp
    ambari2.7.3离线安装_第22张图片
    安装ntp
  • 启动ntp并查看ntp状态
    systemctl start ntpd.service
    systemctl status ntpd.service
    ambari2.7.3离线安装_第23张图片
    启动ntp

    如若结果显示为 active (running) 则表明启动成功
    -设置开机启动
    systemctl enable ntpd.service

2.2.6 安装、配置JDK8

  • 创建/usr/java目录
    mkdir /usr/java
    ambari2.7.3离线安装_第24张图片
    创建java目录

  • 使用xftp将先前下载好的jdk压缩包传输到java目录中


    ambari2.7.3离线安装_第25张图片
    jdk压缩包传输
  • 解压缩
    tar -zxvf jdk-8u144-linux-x64.tar.gz
    ambari2.7.3离线安装_第26张图片
    解压
  • 返回至根目录配置环境变量
cd ~
vi /etc/profile

在文件结尾添加JAVA路径

#JAVA
export JAVA_HOME=usr/java/jdk1.8.0_144
export PATH=$PATH:$JAVA_HOME/bin
ambari2.7.3离线安装_第27张图片
配置java环境
  • 使环境变量生效
    source /etc/profile
    使用java -version命令查询java版本，若显示出java的版本信息 (1.8.0_144) 则表明配置成功
    ambari2.7.3离线安装_第28张图片
    配置成功

2.2.7 关闭Selinux和THP以降低系统CPU的使用率

  • 查看selinux的状态
    sestatus
    ambari2.7.3离线安装_第29张图片
    selinux状态
  • 关闭selinux
    vi /etc/sysconfig/selinux
    修改文件中的SELINUX属性
    SELINUX=disabled
  • 查询THP状态
cat /sys/kernel/mm/transparent_hugepage/defrag
cat /sys/kernel/mm/transparent_hugepage/enabled

若结果为 [always] 则表示启动了THP

THP状态

  • 永久关闭THP
    vi /etc/rc.d/rc.local
    在文件末尾添加
if test -f /sys/kernel/mm/transparent_hugepage/enabled; then
        echo never > /sys/kernel/mm/transparent_hugepage/enabled
fi
if test -f /sys/kernel/mm/transparent_hugepage/defrag; then
        echo never > /sys/kernel/mm/transparent_hugepage/defrag
fi

ambari2.7.3离线安装_第30张图片
关闭thp

并赋予rc.local文件执行权限
chmod +x /etc/rc.d/rc.local

  • 重启reboot后查看THP状态
cat /sys/kernel/mm/transparent_hugepage/defrag
cat /sys/kernel/mm/transparent_hugepage/enabled

若结果显示为 [never] 则表明关闭成功

ambari2.7.3离线安装_第31张图片
关闭成功

2.2.8 最大打开文件设置

  • 设置最大文件描述符数，一般要求为10000及以上。
    -检查最大文件描述符数的当前值
    ulimit -Sn
    ulimit -Hn
    如若输出小于10000，则将其设置为10000
    ulimit -n 10000
    ambari2.7.3离线安装_第32张图片
    设置最大描述符数

2.3 克隆虚拟机

2.3.1 修改镜像

关闭虚拟机node1，并在虚拟机设置中将镜像改为使用物理驱动器。


ambari2.7.3离线安装_第33张图片
修改镜像

2.3.2 克隆node1

  • 在VM菜单栏中点击“虚拟机-管理-克隆”
  • 选择克隆自虚拟中的当前状态
  • 选择创建完整克隆
  • 设置虚拟机的名称(node2)与位置
  • 克隆完成
  • 按照相同步骤克隆node3

2.3.2 修改node2、node3的虚拟机mac地址

  • 在虚拟机设置中选择“网络适配器-高级”，在mac地址中点击 “生成” 以生成随机地址。
    ambari2.7.3离线安装_第34张图片
    mac地址

2.3.3 修改node2、node3的IP地址

  • 启动node2、node3
    vi etc/sysconfig/network-scripts/ifcfg-ens33 
#修改IPADDR属性值
IPADDR=192.168.121.102 #node3为192.168.121.103

-重启network
service networks start
并使用ifconfig命令查看IP是否正确修改

ambari2.7.3离线安装_第35张图片
ip修改

2.3.4 修改虚拟机node2、node3的hostname

  • 修改虚拟机的hostname
    hostnamectl set-hostname node2(/node3)
    并使用hostname命令查看当前hostname
    ambari2.7.3离线安装_第36张图片
    修改hostname

    若输出为node2(/node3) 则表明修改成功

三、安装数据库及搭建本地源

3.1 在node1上安装数据库

  • 安装MySQL
wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm
yum -y install mysql57-community-release-el7-10.noarch.rpm
yum -y install mysql-community-server
ambari2.7.3离线安装_第37张图片
安装mysql
  • 启动MySQL
    systemctl start mysqld.service
    并使用systemctl status mysqld.service查看MySQL状态
    ambari2.7.3离线安装_第38张图片
    查看mysql状态

    若结果显示为active (running) 则表明启动成功
  • 设置MySQL开机自启
systemctl enable mysqld.service
  • 获取MySQL root用户的初始密码
    grep 'password' /var/log/mysqld.log
    获取mysql root用户密码
  • 登录MySQL并修改密码为 'root123'

（注：MySQL默认需修改初始密码后才能对数据库进行操作）

mysql -u root -p

mysql>  set global validate_password_policy=0;
mysql>  set global validate_password_length=1;
mysql>  ALTER USER 'root'@'localhost' IDENTIFIED BY 'root123';
ambari2.7.3离线安装_第39张图片
修改初始密码
  • 卸载Yum Repository，以避免每次yum操作都进行自动更新
    yum -y remove mysql57-community-release-el7-10.noarch
  • 配置MySQL编码格式为utf8
    vi /etc/my.cnf 
#在[mysqld]中添加
collation_server=utf8_general_ci
character_set_server=utf8
default-storage-engine=INNODB
#创建[client]并添加
[client]
default_character-set=utf8
ambari2.7.3离线安装_第40张图片
配置MySQL编码格式为utf8
  • 重启MySQL
    systemctl restart mysqld.service
  • 登录MySQL并查看字符集
    mysql> show variables like ‘character_set_%’;
    ambari2.7.3离线安装_第41张图片
    查看字符集

3.2 在MySQL数据库中创建相应的用户和数据库

  • 创建ambari数据库
    用户名： ambari
    密码： ambari123 
mysql> set global validate_password_policy=0;
mysql> set global validate_password_length=1;
mysql> create database ambari character set utf8;
mysql> CREATE USER 'ambari'@'%'IDENTIFIED BY 'ambari123';
mysql> GRANT ALL PRIVILEGES ON ambari.* TO 'ambari'@'%';
mysql> FLUSH PRIVILEGES;
ambari2.7.3离线安装_第42张图片
创建ambari数据库
  • 创建hive数据库
    用户名： hive
    密码： hive123 
mysql> create database hive character set utf8;
mysql> CREATE USER 'hive'@'%'IDENTIFIED BY 'hive123';
mysql> GRANT ALL PRIVILEGES ON hive.* TO 'hive'@'%';
mysql> FLUSH PRIVILEGES;
ambari2.7.3离线安装_第43张图片
创建hive数据库
  • 查看已经创建的数据库
    mysql> databases;
    输出中若含有ambari和hive则表明创建成功
    -下载mysql-connection-java

（注：稍后会使用，没有该包则MySQL与ambari无法连接！）

yum install mysql-connector-java

  • 查看是否下载成功
    cd /usr/share/java
    ls
    ambari2.7.3离线安装_第44张图片
    查看是否下载成功

    若目录中含有mysql-connector-java，则表明已成功下载

3.3 设置免密登录

  • 在实机中配置本地hosts文件

路径为C://Windows/System32/drivers/default_character
需要管理者权限才能修改，建议使用Notepad++进行修改

在文件末尾添加

192.168.121.101 node1
192.168.121.102 node2
192.168.121.103 node3
ambari2.7.3离线安装_第45张图片
修改hosts文件
  • 设置node1对node1、node2、node3的免密登录
[root@node1 ~]# ssh-keygen -t rsa #回车即可
[root@node1 ~]# ssh-copy-id node1
[root@node1 ~]# ssh-copy-id node2
[root@node1 ~]# ssh-copy-id node3

  • 同理设置node2对node2、node3的免密登录


    ambari2.7.3离线安装_第46张图片
    免密登录

3.4 在node1上安装Ambari源

3.4.1 安装yum的相关工具

yum install yum-utils -y
yum repolist
yum install createrepo -y

3.4.2 安装Apache httpd

  • 使用yum安装httpd
    yum install httpd -y
    ambari2.7.3离线安装_第47张图片
    使用yum安装httpd
  • 在生成的 /var/www/html 目录下创建ambari和hdp目录
    mkdir /var/www/html/ambari
    mkdir /var/www/html/hdp
    mkdir /var/www/html/hdp/HDP-UTILS-1.1.0.22

  • 使用xftp将先前下载好的ambari、hdp的安装文件传输到node1根目录下


    ambari2.7.3离线安装_第48张图片
    传输
  • 将安装文件解压至相应目录中
tar -zxvf ambari-2.7.3.0-centos7.tar.gz -C /var/www/html/ambari/
tar -zxvf HDP-3.1.0.0-centos7-rpm.tar.gz -C /var/www/html/hdp/
tar -zxvf HDP-UTILS-1.1.0.22-centos7.tar.gz -C /var/www/html/hdp/HDP-UTILS-1.1.0.22/
  • 启动httpd服务并设置开机自启
systemctl start httpd
systemctl status httpd
systemctl enable httpd

ambari2.7.3离线安装_第49张图片
启动httpd服务

若结果为 active (running) 则表明启动成功

  • 在浏览器中输入 http://192.168.121.101 即可看到httpd页面

3.5 配置本地Repo并分发

  • 配置ambari
    下载并修改配置文件
    wget -O /etc/yum.repos.d/ambari.repo http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.7.3.0/ambari.repo
    vi /etc/yum.repos.d/ambari.repo
    将baseurl与gpgkey修改为httpd中的路径
    ambari2.7.3离线安装_第50张图片
    修改ambari
  • 配置HDP和HDP-UTILS
    创建配置文件
    touch /etc/yum.repos.d/HDP.repo
    添加内容
#VERSION_NUMBER=3.1.0.0-78
[HDP-3.1.0.0]
name=HDP Version - HDP-3.1.0.0
baseurl=http://192.168.121.101/hdp/HDP/centos7
gpgcheck=1
gpgkey=http://192.168.121.101/hdp/HDP/centos7/3.1.0.0-78/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

[HDP-UTILS-1.1.0.22]
name=HDP-UTILS Version - HDP-UTILS-1.1.0.22
baseurl=http://192.168.121.101/hdp/HDP-UTILS-1.1.0.22
gpgcheck=1
gpgkey=http://192.168.121.101/hdp/HDP-UTILS-1.1.0.22/HDP-UTILS/centos7/1.1.0.22/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
ambari2.7.3离线安装_第51张图片
配置HDP
  • 分发ambari.repo和HDP.repo到各个节点的相同目录下
scp ambari.repo HDP.repo node1:$PWD
scp ambari.repo HDP.repo node2:$PWD
scp ambari.repo HDP.repo node3:$PWD
ambari2.7.3离线安装_第52张图片
分发repo

3.6 生成本地源

  • 创建本地源，为存放本地特定位置的众多RPM包建立索引，描述各包所需依赖信息，形成元数据。
createrepo /var/www/html/hdp/HDP/centos7/
createrepo /var/www/html/hdp/HDP-UTILS-1.1.0.22/
ambari2.7.3离线安装_第53张图片
生成本地源

四、安装ambari

4.1 在node1安装ambari-server

yum install ambari-sever

注：
1.选择JDK时选（2）自定义jdk，并填写jdk安装路径/usr/java/jdk1.8.0_144
2.Enter advanced databse configration[y/n]?时选择y,进入到数据库选择界面，在Enter choice后选择3，配置hostname为node1，使用默认端口，Database name为ambari，密码为ambari123

ambari2.7.3离线安装_第54张图片
安装ambari-server

4.2 使用root登录MySQL

mysql -u root -p

mysql> set global validate_password_policy=0;
mysql> set global validate_password_length=1;
mysql> GRANT ALL PRIVILEGES ON ambari.* TO 'ambari'@'localhost' IDENTIFIED BY 'Ambari123';
mysql> GRANT ALL PRIVILEGES ON ambari.* TO 'ambari'@'%' IDENTIFIED BY 'Ambari123';
mysql> FLUSH PRIVILEGES;
ambari2.7.3离线安装_第55张图片
使用root登录

4.3 使用ambar登录并查看数据库

mysql -u ambari -p -h node1
mysql>  show databases;
ambari2.7.3离线安装_第56张图片
databases

使用ambari数据库，查看数据表

mysql>  use ambari;
mysql>  /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql;
mysql>  show tables;
ambari2.7.3离线安装_第57张图片
tables

4.4 启动ambari-sever

ambari-server start

ambari2.7.3离线安装_第58张图片
启动ambari-server

注：若启动失败需 先关闭服务ambari-server stop再重新启动

4.5 安装ambari-agent

  • 在node2、node3上安装ambari-agent
    yum -y -install ambari-agent
    ambari2.7.3离线安装_第59张图片
    安装ambari-agent

五、访问Ambari web页面进行集群的安装

5.1 访问ambari web页面

  • 在浏览器中输入http://192.168.121.101:8080 访问ambari页面
    用户名和密码均为 'admin'
    ambari2.7.3离线安装_第60张图片
    ambari web页面

5.2 安装集群

  • 点击LAUNCH INSTALL WIZARD创建集群


    ambari2.7.3离线安装_第61张图片
    创建集群
  • 配置集群名称为ambari
    ambari2.7.3离线安装_第62张图片
    集群名称

  • 选择hdp的版本以及源的设置


    ambari2.7.3离线安装_第63张图片
    hpd版本

    ambari2.7.3离线安装_第64张图片
    hdp源

注：由于HDP-GPL很小，通常不需设置本地源

  • 配置节点、密钥


    ambari2.7.3离线安装_第65张图片
    node

注：密钥文件需从node1下载，路径为/root/.ssh/id_rsa
推荐使用xftp进行传输


ambari2.7.3离线安装_第66张图片
推荐使用xftp进行传输

  • 进行主机确认


    ambari2.7.3离线安装_第67张图片
    主机确认

  • 选择大数据组件
    这里我们选择Hive+HBase+Zookeeper+Storm，并依据提示选择其他必备组件


    ambari2.7.3离线安装_第68张图片
    组件选择

  • 分配节点
    依据虚机的情况分配节点


    ambari2.7.3离线安装_第69张图片
    分配节点
  • 分配从属和客户端

注：此处可以只选择一个DataNode

ambari2.7.3离线安装_第70张图片
分配从属
  • 连接数据库
用户名 密码
admin admin123
hive hive123
N/A admin123
ambari2.7.3离线安装_第71张图片
  • 与已有的hive数据库连接
    在Hive Database中选择 Exisiting MySQL/MariaDB
    在node1中执行ambari-server setup --jdbc-db=mysql --jdbc-driver=/usr/share/java/mysql-connector-java.jar
    ambari2.7.3离线安装_第72张图片

    在Database URL中填写 jdbc:mysql://node1/hive
    Database Password中输入 hive123 (创建hive数据库是设置的密码)
    ambari2.7.3离线安装_第73张图片
    连接hive数据库

  • 集群整体概况


    ambari2.7.3离线安装_第74张图片
    集群概况

  • 点击DEPLOY进行部署,等待部署完成即可


    ambari2.7.3离线安装_第75张图片
    等待部署

你可能感兴趣的:(ambari2.7.3离线安装)

  • python离线安装pip 于光yuguang pythonpip开发语言
    如果您的服务器没有互联网连接，您仍然可以通过其他方式将pip安装到服务器上。以下是一种可能的方法：方法一：离线安装下载pip安装文件：在另一台联网的计算机上，下载pip的安装文件（.whl文件）以及其依赖项的安装文件（如果有）。可以从PyPI下载pip的.whl文件。传输文件：将下载的.whl文件和依赖项文件通过USB等方式传输到没有互联网的服务器上。安装pip：在服务器上，使用pip的安装文件进
  • python 编译器spyder 安装_离线安装spyder的Python环境 weixin_39552037 python编译器spyder安装
    一、介绍：要求在不联网、无法使用anaconda的情况下，在一台离线的win7设备上配置Spyder的python的开发环境，用于提高数据处理效率，且安装方法在win732位和64位的各种设备上均可流畅安装。二、问题难点总结：1.离线安装Python的第三方函数库Python在联网情况下安装第三方包很容易，但离线安装操作比较复杂，如某第三方库a，联网状态下仅一行代码pipinstalla，然而离线
  • python离线安装一个第三方库 Lhj0616 python相关python第三方库
    文章目录实例步骤下载`xlwt`库将文件转移到目标机器在目标机器上安装`xlwt`验证安装总结步骤可能的问题解决方法检查库的兼容性使用`pip`下载适配特定Python版本的库创建虚拟环境创建虚拟环境（Python3.6）创建虚拟环境（Python3.11）检查和验证库的安装下载多个版本的`.whl`文件总结更新：下载的第三方库有依赖库解决方案实例想离线安装一个第三方库xlwt，python版本分
  • Docker-compose minio集群部署 有点菜的运维 docker容器运维
    一、虚机准备192.168.40.174192.168.40.174192.168.40.176二、下载docker-compose离线安装docker及docker-compose_docker-compose离线安装-CSDN博客三、docker-compose.yml文件按docker-compose文件启动，minio的api端口为9000，控制台端口为9001174version:"3"
  • elasticsearch数据迁移之elasticdump 迷茫运维路 elasticsearch中间件elasticsearchlinux运维
    系列文章目录第一章es集群搭建第二章es集群基本操作命令第三章es基于search-guard插件实现加密认证第四章es常用插件文章目录系列文章目录前言一、elasticdump是什么？二、安装elasticdump工具1.离线安装2.在线安装三、elasticdump相关参数四、使用elasticdump进行数据备份五、使用elasticdump进行数据恢复前言在企业实际生产环境中,避免不了要对
  • Swift基础语法学习 中古传奇 swiftc++面试java
    Swift基础语法学习0前言--Swift特点优势(忽悠点)1环境搭建1.1Xcode安装1.2离线安装踩坑指南2Swift语言2.1基本数据类型2.1.1申明常量和变量2.1.2整数类型2.1.3浮点数2.1.4布尔值2.1.5元组2.1.6可选类型2.1.7错误处理3断言和先决条件3.1断言和先决条件调试代码的好处3.2使用断言进行调试3.3强制执行先决条件3.4基本运算符时间：2021-22
  • IntelliJ IDEA下的使用 Lombok Artifacts
    在idea安装lombok插件image在步骤4，应该是个install，我的这个截图是已经安装完成的。步骤5，如果在线安装不成，可以试试离线安装。开启EnableannotationprocessingimagePOM增加依赖org.projectlomboklombok1.16.18provided最后一步增加@Data标签，可以直接看到生成的getset等结构了image
  • 银河麒麟V10 设置MySQL、Tomcat开机自启 还在学习的孔先生 mysqltomcat
    文章目录前言一、MySQL开机自启1.创建服务配置文件2.编写文件内容3.设置文件权限4.重载systemd配置，并设置开机自启注：服务器环境下也可使用chkconfig创建开机启动二、Tomcat开机自启1.创建启动文件2.编辑启动文件3.保存启动文件前言银河麒麟系统V10，MySQL及Tomcat离线安装完成后，不能开机自启，需编写开机自启配置文件。用systemctl管理。一、MySQL开机
  • apt 下载指定架构的包及离线安装的方法 错误重复学习记录 linux
    #设置系统架构sudodpkg--add-architectureamd64#安装apt-rdependssudoaptinstallapt-rdepends#创建单独的目录mkdir-p/home/apt/postgresql-client-common#仅下载安装包sudoapt-getinstall--download-onlysudomv/var/cache/apt/archives/*/
  • es安装ik分词器 abments ESelasticsearchjenkins大数据
    下载分词器首先确定es对应的版本（假设版本是7.10.0）根据版本下载指定的分词器开始安装在线安装./bin/elasticsearch-plugininstallhttps://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.10.0/elasticsearch-analysis-ik-7.10.0.zip离线安装-
  • LINUX离线安装ftp服务 人生在勤，不索何获-白大侠 服务器linux服务器运维
    1.下载FTP离线安装包:vsftp:http://rpmfind.net/linux/rpm2html/search.php?query=vsftpd(x86-64)选择最后一个vsftpd-3.0.2-28.el7.x86_64.rpm2.检查是否已经安装了vsftprpm-qa|grepvsftpd出现提示则表示已安装，没有则未安装3.安装vsftpd（推荐离线）离线安装rpm-ivhvsf
  • K8s介绍及离线安装 wang5798 kubernetesdocker
    K8s介绍及离线安装（一）第一章K8s介绍一、K8s是什么？Kubernetes是Google开源的容器集群管理系统，使用Golang开发，其提供应用部署、维护、扩展机制等功能，利用Kubernetes能方便地管理跨机器运行容器化的应用，其主要功能如下：使用Docker对应用程序包装(package)、实例化(instantiate)、运行(run)。以集群的方式运行、管理跨机器的容器。解决Doc
  • linux 离线安装依赖问题 mengyu822_csdn linux运维
    例：需要离线安装mariadb-devel找台有网的系统一样的机器指定软件包下载路径yum--downloadonly--downloaddir=/home/packagesinstallmariadb-devel进入/home/packages下执行rpm-ivh*.rpm
  • Rocky Linux 8.8 离线安装Mariadb 10.11.7 恒云客 linuxmariadb运维
    用户在阿里购买了一台无公网的云服务器，不能用yum进行安装，用离线方式进行了安装。1、创建一个不指定home目录帐号useradd-s/sbin/nologin-Mmysql2、下载官方二进制安装压缩包wgetmariadb-10.11.7-linux-systemd-x86_64.tar.gz3、解压指定目录/usr/localtarzxvfmariadb-10.11.7-linux-syste
  • Linux离线安装MySQL5(1) 2401_84046876 程序员linux运维服务器
    一、下载安装包安装依赖yum-yinstallperlautoconfgccgcc-c++makecmakelrzsznet-toolslibaio官方地址：https://downloads.mysql.com/archives/community/mysql-5.7.24-1.el7.x86_64.rpm-bundle.tar：https://cdn.mysql.com/archives/my
  • kafka2.8.2集群离线安装 xiongmao0304 elk1024程序员节kafka
    版本：Centos7、kafka_2.13-2.8.2节点：27.196.38.200kafka127.196.38.201kafka227.196.38.202kafka3基础配置在所有节点操作[root@localhost~]#systemctlstopfirewalld[root@localhost~]#systemctldisablefirewalldRemovedsymlink/etc/
  • （四）Kafka离线安装 - Kafka下载及安装 清风ai明月 Kafkakafka
    Kafka官方下载地址：ApacheKafka这时候下载安装版本。我这里的安装目录在/usr/local/cd/usr/local/#创建目录mkdirkafkacdkafkamkdirkafka_log把下载的压缩包，放入到/usr/local/kafka/目录下，解压。#解压tar-zxvfkafka_2.12-3.8.0.tgz修改配置文件#修改配置文件cd/usr/local/kafka/
  • Centos7离线安装Kafka+zookeeper+SASL安全认证 weixin_38683859 centoskafka
    1.安装zookeeper1.下载apache-zookeeper-3.5.8-bin.tar.gz2.解压：tar–zxvfapache-zookeeper-3.5.8-bin.tar.gz3.进入到conf目录cd/opt/apache-zookeeper-3.5.8-bin/conf/4.复制配置文件cfgcpzoo_sample.cfgzoo.cfg5.修改zoo.cfg配置文件：vi/o
  • 【离线安装clickhouse集群】 eddianliu bigdataclickhousecentos
    离线安装clickhouse集群clickhouse介绍Clickhouse是俄罗斯yandex公司于2016年开源的一个列式数据库管理系统，在OLAP领域像一匹黑马一样，以其超高的性能受到业界的青睐。特性：基于shard+replica实现的线性扩展和高可靠采用列式存储，数据类型一致，压缩性能更高硬件利用率高，连续IO，提高了磁盘驱动器的效率向量化引擎与SIMD提高了CPU利用率，多核多节点并行
  • 离线安装压缩工具xz指南 查拉图斯特拉面条 Linux&运维运维
    在Linux操作系统上离线安装压缩工具xz可能会遇到一些挑战，尤其是当官方下载地址无法访问时。本文将为你提供详细的指导，确保你能够顺利安装xz。一、下载xz安装包首先，你可以尝试从xz官方网站下载xz的安装包。以下是官方下载地址：https://tukaani.org/xz/如果官方网站无法访问，你还可以从GitHub上的xz项目发布页面下载xz的源码压缩包。GitHub提供了多个版本的xz源码，
  • Ubuntu下部署Hadoop集群+Hive（三） 岩屿 hadoopubuntuhive
    Hive部署准备环境apache-hive-4.0.0-bin.tar.gz、mysql-connector-j-8.1.0.jar如果是离线安装的话，使用mysql-8.0.34-1.el7.x86_64.rpm-bundle.tar，在线安装的话则不用；hive下载地址：Indexof/hive(apache.org)mysqlconnector下载地址：MySQL::DownloadConn
  • Ubuntu 20.04.4 LTS 离线安装docker 与docker-compose 皮卡车厘子 ubuntudockereureka
    Ubuntu20.04.4LTS离线安装docker与docker-compose要在Ubuntu20.04.4LTS上离线安装Docker和DockerCompose，你需要首先从有网络的环境下载Docker和DockerCompose的安装包，然后将它们传输到离线的服务器上进行安装。在有网络的环境中：下载Docker安装包：wgethttps://download.docker.com/lin
  • centos离线安装docker，docker-compose 程序人生518 centosdockerlinux
    安装环境操作系统：Centos7.99内核版本：3.10.0-1160.el7.x86_64安装用户：rootdocker离线安装1下载压缩包官网下载地址：https://download.docker.com/linux/static/stable/x86_64/这里默认选择最新版本（26.0.2）。2上传压缩包并解压tarzxvftarzxvfdocker-26.0.2.tgz3配置docke
  • linux主机离线安装python3环境 文子阳 运维linux运维服务器
    一、下载好python版本Indexof/ftp/python/https://www.python.org/ftp/python/二、创建文件夹mkdir/home/python/三、上传到主机四、解压#解压xz得到tar包xz-dPython-3.9.8.tar.xz#解压tar包tar-xvfPython-3.9.8.tar五、指定安装路径#进入解压后的目录cdPython-3.9.8#"=
  • linux 离线安装python kevin529_super linuxpythonlinuxpython
    安装jdk具体操作如下：1、下载jdk安装包到服务器2、解压tar-zxvfjdk-8u131-linux-x64.tar.gz3、配置环境变量3.1、vi~/.bash_profile3.2、在.bash_profile文件中填入如下语句：exportPATHexportJAVA_HOME=/home/appadmin/apps/jdk1.8.0_162exportPATH=$JAVA_HOME
  • Linux保存依赖安装包到指定目录(用于离线安装) 和月明 服务安装linuxcentos运维
    经常与一些保密级别较高的企业打交道，他们使用的网络都是内部网络，根本无法访问到公网，但是部署一些项目时难免会有依赖包需要离线安装。遇到这种问题通常都是手动去下载依赖的库，然后离线安装，但是你无法判断下载的这个依赖库是否还依赖其他库，如果是手动去下载安装将耗费很长时间（他们导入任何文件都要走流程，一次就需要4h左右），为了改善这种情况，就需要将所有依赖都离线下载到本，本文将介绍如何将Centos和U
  • ELK离线安装和配置流程 GB9125 运维开发elasticsearchelklinux运维开发
    ELK离线安装和配置流程一、介绍ELK是一个开源的数据分析和可视化工具，由三个开源项目组成：Elasticsearch、Logstash和Kibana。Elasticsearch是一个基于Lucene库的分布式搜索和分析引擎；Logstash是一个用于收集、处理和转换数据的数据管道，它可以从各种来源读取数据，包括日志文件、系统事件、网络流量等；Kibana则是一个数据可视化平台，可以对从Elast
  • Mac 离线安装Qt5 熊明之 macc++
    如果使用brewinstallqt发生不明原因报错，可以尝试离线下载qt！！！1下载QT1.1.打开链接：https://download.qt.io/archive/qt/在这个链接上，可以看到不同版本的QT，我们选择稳定5.9/点开后，选择5.9.8版本，可以看到不同版本的QT，选择Mac本QTqt-opensource-mac-x64-5.9.8.dmg；下载后安装；1.2首次使用qt会出现
  • pnpm项目内网迁移技巧 夜晓码农 Webjavascriptpnpmnpm
    概述因为公司项目需要，经常要从外网将代码拷贝到内网进行调试，因为pnpm是基于链接的npm管理工具，所以pnpm的项目迁移和普通的npm项目不一样。步骤离线安装pnpm#在互联网设备执行pnpm的安装npmipnpm--install-strategy=shallow#完成后能看到node_modules目录下新建了pnpm目录#打包node_modules文件夹，拷贝到离线设备解压cdnode_
  • LVS与nginx结合使用，更强的负载均衡 中年程序员一枚 运维环境经典专栏lvsnginx负载均衡
    目录目录LVSLVS组成LVS技术术语LVS的调度算法环境准备显示网络DR(192.168.102.29)配置RS1(192.168.101.134)配置RS2(192.168.101.139)配置客户端测试nginx配置下载安装包安装步骤离线安装在线安装
  • SQL的各种连接查询 xieke90 UNION ALLUNION外连接内连接JOIN
    一、内连接   概念：内连接就是使用比较运算符根据每个表共有的列的值匹配两个表中的行。                 内连接（join 或者inner join ）       SQL语法：       select * fron
  • java编程思想--复用类 百合不是茶 java继承代理组合final类
          复用类看着标题都不知道是什么,再加上java编程思想翻译的比价难懂,所以知道现在才看这本软件界的奇书   一:组合语法:就是将对象的引用放到新类中即可     代码:     package com.wj.reuse; /** * * @author Administrator 组
  • [开源与生态系统]国产CPU的生态系统 comsci cpu
          计算机要从娃娃抓起...而孩子最喜欢玩游戏....       要让国产CPU在国内市场形成自己的生态系统和产业链,国家和企业就不能够忘记游戏这个非常关键的环节....       投入一些资金和资源,人力和政策,让游
  • JVM内存区域划分Eden Space、Survivor Space、Tenured Gen，Perm Gen解释 商人shang jvm内存
    jvm区域总体分两类，heap区和非heap区。heap区又分：Eden Space（伊甸园）、Survivor Space(幸存者区)、Tenured Gen（老年代-养老区）。 非heap区又分：Code Cache(代码缓存区)、Perm Gen（永久代）、Jvm Stack(java虚拟机栈)、Local Method Statck(本地方法栈)。 HotSpot虚拟机GC算法采用分代收
  • 页面上调用 QQ oloz qq
    <A href="tencent://message/?uin=707321921&amp;Site=有事Q我&amp;Menu=yes">   <img style="border:0px;" src=http://wpa.qq.com/pa?p=1:707321921:1></a>
  • 一些问题 文强chu 问题
    1.eclipse 导出 doc  出现“The Javadoc command does not exist.” javadoc command 选择 jdk/bin/javadoc.exe 2.tomcate 配置 web 项目 ..... SQL:3.mysql  * 必须得放前面 否则  select&nbs
  • 生活没有安全感 小桔子 生活孤独安全感
           圈子好小，身边朋友没几个，交心的更是少之又少。在深圳，除了男朋友，没几个亲密的人。不知不觉男朋友成了唯一的依靠，毫不夸张的说，业余生活的全部。现在感情好，也很幸福的。但是说不准难免人心会变嘛，不发生什么大家都乐融融，发生什么很难处理。我想说如果不幸被分手(无论原因如何)，生活难免变化很大，在深圳，我没交心的朋友。明
  • php 基础语法 aichenglong php 基本语法
    1 .1 php变量必须以$开头 <?php $a=” b”; echo ?> 1 .2 php基本数据库类型 Integer  float/double Boolean string 1 .3 复合数据类型 数组array和对象 object 1 .4 特殊数据类型  null 资源类型(resource)    $co
  • mybatis tools 配置详解 AILIKES mybatis
    MyBatis Generator中文文档 MyBatis Generator中文文档地址： http://generator.sturgeon.mopaas.com/ 该中文文档由于尽可能和原文内容一致，所以有些地方如果不熟悉，看中文版的文档的也会有一定的障碍，所以本章根据该中文文档以及实际应用，使用通俗的语言来讲解详细的配置。 本文使用Markdown进行编辑，但是博客显示效
  • 继承与多态的探讨 百合不是茶 JAVA面向对象 继承 对象
    继承 extends   多态 继承是面向对象最经常使用的特征之一：继承语法是通过继承发、基类的域和方法 //继承就是从现有的类中生成一个新的类，这个新类拥有现有类的所有extends是使用继承的关键字：     在A类中定义属性和方法； class A{ //定义属性 int age； //定义方法 public void go
  • JS的undefined与null的实例 bijian1013 JavaScriptJavaScript
    <form name="theform" id="theform"> </form> <script language="javascript"> var a alert(typeof(b)); //这里提示undefined if(theform.datas
  • TDD实践（一） bijian1013 java敏捷TDD
    一.TDD概述         TDD：测试驱动开发，它的基本思想就是在开发功能代码之前，先编写测试代码。也就是说在明确要开发某个功能后，首先思考如何对这个功能进行测试，并完成测试代码的编写，然后编写相关的代码满足这些测试用例。然后循环进行添加其他功能，直到完全部功能的开发。     
  • [Maven学习笔记十]Maven Profile与资源文件过滤器 bit1129 maven
    什么是Maven Profile Maven Profile的含义是针对编译打包环境和编译打包目的配置定制，可以在不同的环境上选择相应的配置，例如DB信息，可以根据是为开发环境编译打包，还是为生产环境编译打包，动态的选择正确的DB配置信息   Profile的激活机制 1.Profile可以手工激活，比如在Intellij Idea的Maven Project视图中可以选择一个P
  • 【Hive八】Hive用户自定义生成表函数(UDTF) bit1129 hive
    1. 什么是UDTF   UDTF，是User Defined Table-Generating Functions，一眼看上去，貌似是用户自定义生成表函数，这个生成表不应该理解为生成了一个HQL Table， 貌似更应该理解为生成了类似关系表的二维行数据集   2. 如何实现UDTF 继承org.apache.hadoop.hive.ql.udf.generic
  • tfs restful api 加auth 2.0认计 ronin47
    　　目前思考如何给tfs的ngx-tfs api增加安全性。有如下两点： 　　一是基于客户端的ip设置。这个比较容易实现。 　　二是基于OAuth2.0认证，这个需要lua，实现起来相对于一来说，有些难度。 　　现在重点介绍第二种方法实现思路。 　　 前言：我们使用Nginx的Lua中间件建立了OAuth2认证和授权层。如果你也有此打算，阅读下面的文档，实现自动化并获得收益。SeatGe
  • jdk环境变量配置 byalias javajdk
    进行java开发，首先要安装jdk，安装了jdk后还要进行环境变量配置： 1、下载jdk（http://java.sun.com/javase/downloads/index.jsp），我下载的版本是：jdk-7u79-windows-x64.exe 2、安装jdk-7u79-windows-x64.exe 3、配置环境变量：右击"计算机"-->&quo
  • 《代码大全》表驱动法-Table Driven Approach-2 bylijinnan java
    package com.ljn.base; import java.io.BufferedReader; import java.io.FileInputStream; import java.io.InputStreamReader; import java.util.ArrayList; import java.util.Collections; import java.uti
  • SQL 数值四舍五入 小数点后保留2位 chicony 四舍五入
    1.round() 函数是四舍五入用，第一个参数是我们要被操作的数据，第二个参数是设置我们四舍五入之后小数点后显示几位。 2.numeric 函数的2个参数，第一个表示数据长度，第二个参数表示小数点后位数。 例如： 　　select   cast(round(12.5,2)   as   numeric(5,2))  
  • c++运算符重载 CrazyMizzz C++
    一、加+，减-，乘*，除/ 的运算符重载 Rational operator*(const Rational &x) const{ return Rational(x.a * this->a); } 在这里只写乘法的，加减除的写法类似 二、<<输出,>>输入的运算符重载      &nb
  • hive DDL语法汇总 daizj hive修改列DDL修改表
    hive DDL语法汇总 １、对表重命名 hive> ALTER TABLE table_name RENAME TO new_table_name;   2、修改表备注 hive> ALTER TABLE table_name SET TBLPROPERTIES ('comment' = new_comm
  • jbox使用说明 dcj3sjt126com Web
    参考网址：http://www.kudystudio.com/jbox/jbox-demo.html jBox v2.3 beta [ 点击下载]  技术交流QQGroup：172543951 100521167 [2011-11-11] jBox v2.3 正式版 - [调整&修复] IE6下有iframe或页面有active、applet控件
  • UISegmentedControl 开发笔记 dcj3sjt126com
      //    typedef NS_ENUM(NSInteger, UISegmentedControlStyle) {     //        UISegmentedControlStylePlain,     // large plain   &
  • Slick生成表映射文件 ekian scala
    Scala添加SLICK进行数据库操作，需在sbt文件上添加slick-codegen包 "com.typesafe.slick" %% "slick-codegen" % slickVersion 因为我是连接SQL Server数据库，还需添加slick-extensions，jtds包 "com.typesa
  • ES-TEST gengzg test
    package com.MarkNum; import java.io.IOException; import java.util.Date; import java.util.HashMap; import java.util.Map; import javax.servlet.ServletException; import javax.servlet.annotation
  • 为何外键不再推荐使用 hugh.wang mysqlDB
    表的关联，是一种逻辑关系，并不需要进行物理上的“硬关联”，而且你所期望的关联，其实只是其数据上存在一定的联系而已，而这种联系实际上是在设计之初就定义好的固有逻辑。 在业务代码中实现的时候，只要按照设计之初的这种固有关联逻辑来处理数据即可，并不需要在数据库层面进行“硬关联”，因为在数据库层面通过使用外键的方式进行“硬关联”，会带来很多额外的资源消耗来进行一致性和完整性校验，即使很多时候我们并不
  • 领域驱动设计 julyflame VODAO设计模式DTOpo
    概念： VO（View Object）：视图对象，用于展示层，它的作用是把某个指定页面（或组件）的所有数据封装起来。 DTO（Data Transfer Object）：数据传输对象，这个概念来源于J2EE的设计模式，原来的目的是为了EJB的分布式应用提供粗粒度的数据实体，以减少分布式调用的次数，从而提高分布式调用的性能和降低网络负载，但在这里，我泛指用于展示层与服务层之间的数据传输对
  • 单例设计模式 hm4123660 javaSingleton单例设计模式懒汉式饿汉式
           单例模式是一种常用的软件设计模式。在它的核心结构中只包含一个被称为单例类的特殊类。通过单例模式可以保证系统中一个类只有一个实例而且该实例易于外界访问，从而方便对实例个数的控制并节约系统源。如果希望在系统中某个类的对象只能存在一个，单例模式是最好的解决方案。      &nb
  • logback zhb8015 loglogback
    一、logback的介绍      Logback是由log4j创始人设计的又一个开源日志组件。logback当前分成三个模块：logback-core,logback- classic和logback-access。logback-core是其它两个模块的基础模块。logback-classic是log4j的一个 改良版本。此外logback-class
  • 整合Kafka到Spark Streaming——代码示例和挑战 Stark_Summer sparkstormzookeeperPARALLELISMprocessing
    作者Michael G. Noll是瑞士的一位工程师和研究员，效力于Verisign，是Verisign实验室的大规模数据分析基础设施（基础Hadoop）的技术主管。本文，Michael详细的演示了如何将Kafka整合到Spark Streaming中。 期间， Michael还提到了将Kafka整合到 Spark Streaming中的一些现状，非常值得阅读，虽然有一些信息在Spark 1.2版
  • spring-master-slave-commondao 王新春 DAOspringdataSourceslavemaster
    互联网的web项目，都有个特点：请求的并发量高，其中请求最耗时的db操作，又是系统优化的重中之重。 为此，往往搭建 db的 一主多从库的 数据库架构。作为web的DAO层，要保证针对主库进行写操作，对多个从库进行读操作。当然在一些请求中，为了避免主从复制的延迟导致的数据不一致性，部分的读操作也要到主库上。（这种需求一般通过业务垂直分开，比如下单业务的代码所部署的机器，读去应该也要从主库读取数
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他