绿叶悠
绿叶悠

CDH6.2安装教程（详细步骤）

一.安装介绍

本文介绍CDH 安装，安装版本以当前最新版CDH 6.2为例。
本文介绍的安装方式为自建YUM源的离线安装方式

二.下载所需安装文件

CDH的离线安装需要下需以下文件:

  • CDH依赖的Python:https://www.python.org/ftp/python/2.7.11/Python-2.7.11.tgz
  • JDK:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
  • Mysql5.7:https://cdn.mysql.com//Downloads/MySQL-5.7/mysql-5.7.26-1.el7.x86_64.rpm-bundle.tar
  • CM:百度云文件：cloudera-repos.zip，也可参照安装步骤在线下载
  • Parcel:https://archive.cloudera.com/cdh6/6.2.0/parcels/CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel.sha1
    https://archive.cloudera.com/cdh6/6.2.0/parcels/CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel
  • Mysql JDBC:http://central.maven.org/maven2/mysql/mysql-connector-java/8.0.16/mysql-connector-java-8.0.16.jar
  • 准备好安装系统的ISO包，用于在缺少依赖包时进行安装

三.确认主机安装环境

1.确认每台服务器的硬件是否满足要求：

空间要求: /var: 5GB /usr : 500MB CDH安装目录: 2GB

检查命令: df -h

内存要求: 4GB(min)

检查命令: free -m

2.检查系统版本：

检查命令：cat /etc/issue

需求版本：CentOS Linux release 7.3.1611 (Core), 支持7.X

3.检查服务器数据存储空间：
CDH的安装建议在每台服务器具有相同的数据存储路径, 并具可以有多个

四.规划集群部署

CDH建议最少3台服务器进行集群部署，本次安装采用三台服务器，规划：

主机名 IP 角色
master01 192.168.1.205 Hadoop Master，CM Server，数据节点，Mysql
slave01 192.168.1.206 数据节点，CMAgent
slave02 192.168.1.207 数据节点，CM Agent

五.修改主机名

使用命令

hostnamectl set-hostname xxx

分别修改三台主机的主机名，如：

hostnamectl set-hostname master01
hostnamectl set-hostname slave01
hostnamectl set-hostname slave02

六.更改主机HOSTS映射文件

将所有集群服务器的IP 主机名都写到/etc/hosts文件中，因为后面的安装服务器选择，都是通过主机名选择。如：在每台服务器的/etc/hosts中增加以下内容：


image.png

七.更改主机HOSTS映射文件

1.停掉系统防火墙服务命令：

systemctl disable firewalld
systemctl stop firewalld

2.停掉系统SELinux
使用以下命令查看SELinux是否开起：
如果输出为: Enable， 则SELinux为开启状态，则使用以下操作关闭:

  • 更改系统配置文件： /etc/sysconfig/selinux
    将行 SELINUX=enforcing 更改为： SELINUX=disabled
  • 重启系统: reboot

八.检查主机时间同步

  • CentOS 7默认以chronycd服务作时间同步，而不以ntpd作为同步服务
    1.所有服务器都以master01作为同步服务器，在所有服务器更改文件：


    CDH6.2安装教程（详细步骤）_第1张图片
    image.png

    a) 文件为: /etc/chrony.conf
    b) 以#注释其它所有默认时间服务器
    c) 增加行server master01 iburst

2.在master01上同时更改如下配置:

image.png

image.png

3.启动服务:

systemctl restart chronyd
systemctl enable chronyd

4.检查服务状态:

chronyc sources
image.png

九.检查主机参数配置

1.设置 vm. swappiness 核心参数：
在 /etc/sysctl.conf文件中追加行:

vm.swappiness = 0

使参数生效，执行命令：

sysctl -p

2.设置hugepage相关参数，执行以下命令：

echo never > /sys/kernel/mm/redhat_transparent_hugepage/defrag

并将该命令，追加到 /etc/rc.local文件中，使系统重启时生效。

十.确认Python环境

1.通过以下命令确定python是否安装以及版本：

python -V

2.Python的版本要求为: 2.6.x, 2.7.x, 如果没有安装或版本不正确，则通过以下方式安装:
a) 创建安装目录：

mkdir /usr/local/python27

b) 解压步骤 2 下载的Python-2.7.11.tgz安装文件：

tar -xvf Python-2.7.11.tgz

c) 进到解压目录里面，然后执行下以命令进行编绎安装：

cd Python-2.7.11
./configure --prefix=/usr/local/python27

更改 Modules/Setup文件

# zlib zlibmodule.c -I$(prefix)/include -L$(exec_prefix)/lib -lz

改为：

zlib zlibmodule.c -I$(prefix)/include -L$(exec_prefix)/lib -lz

去年前面的注释，增加编绎zlib模块,impala-shell命令会用到。

# make
# make install

d) 修改老版本指向：

# mv /usr/bin/python /usr/bin/python_old
# ln -s /usr/local/python27/bin/python /usr/bin/python

e) 再次使用上面的命令确认是否安装完成

十一.安装依赖包

CDH 6.2安装需要以下依赖包：

  • Python: 2.6 或 2.7版本
  • perl
  • python-psycopg2 : 用于连接postgresql, 如果用Mysql数据库，就不用安装
  • iproute
    以上软件在安装系统时软件选择“Compute Node”时，已全部安装. 一般不用操作!如果出现差包的情况，可参考<十五.制作本地YUM源>, 先制作好YUM源后，使用YUM命令安装。

十二.安装数据库并创建用户和数据库

只需要在master01主机上安装即可
集群的安装需要一个关系型数据库进行配置数据的存储，CDH支持 Oracle , Mysql, Postgrest, 以及一个内置数据库。本将安装采用mysql进行存储，安装过程为：

1.检测和卸载已安装的MYSQL软件：


image.png

image.png
  • 注意：CentOS7默认安装了mariadb库，所以mysql及mariadb都要检测

2.解压下载的MYSQL安装文件：

# tar -xvf mysql-5.7.26-1.el7.x86_64.rpm-bundle.tar

3.安装MYSQL(注意：命令在一行, 全部复制执行)：

rpm -ivh mysql-community-server-5.7.26-1.el7.x86_64.rpm mysql-community-common-5.7.26-1.el7.x86_64.rpm mysql-community-devel-5.7.2ommunity-devel-5.7.26-1.el7.x86_64.rpm mysql-community-libs-*.rpm mysql-community-embedded-*.rpm
CDH6.2安装教程（详细步骤）_第2张图片
image.png

4.启动MYSQL

# systemctl start mysqld
# systemctl enable mysqld

5.获取MYSQL的root初始临时密码，在日志文件 /var/log/mysqld.log

# grep 'temporary password' /var/log/mysqld.log

6.更改root用户初始密码：

# mysql -uroot -p

mysql> set global validate_password_policy=0;
Query OK, 0 rows affected (0.00 sec)

mysql> set global validate_password_length=6;
Query OK, 0 rows affected (0.00 sec)

mysql> ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';
Query OK, 0 rows affected (0.00 sec)

7.在MYSQL中创建需要用到的数据库：

mysql> CREATE DATABASE scm DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
mysql> CREATE DATABASE hive DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
mysql> CREATE DATABASE rmon DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
mysql> CREATE DATABASE oozie DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci; 
mysql> CREATE DATABASE hue DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;

8.在MYSQL中创建集群所用的统一登陆用户授权：

mysql> CREATE USER 'cdh'@'%' IDENTIFIED BY '123456'; 
Query OK, 0 rows affected (0.00 sec)

mysql> GRANT ALL ON *.* TO 'cdh'@'%';
Query OK, 0 rows affected (0.00 sec)

十三.拷贝JDBC驱动包到每台服务器

将Mysql驱动包mysql-connector-java-8.0.16.jar拷贝到每台服务器下的目录： /usr/share/java/

# cp mysql-connector-java-8.0.16.jar /usr/share/java/mysql-connector-java.jar

十四.安装JDK

上传JDK安装文件： jdk-8u211-linux-x64.rpm 使用以下命令安装上面已下载的JDK：

# rpm -ivh jdk-8u211-linux-x64.rpm

配置JAVA环境变量, 在 /etc/profile中追加以下内容：

export JAVA_HOME=/usr/java/default
export CLASSPATH=./:$JAVA_HOME/lib
export PATH=$JAVA_HOME/bin:$PATH

如图，如用以下命令难JDK是否安装成功:

image.png

十五.制作本地YUM安装源

安装ClouderaManager需要同时制作本地系统ISO源以及CM安装文件源。
以下第 2), 3) 步除红字增加YUM源文件操作需要在每台服务器上增加，其它准备步骤只在Master01上执行即可
1.删除其它文件, 每台服务器上执行

# rm -rf /etc/yum.repos.d/*.repo

2.制作本地系统ISO源
a) 上传ISO文件并挂载系统iso包成虚拟设备：

# mkdir /iso
# mount -o loop ./CentOS-7-x86_64-DVD-1611.iso /iso

b) 启动HTTP服务

# cd /iso
#python -m SimpleHTTPServer 7900

注意：该命令会一直卡住，后面的操作需另开SHELL窗口

c) 每台服务器上增加以下内容(黄行不是)到文件： /etc/yum.repos.d/centos.repo

[root@master01 ~]# cat /etc/yum.repos.d/centos.repo 
[c7-media]
name=CentOS-$releasever - Media
baseurl= http：//192.168.1.205：7900
gpgcheck=1
enabled=1
gpgkey= http：//192.168.1.205：7900/RPM-GPG-KEY-CentOS-7

注意地址是否正确，可以手动在浏览器中打开地址测试

3.制作CM YUM源
a) 准备文件

# mkdir -p /var/www/html/
# unzip ./cloudera-repos.zip -d /var/www/html/
# chmod -R ugo+rX /var/www/html/cloudera-repos/cm6

如果Linux能联网也可使用以下命令直接在线下载文件：

# wget --recursive --no-parent --no-host-directories https：//archive.cloudera.com/cm6/6.2.0/redhat7/ -P                   /var/www/html/cloudera-repos
# wget https：//archive.cloudera.com/cm6/6.2.0/allkeys.asc -P /var/www/html/cloudera-repos/cm6/6.2.0/
# chmod -R ugo+rX /var/www/html/cloudera-repos/cm6

b) 启动HTTP服务

# cd /var/www/html
# python -m SimpleHTTPServer 8900

c) 每台服务器上增加以下内容到文件： /etc/yum.repos.d/cloudera-repo.repo

[root@master01 ~]# cat /etc/yum.repos.d/cloudera-repo.repo 
[cloudera-repo]
name=cloudera-repo
baseurl=http：//192.168.1.205：8900/cloudera-repos/cm6/6.2.0/redhat7/yum
enabled=1
gpgcheck=0

十六.安装Clouder Manger

1.在master01主机上执行以下命令, 同时安装CM Server和CM Agent

# yum install -y cloudera-manager-daemons cloudera-manager-agent cloudera-manager-server

安装需要一会时间，会安装依赖包:
CDH6.2安装教程（详细步骤）_第3张图片
image.png

2.在每台服务器执行以下命令安装Agent:

# yum install -y cloudera-manager-agent cloudera-manager-daemons

  1. 配置Agent文件： /etc/cloudera-scm-agent/config.ini
    将 server_host=localhost
    更改为: server_host=master01
    (Cm server所在主机)


    image.png

十七.初始化CM 的配置数据库(只在CM Server(master01)上执行)

执行脚本 scm_prepare_database.sh 进行初始化，命令格式:

# cd /opt/cloudera/cm/schema/   
# ./scm_prepare_database.sh -h master01 -P 3306 mysql scm cdh 123456

参数说明： -h MysqlHost -P MysqlPort dbType dbName dbUser dbPasswd
image.png

十八.移动Parcel文件到指标目录(只在CM Server上执行)

使用以下命令移动3个parcel文件到parcel-repo中：

# cp CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel /opt/cloudera/parcel-repo/
# cp CDH-6.2.0-1.cdh6.2.0.p0.967373-el7.parcel.sha1 /opt/cloudera/parcel-repo/CDH-6.2.0-    1.cdh6.2.0.p0.967373-el7.parcel.sha

注意：最后一个文件将.sha1名字改成了 .sha

十九.启动CM Server/ Agent

1.在Master01上启动CM Server

# systemctl start cloudera-scm-server
# systemctl enable cloudera-scm-server

2.在所有主机上启动CM Agent

# systemctl start cloudera-scm-agent
# systemctl enable cloudera-scm-agent

enable命令是启用开始起动

3.检查日志是起起动完成


CDH6.2安装教程（详细步骤）_第4张图片
image.png
  • 出现红色日志，说明起动完成，可以登陆WEB页面开始后面的操作

二十.登陆CM Server完成集群安装

  • 登录CM管理界面,最好使用Chrome浏览器,使用地址: http://192.168.1.205:7180/
    默认用户密码为admin/admin


    CDH6.2安装教程（详细步骤）_第5张图片
    image.png

  • 登陆进去后，继续：


    CDH6.2安装教程（详细步骤）_第6张图片
    image.png

  • Accept License, 继续：


    CDH6.2安装教程（详细步骤）_第7张图片
    image.png

  • 下一页，选择安装cm版本，默认，继续即可：


    CDH6.2安装教程（详细步骤）_第8张图片
    image.png

  • 集群安装欢迎, 继续：


    CDH6.2安装教程（详细步骤）_第9张图片
    image.png

  • 集群名设置，默认即可，继续：


    CDH6.2安装教程（详细步骤）_第10张图片
    image.png

  • 选择【当前管理的主机】中可以看到所有启动了CM Agent的服务器，并成功连接CM Server的服务器, 选择需要安装的服务器，点击继续：


    CDH6.2安装教程（详细步骤）_第11张图片
    image.png

  • 选择对应的CDH parcel版本，点击继续：


    CDH6.2安装教程（详细步骤）_第12张图片
    image.png

  • 如果这里没有Parcel可供选择，请检查第18步，并重启CM Server，在这一步，CM 会将parcel解压，并分发，安装到每一台选择的服务器中，如图：


    CDH6.2安装教程（详细步骤）_第13张图片
    image.png

  • 检查主机正确性，如有错误，按照提示更改即可， 并点击完成：


    CDH6.2安装教程（详细步骤）_第14张图片
    image.png

    可以执行Hosts检查，Network Performance不需要执行, Host 显示完整结果：


    CDH6.2安装教程（详细步骤）_第15张图片
    image.png

    检查一般会有这两个警告，可以按提示修改，也可以在上面选择”I understand the risks” 忽略继续。

  • 选择需要安装的组件，可根据需要自定义选择：


    CDH6.2安装教程（详细步骤）_第16张图片
    image.png

    服务在安装完成后，还可以增删

  • 选择角色分配：
    按照第 4 步角色规划：HDFS DataNode选择所有主机
    ZooKeeper按照建议(应选择大于3个并为单数的主机)： 选择所有主机
    其它根据需要更改，注意角色均衡和性能：
    一般master角色选成master01
    图中红色为我更改过的部分


    CDH6.2安装教程（详细步骤）_第17张图片
    image.png

    CDH6.2安装教程（详细步骤）_第18张图片
    image.png

    CDH6.2安装教程（详细步骤）_第19张图片
    image.png

  • 集群数据库设置：
    根据第12步创建的数据库，填写正确的数据库及用户，密码，然后测试连接：


    CDH6.2安装教程（详细步骤）_第20张图片
    image.png

    如果有数据库不存在的，则按第12步新建数据库即可, 注意建库后重新执行Grant授权语句

  • 集群数据存储目录设置，根据需要设置各组件数据存储目录(测试默认即可)：


    CDH6.2安装教程（详细步骤）_第21张图片
    image.png

集群开始安装，并部署，启动服务：


CDH6.2安装教程（详细步骤）_第22张图片
image.png

CDH6.2安装教程（详细步骤）_第23张图片
image.png

  • 完成：


    CDH6.2安装教程（详细步骤）_第24张图片
    image.png

二十一.CDH集群安装检查

登陆进CM管理界面，可以检查集群各组件运行情况，如：


CDH6.2安装教程（详细步骤）_第25张图片
image.png

你可能感兴趣的:(CDH6.2安装教程（详细步骤）)

  • 第六集如何安装CentOS7.0，3分钟学会centos7安装教程 date分享
    从光盘引导系统按回车键继续进入引导程序安装界面，选择语言这里选择简体中文版点击继续选择桌面安装下面给系统分区选择磁盘，点击完成选择基本分区，点击加号swap分区,大小填内存的两倍在选择根分区，使用所有可用的磁盘空间选择文件系统ext4点击完成，点击开始安装设置root密码，点击完成设置普通用户和密码，点击完成整个过程持续八分钟左右根据个人配置不同，时间长短不同好，现在点击重启系统进入重启状态点击本
  • 2023最详细的Python安装教程（Windows版本） 程序员林哥 Pythonpythonwindows开发语言
    python安装是学习pyhon第一步，很多刚入门小白不清楚如何安装python，今天我来带大家完成python安装与配置，跟着我一步步来，很简单，你肯定能完成。第一部分：python安装（一）准备工作1、下载和安装python(认准官方网站)当然你不想去下载的话也可以分享给你，还有入门学习教程，点击下方卡片跳转进群领取（二）开始安装对于Windows操作系统，可以下载“executableins
  • 计算机毕业设计PHP仓储综合管理系统（源码+程序+VUE+lw+部署） java毕设程序源码王哥 php课程设计vue.js
    该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程。欢迎交流项目运行环境配置：phpStudy+Vscode+Mysql5.7+HBuilderX+Navicat11+Vue+Express。项目技术：原生PHP++Vue等等组成，B/S模式+Vscode管理+前后端分离等等。环境需要1.运行环境：最好是小皮phpstudy最新版，我们在这个版本上开发的。其他版本理论上也可以。2.开发
  • 4款毕业论文参考文献格式生成器（附加详细步骤） 小猪包333 写论文人工智能深度学习计算机视觉AI写作
    在撰写毕业论文时，参考文献的格式规范是至关重要的。为了帮助学生和学者们更高效地生成符合要求的参考文献格式，本文将详细介绍四款推荐的参考文献格式生成器，并提供详细的使用步骤。1.千笔-AIPassPaper千笔-AIPassPaper是一款先进的AI辅助论文写作工具，不仅能够自动生成大纲、开题报告，还能一键生成参考文献。AI论文，免费大纲，10分钟3万字https://www.aipaperpass
  • sublime个人设置 bawangtianzun sublimetext编辑器
    如何拥有jiangly蒋老师同款编译器(sublimec++配置竞赛向）_哔哩哔哩_bilibiliSublimeText4的安装教程（新手竞赛向）-知乎(zhihu.com)创建文件自动保存为c++打开SublimeText软件。转到"Tools"（工具）>"Developer"（开发者）>"NewPlugin"（新建插件）。在打开的新文件中，粘贴以下代码：importsublimeimport
  • uniapp实现动态标记效果详细步骤【前端开发】 2401_85123349 uni-app
    第二个点在于实现将已经被用户标记的内容在下一次获取后刷新它的状态为已标记。这是什么意思呢？比如说上面gif图中的这些人物对象，有一些已被该用户添加为关心，那么当用户下一次进入该页面时，这些已经被添加关心的对象需要以“红心”状态显现出来。这个点的难度还不算大，只需要在每一次获取后端的内容后对标记对象进行状态更新即可。II.动态标记效果实现思路和步骤首先，整体的思路是利用动态类名对不同的元素进行选择。
  • 在Flask中实现跨域请求（CORS） ac-er8888 flaskpython后端
    在Flask中实现跨域请求（CORS，Cross-OriginResourceSharing）主要涉及到对Flask应用的配置，以允许来自不同源的请求访问服务器上的资源。以下是在Flask中实现CORS的详细步骤和方法：一、理解CORSCORS是一种机制，它使用额外的HTTP头部来告诉浏览器，让运行在一个origin（域）上的Web应用被准许访问来自不同源服务器上的指定的资源。当一个资源从与该资源
  • 外卖霸王餐返利外卖会员卡小程序开发 闹小艾 good506070微信小程序小程序
    外卖霸王餐返利外卖会员卡小程序开发"社交电商赋能下的外卖返利小程序"是专为商家与用户双赢而设计的创新平台。以下是其开发方案的详细步骤：一、需求梳理：首先，我们需要明确小程序的核心功能和特色。包括设定活动类型、返利策略，以及用户体验友好的界面设计。二、技术决策：技术选型是关键。我们采用小程序的开发框架，利用JavaScript作为前端开发语言，并结合微信提供的API进行后端接口调用与数据处理。三、账
  • Python 代码从 `.env` 文件中读取环境变量 风吹落叶花飘荡 AI参与的学习pythonjavalinux
    要让Python代码从.env文件中读取环境变量，可以使用python-dotenv库。以下是详细步骤：第一步：安装python-dotenv库在终端或命令提示符中运行以下命令来安装python-dotenv：pipinstallpython-dotenv第二步：创建.env文件在你的项目根目录下创建一个名为.env的文件，并添加你需要的环境变量。例如：ARK_API_KEY=your_api_k
  • 计算机毕业设计Node.js+Vue基于Java的医院预约挂号系统(程序+源码+LW+部署) Nodejs洋洋 程序 javavue.js课程设计
    该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程。欢迎交流项目运行环境配置：Node.js+Vscode+Mysql5.7+HBuilderX+Navicat11+Vue+Express。项目技术：Express框架+Node.js+Vue等等组成，B/S模式+Vscode管理+前后端分离等等。环境需要1.运行环境：最好是Nodejs最新版，我们在这个版本上开发的。其他版本理论上也可
  • CURL 发送POST请求 微赚淘客系统@聚娃科技 post请求
    CURL发送POST请求大家好，我是免费搭建查券返利机器人赚佣金就用微赚淘客系统3.0的小编，也是冬天不穿秋裤，天冷也要风度的程序猿！今天，我们将探讨在命令行中使用CURL发送POST请求的详细步骤和用法。什么是CURL？CURL是一个命令行工具和库，用于传输数据，支持众多协议，包括HTTP、HTTPS、FTP、FTPES等。它是开源且跨平台的，广泛应用于网络开发中。CURL发送POST请求的基本
  • Matlab2024a安装教程 是阿宇呢 信息可视化开发语言
    MATLAB是一款商业数学软件，用于算法开发、数据可视化、数据分析以及数值计算的高级技术计算语言和交互式环境，主要包括MATLAB和Simulink两大部分，可以进行矩阵运算、绘制函数和数据、实现算法、创建用户界面、连接其他编程语言的程序等，主要应用于工程计算、控制设计、信号处理与通讯、图像处理、信号检测、金融建模设计与分析等领域。1.解压安装包：①鼠标右击【MATLABR2024a(64bit)
  • 从零开始！Jupyter Notebook的安装教程 yunquantong jupyteridepython
    以下是从零开始安装JupyterNotebook的教程，适用于Windows、macOS和Linux系统。1.安装PythonJupyterNotebook需要Python环境。你可以从Python官方网站下载并安装Python。Windows用户:运行安装程序时，请确保勾选“AddPythontoPATH”选项。macOS用户:使用安装程序或通过Homebrew安装(brewinstallpyt
  • 从零开始!Jupyter Notebook的安装教程 109702008 人工智能编程#pythonjupyter人工智能
    GPT-4o(OpenAI)安装JupyterNotebook是一个相对简单的过程，特别是在大多数现代操作系统（如Windows、macOS和Linux）上。以下是详细的步骤指南，从安装Python开始，到JupyterNotebook的使用。步骤1：安装PythonJupyterNotebook需要Python环境。你可以从[Python官网](https://www.python.org/do
  • reactnative 获取定位_React-native实现定位的功能 weixin_39644915 reactnative获取定位
    1、在React-native中实现定位的功能的几种方式。(1).使用rn中的自带的Geolocation实现定位。(2).用第三放库react-native-location实现定位。2.用rn中自带的Geolocation实现定位的详细步骤：(1).如果是android进行定位手下是需要权限的通过以下代码设置权限：(2).直接通过navigator.geolocation来进行定位，示例代码如
  • 静态库的制作 姜太公钓鲸233 数据结构
    静态库是一组对象文件的集合，它们在编译时被链接到可执行文件中。这意味着，静态库中的代码会被复制到每个使用它的程序中，因此静态库不需要在程序运行时被单独加载。制作静态库可以帮助你将常用的代码模块化、重用，简化开发过程。以下是创建静态库的详细步骤：步骤1：编写源代码首先，创建几个C/C++源文件，它们将组成静态库。例如，创建两个c文件math_functions.c和string_functions.
  • Axure RP 9 超级教程：自适应视图（Adaptive View Set） 凡间萌宠
    本文适用于（非）汉化版AxureRP9自适应视图入门操作废话不表，直接如题。以下为详细步骤：1.新建页面，名称自定，如“自适应”。新建页面2.选择Project下的AdaptiveViewSets...项。选择AdaptiveViewSets3.弹出自适应设置框，点击“+Add”自适应设置框4.弹出新增自适应页面：新增自适应页面5.点击Presets(预制)，弹出不同平台以及不同型号大小的显示规格
  • Tecplot 360 EX 2020 R2 2020安装教程 微新功重好A酷君
    Tecplot3602020是一款由美国Tecplot公司推出的专业CFD/CAE可视化数据分析软件,同时也是也系列软件目前最新的版本,文章教大家如何对tecplot360进行安装激活。存在Pytecplotlicensehasexpired过期显示问题，其他功能没问题，介意勿下！！！操作系统：windows文件获取关键字：tecplot安装教程1.双击运行下载的tecplot安装包，按下图勾选点
  • gitlab的下载和安装教程&我的踩坑经验 o762 gitlab
    #######这里就记录一下内网的安装包形式的安装过程############1、下载过程和安装过程1）进入gitlab官网，platform>Install.--gitlab有极狐版，CE(社区版)和EE(企业版)。下面以CE版进行研究和学习。2）也可以进入官网镜像网站或者其它各大镜像网站下载gitlab-ce的rpm包--官网镜像网站：https://packages.gitlab.com/g
  • 记录一下gitlab社区版的安装教程 心之所想，行则将至 gitlab服务器linux
    目录1.更新系统软件包2.安装必要的依赖3.添加GitLab源3.1对于GitLabEnterpriseEdition（EE）：3.2对于GitLabCommunityEdition（CE）：4.安装GitLab4.1安装GitLabEnterpriseEdition（EE）：4.2安装GitLabCommunityEdition（CE）：5.遇到启动不起来的问题，试一下以下命令5.1重新配置和重
  • Excel单元格内插入图片（VBA创建函数，根据图片名称批量插入，中间有空格） yujiaerzong ExcelExcelVBA单元格批量插入图片
    1.详细步骤见Excel单元格内插入图片（VBA创建函数，根据图片名称批量插入）2.VBA代码部分改为如下代码Sub插入图形应用()ForEachshapInSheet1.ShapesIfshap.Type""Then           DimiAsString             i=""           IfLen(Dir(ThisWorkbook.Path&"\图库\"&Cells
  • python第三方库手动安装教程_为了应对异常情况，提供最原始的python第三方库的安装方法：手动安装。往往是Windows用户需要用到这种方法。... weixin_39735247
    进入pypi.python.org，搜索你要安装的库的名字，这时候有3中可能：第一种是exe文件，这种最方便，下载满足你的电脑系统和python环境的对应的exe，再一路点击next就可以安装。第二种是.whl类文件，好处在于可以自动安装依赖包。第三种是源码，大概都是zip、tar.zip、tar.bz2格式的压缩包，这个方法要求用户已经安装了这个包所依赖的其他包。例如pandas依赖于numpy
  • Battery-Historian在win10上的详细环境搭建过程 小赖同学啊 移动端测试运维监控电量测试gitpythonlinux
    Battery-historian是Google在GitHub上面开源的一个很强大的电量分析工具，相对来讲安装是比较麻烦的。之前已经在win7系统上搭过一次，这次在win10上再搭一次，整体来说没有发现什么太大的区别。Battery-Historian工具在Windows上运行主要需要有Go语言、Python、Java以及Git的支持。环境搭建详细步骤如下：一、安装配置Go语言环境1.下载：htt
  • Linux搭建Java环境之jdk1.8安装图文教程 yundashi168 Java教程阿里云教程
    Linux的使用相信大家都要用到java吧！在使用java前我们得先安装jdk以及配置环境变量等工作；下面小编给大家分享关于Linux安装jdk的详细步骤：【Linux服务器远程连接工具】xshell6快捷下载，xftp6快捷下载温馨提示：xshell负责编写和执行Linux命令，就是大家都知道的命令行。xftp负责上传和下载文件。两款软件搭配使用。还有一款免费的国产的linux远程连接客户端—f
  • Charles基础教程和破解安装 沫沫18S Charles接口测试Charles接口测试抓包工具注册码安装破解
    抓包工具Charles的使用教程参考：https://zhubangbang.com/charlesproxy如果您是您一次使用Charles，可能对下面的感兴趣。Charles破解版免费下载和安装教程Charles手机抓包设置Charles的https抓包方法及原理/下载ssl/http证书如果您已经正在使用Charles，可能感兴趣下面的工具Charles禁止缓存工具Charles禁用cook
  • mac 版本Jmeter安装教程 weixin_58693614 macosjmeterjava
    1.确认是否安装JDK*打开终端->输入java-version（注意空格）会出现版本信息javaversion"16.0.1"2021-04-20Java(TM)SERuntimeEnvironment(build16.0.1+9-24)JavaHotSpot(TM)64-BitServerVM(build16.0.1+9-24,mixedmode,sharing)2.若没有安装，移步官网下载安
  • flink增量检查点降低状态依赖实现的详细步骤 goTsHgo Flink大数据分布式flink大数据
    增量检查点启动恢复的时间是很久的，业务上不能接受，所以可以通过降低状态依赖来减少恢复的时间。降低状态依赖尽可能减少状态的复杂性和依赖关系，通过拆分状态或将状态外部化到其他服务中，从而降低恢复的开销。实施措施：将状态分割为更小的单元，减少每次恢复的状态量。使用外部状态存储服务，减少Flink状态后端的负担。拆分状态和将状态外部化到其他服务可以帮助减少作业的状态依赖，从而降低恢复时间和复杂度。以下是详
  • 京东优惠券怎么领取？详细步骤揭秘，折扣大礼包等你来拿 浮沉导师
    作为中国知名的电商平台，京东一直以来都深受用户的喜爱。而京东优惠券更是让用户在购物时享受到额外的优惠。那么，京东优惠券怎么领取？京东支付券又在哪里领取呢？本文将为大家详细介绍京东优惠券的领取攻略以及京东支付券的获取方法。一、京东优惠券的领取方式1.活动页面领取：京东会定期在首页、活动页面等位置推出优惠券活动专区。用户可以进入该页面，浏览并领取自己感兴趣的优惠券。2.商家优惠券领取：在京东的店铺页面
  • Gitbook 本地安装教程 simple哇 书籍gitbook
    Gitbook本地安装教程安装node[nodejs的v10.21.0版本，下载地址：https://nodejs.org/dist/v10.21.0/node-v10.21.0-x64.msi]其他版本有问题npmnpminstall-ggitbook-cligitbookinit[初始化目录结构]gitbookbuild[编译]gitbookserve[运行]插件在根目录新建book.json
  • Window 下 Vim 环境安装踩坑问题汇总及解决方法 yyywxk #Python模块有关问题vimpythonmambawindows
    导航Linux下Mamba及Vim安装问题参看本人之前博客：Mamba环境安装踩坑问题汇总及解决方法Linux下Vmamba安装教程参看本人之前博客：Vmamba安装教程（无需更改base环境中的cuda版本）Windows下VMamba的安装参看本人之前博客：Windows下VMamba安装教程（无需更改base环境中的cuda版本且可加速）Window下Mamba环境教程参看本人之前博客：Wi
  • Linux的Initrd机制 被触发 linux
    Linux 的 initrd 技术是一个非常普遍使用的机制，linux2.6 内核的 initrd 的文件格式由原来的文件系统镜像文件转变成了 cpio 格式，变化不仅反映在文件格式上， linux 内核对这两种格式的 initrd 的处理有着截然的不同。本文首先介绍了什么是 initrd 技术，然后分别介绍了 Linux2.4 内核和 2.6 内核的 initrd 的处理流程。最后通过对 Lin
  • maven本地仓库路径修改 bitcarter maven
    默认maven本地仓库路径：C:\Users\Administrator\.m2 修改maven本地仓库路径方法：     1.打开E:\maven\apache-maven-2.2.1\conf\settings.xml     2.找到        
  • XSD和XML中的命名空间 darrenzhu xmlxsdschemanamespace命名空间
    http://www.360doc.com/content/12/0418/10/9437165_204585479.shtml http://blog.csdn.net/wanghuan203/article/details/9203621 http://blog.csdn.net/wanghuan203/article/details/9204337 http://www.cn
  • Java 求素数运算 周凡杨 java算法素数
    网络上对求素数之解数不胜数，我在此总结归纳一下，同时对一些编码，加以改进，效率有成倍热提高。 第一种：   原理: 6N(+-)1法         任何一个自然数，总可以表示成为如下的形式之一： 6N，6N+1，6N+2，6N+3，6N+4，6N+5 (N=0，1，2，…)   
  • java 单例模式 g21121 java
    想必单例模式大家都不会陌生，有如下两种方式来实现单例模式：   class Singleton { private static Singleton instance=new Singleton(); private Singleton(){} static Singleton getInstance() { return instance; }
  • Linux下Mysql源码安装 510888780 mysql
    1.假设已经有mysql-5.6.23-linux-glibc2.5-x86_64.tar.gz (1)创建mysql的安装目录及数据库存放目录       解压缩下载的源码包，目录结构，特殊指定的目录除外：           
  • 32位和64位操作系统 墙头上一根草 32位和64位操作系统
    32位和64位操作系统是指：CPU一次处理数据的能力是32位还是64位。现在市场上的CPU一般都是64位的，但是这些CPU并不是真正意义上的64 位CPU，里面依然保留了大部分32位的技术，只是进行了部分64位的改进。32位和64位的区别还涉及了内存的寻址方面，32位系统的最大寻址空间是2 的32次方= 4294967296（bit）= 4（GB）左右，而64位系统的最大寻址空间的寻址空间则达到了
  • 我的spring学习笔记10-轻量级_Spring框架 aijuans Spring 3
    一、问题提问：     → 请简单介绍一下什么是轻量级？     轻量级（Leightweight）是相对于一些重量级的容器来说的，比如Spring的核心是一个轻量级的容器，Spring的核心包在文件容量上只有不到1M大小，使用Spring核心包所需要的资源也是很少的，您甚至可以在小型设备中使用Spring。  
  • mongodb 环境搭建及简单CURD antlove WebInstallcurdNoSQLmongo
    一 搭建mongodb环境 1. 在mongo官网下载mongodb 2. 在本地创建目录 "D:\Program Files\mongodb-win32-i386-2.6.4\data\db" 3. 运行mongodb服务 [mongod.exe --dbpath "D:\Program Files\mongodb-win32-i386-2.6.4\data\
  • 数据字典和动态视图 百合不是茶 oracle数据字典动态视图系统和对象权限
    数据字典（data dictionary）是 Oracle 数据库的一个重要组成部分，这是一组用于记录数据库信息的只读（read-only）表。随着数据库的启动而启动,数据库关闭时数据字典也关闭   数据字典中包含   数据库中所有方案对象（schema object）的定义(包括表，视图，索引，簇，同义词，序列，过程，函数，包，触发器等等) 数据库为一
  • 多线程编程一般规则 bijian1013 javathread多线程java多线程
           如果两个工两个以上的线程都修改一个对象，那么把执行修改的方法定义为被同步的，如果对象更新影响到只读方法，那么只读方法也要定义成同步的。        不要滥用同步。如果在一个对象内的不同的方法访问的不是同一个数据，就不要将方法设置为synchronized的。
  • 将文件或目录拷贝到另一个Linux系统的命令scp bijian1013 linuxunixscp
    一.功能说明        scp就是security copy，用于将文件或者目录从一个Linux系统拷贝到另一个Linux系统下。scp传输数据用的是SSH协议，保证了数据传输的安全，其格式如下：        scp 远程用户名@IP地址：文件的绝对路径
  • 【持久化框架MyBatis3五】MyBatis3一对多关联查询 bit1129 Mybatis3
    以教员和课程为例介绍一对多关联关系，在这里认为一个教员可以叫多门课程，而一门课程只有1个教员教，这种关系在实际中不太常见，通过教员和课程是多对多的关系。   示例数据：   地址表：   CREATE TABLE ADDRESSES ( ADDR_ID INT(11) NOT NULL AUTO_INCREMENT, STREET VAR
  • cookie状态判断引发的查找问题 bitcarter formcgi
    先说一下我们的业务背景： 1.前台将图片和文本通过form表单提交到后台，图片我们都做了base64的编码，并且前台图片进行了压缩 2.form中action是一个cgi服务 3.后台cgi服务同时供PC，H5，APP 4.后台cgi中调用公共的cookie状态判断方法（公共的，大家都用，几年了没有问题） 问题：（折腾两天。。。。） 1.PC端cgi服务正常调用，cookie判断没
  • 通过Nginx,Tomcat访问日志(access log)记录请求耗时 ronin47
    一、Nginx通过$upstream_response_time $request_time统计请求和后台服务响应时间 nginx.conf使用配置方式： log_format main '$remote_addr - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_r
  • java-67- n个骰子的点数。 把n个骰子扔在地上，所有骰子朝上一面的点数之和为S。输入n，打印出S的所有可能的值出现的概率。 bylijinnan java
    public class ProbabilityOfDice { /** * Q67 n个骰子的点数 * 把n个骰子扔在地上，所有骰子朝上一面的点数之和为S。输入n，打印出S的所有可能的值出现的概率。 * 在以下求解过程中，我们把骰子看作是有序的。 * 例如当n=2时，我们认为（1，2）和（2，1）是两种不同的情况 */ private stati
  • 看别人的博客，觉得心情很好 Cb123456 博客心情
       以为写博客，就是总结，就和日记一样吧，同时也在督促自己。今天看了好长时间博客:    职业规划:    http://www.iteye.com/blogs/subjects/zhiyeguihua      android学习:    1.http://byandby.i
  • [JWFD开源工作流]尝试用原生代码引擎实现循环反馈拓扑分析 comsci 工作流
        我们已经不满足于仅仅跳跃一次，通过对引擎的升级，今天我测试了一下循环反馈模式，大概跑了200圈，引擎报一个溢出错误      在一个流程图的结束节点中嵌入一段方程，每次引擎运行到这个节点的时候，通过实时编译器GM模块，计算这个方程，计算结果与预设值进行比较，符合条件则跳跃到开始节点，继续新一轮拓扑分析，直到遇到
  • JS常用的事件及方法 cwqcwqmax9 js
    事件 描述 onactivate 当对象设置为活动元素时触发。 onafterupdate 当成功更新数据源对象中的关联对象后在数据绑定对象上触发。 onbeforeactivate 对象要被设置为当前元素前立即触发。 onbeforecut 当选中区从文档中删除之前在源对象触发。 onbeforedeactivate 在 activeElement 从当前对象变为父文档其它对象之前立即
  • 正则表达式验证日期格式 dashuaifu 正则表达式IT其它java其它
    正则表达式验证日期格式 function isDate(d){ var v = d.match(/^(\d{4})-(\d{1,2})-(\d{1,2})$/i); if(!v) { this.focus(); return false; } } <input value="2000-8-8" onblu
  • Yii CModel.rules() 方法 、validate预定义完整列表、以及说说验证 dcj3sjt126com yii
    public array rules () {return} array 要调用 validate() 时应用的有效性规则。 返回属性的有效性规则。声明验证规则，应重写此方法。 每个规则是数组具有以下结构：array('attribute list', 'validator name', 'on'=>'scenario name', ...validation
  • UITextAttributeTextColor = deprecated in iOS 7.0 dcj3sjt126com ios
    In this lesson we used the key "UITextAttributeTextColor" to change the color of the UINavigationBar appearance to white. This prompts a warning "first deprecated in iOS 7.0." Ins
  • 判断一个数是质数的几种方法 EmmaZhao Mathpython
    质数也叫素数，是只能被1和它本身整除的正整数，最小的质数是2，目前发现的最大的质数是p=2^57885161-1【注1】。 判断一个数是质数的最简单的方法如下： def isPrime1(n): for i in range(2, n): if n % i == 0: return False return True 但是在上面的方法中有一些冗余的计算，所以
  • SpringSecurity工作原理小解读 坏我一锅粥 SpringSecurity
      SecurityContextPersistenceFilter   ConcurrentSessionFilter   WebAsyncManagerIntegrationFilter   HeaderWriterFilter   CsrfFilter   LogoutFilter   Use
  • JS实现自适应宽度的Tag切换 ini JavaScripthtmlWebcsshtml5
    效果体验：http://hovertree.com/texiao/js/3.htm   该效果使用纯JavaScript代码，实现TAB页切换效果，TAB标签根据内容自适应宽度，点击TAB标签切换内容页。 HTML文件代码： <!DOCTYPE html> <html xmlns="http://www.w3.org/1999/xhtml"
  • Hbase Rest API : 数据查询 kane_xie RESThbase
    hbase（hadoop）是用java编写的，有些语言（例如python）能够对它提供良好的支持，但也有很多语言使用起来并不是那么方便，比如c#只能通过thrift访问。Rest就能很好的解决这个问题。Hbase的org.apache.hadoop.hbase.rest包提供了rest接口，它内嵌了jetty作为servlet容器。   启动命令：./bin/hbase rest s
  • JQuery实现鼠标拖动元素移动位置（源码+注释） 明子健 jqueryjs源码拖动鼠标
    欢迎讨论指正！   print.html代码： <!DOCTYPE html> <html> <head> <meta http-equiv=Content-Type content="text/html;charset=utf-8"> <title>发票打印</title> &l
  • Postgresql 连表更新字段语法 update qifeifei PostgreSQL
    下面这段sql本来目的是想更新条件下的数据，可是这段sql却更新了整个表的数据。sql如下： UPDATE tops_visa.visa_order SET op_audit_abort_pass_date = now() FROM tops_visa.visa_order as t1 INNER JOIN tops_visa.visa_visitor as t2 ON t1.
  • 将redis,memcache结合使用的方案? tcrct rediscache
    公司架构上使用了阿里云的服务，由于阿里的kvstore收费相当高，打算自建，自建后就需要自己维护，所以就有了一个想法，针对kvstore(redis)及ocs(memcache)的特点，想自己开发一个cache层，将需要用到list，set，map等redis方法的继续使用redis来完成，将整条记录放在memcache下，即findbyid，save等时就memcache，其它就对应使用redi
  • 开发中遇到的诡异的bug wudixiaotie bug
    今天我们服务器组遇到个问题： 我们的服务是从Kafka里面取出数据，然后把offset存储到ssdb中，每个topic和partition都对应ssdb中不同的key，服务启动之后，每次kafka数据更新我们这边收到消息，然后存储之后就发现ssdb的值偶尔是-2,这就奇怪了，最开始我们是在代码中打印存储的日志，发现没什么问题，后来去查看ssdb的日志，才发现里面每次set的时候都会对同一个key
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他