CDH集群安装

SSL/TLS学习-ECDHE

1、RSA算法缺陷  上篇总结了TLS使用RSA握手，但是RSA秘钥协商算法的最大问题是不支持向前保密。因为客户端传递随机数（用于生成对称加密密钥的条件之一）给服务端时使用的是公钥加密的，服务端收到后，会使用私钥解密得到随机数。所以一旦服务端的私钥泄露了，过去被第三方截获的所有TLS通讯密文都会被破解。  为了解决这一问题，于是就有了DH秘钥协商算法。2、DH算法DH算法的核心数学思想是离散对数是
晨曦艾米·2022-11-30 14:22

学院集群安装pytorch环境

1、安装anaconda学院集群在/opt/app中已经预装了一些应用(base)[jessy@workstation~]$cd/opt/app(base)[jessy@workstationapp]$lsanaconda3compilerscudamodulefilesnvidiaspack(base)[jessy@workstationapp]$系统内已经安装了Anaconda应用在安装无需向
qq_43718758·2022-11-30 08:46

数仓架构流程二

第二章数仓分层与规范定义文章目录第二章数仓分层与规范定义数仓分层与规范定义一、数仓分层二、设计规范1公共规范1.1数据划分及命名空间约定1.2公共字段定义规范2设计规范ods层dim层dwd层dws层数仓分层与规范定义一、数仓分层现在数仓的技术选型主要有两种：一种是自建的CDH
环球小猪·2022-11-29 19:42

轻松完成Hadoop集群数据迁移

01PART前言在工作当中经常会遇到集群的升级，或者部署新集群，数据迁移的问题，那么本文就演示ApacheHadoop集群和CDHHadoop集群之间数据互相迁移。
weixin_49067219·2022-11-29 17:01

java导出hive数据_Hive中数据的加载和导出

apache的hive版本现在应该是0.13.0，而我使用的hadoop版本是CDH5.0.1，其对应的hive版本是0.12.0
美业云营销·2022-11-29 16:28

CDH6 配置LDAP，Kerberos，Sentry

CDH6配置LDAP，Kerberos，Sentry1.开启Sentry控制Hive，Hue，Impala权限仅用作个人笔记，还没有二次验证1.1在mysql中配置数据库[root@cdh1~]#mysql-uroot-p
途足·2022-11-29 16:57

hbase 查询固定条数_HBase统计表行数(RowCount)的四种方法

下面来研究下吧~测试集群：HBase1.2.0-CDH5.13.0四台服务器注：以下4种方法效率依次提高一、hbase-shell的count命令这是最简单直接的操作，但是执行效率非常
weixin_39603908·2022-11-29 16:56

hive不在同一台机 hue_【Impala篇】---Hue从初始到安装应用

基于Hive使用内存计算，兼顾数据仓库、具有实时、批处理、多并发等优点是CDH平台首选的PB级大数据实时查询分析引擎.一般公司选择使用CDH部署集群，可以考虑下Impala。
weixin_39557087·2022-11-29 16:26

cdh集成ldap

主要参考的服务的网址：经过测试，如果根据腾讯云中的这个文档中的指示，把hiveadmin当成是hive的超级用户的话，会出现sentry赋权有问题的情况（那个hue中的加号（添加role）出不来），所以后面出现hiveadmin用户的情况，这里后面都需要变成hive，就可以了03-ActiveDirectory的使用与验证：https://mp.weixin.qq.com/s?__biz=MzI4
夜空07·2022-11-29 16:55

hive+impala+hue+sentry+ldap整合

公司用的cdh版本为5.14，sentry集成的步骤很简单，参照官方文档就可以完成了：https://www.cloudera.com/documentation/enterprise/5-14-x/topics
weixin_33889245·2022-11-29 16:25

count hbase java_HBase统计表行数(RowCount)的四种方法_Abysscarry的博客-CSDN博客

下面来研究下吧~测试集群：HBase1.2.0-CDH5.13.0四台服务器注：以下4种方法效率依次提高一、hbase-shell的count命令这是最简单直接的操作，但是执行效率非常
华铁卢·2022-11-29 16:54

impala hive启用LDAP hue (cdh6.3)

1配置impala:注意：上述互斥项，如果使用ldap的uid，直接配置上面一个。如果使用ldap的cn，则配置下一项：cn=#UID,ou=People,dc=...,dc=com2配置HIVEHIVE默认使用LDAPuid认证，如果LDAP配置的使用cn,可以通过配置下述参数参数：hive.server2.authentication.ldap.userDNPattern值：cn=%s,ou=
peidezhi·2022-11-29 16:14

Impala和Hive集成Sentry

本文主要记录CDH5.2Hadoop集群中配置Impala和Hive集成Sentry的过程，包括Sentry的安装、配置以及和Impala、Hive集成后的测试。
Junjie_M·2022-11-29 16:04

CDH大数据平台 23Cloudera Manager Console之azkaban与freeIPA、Kerberos等组合配置(markdown新版四)

个人主页：@与自己作战作者简介：CSDN@博客专家、CSDN@大数据领域优质创作者、CSDN@内容合伙人、阿里云@专家博主希望大佬们多多支持，携手共进如果文章对你有帮助的话，欢迎评论点赞收藏加关注⛔如需要支持请私信我，必支持文章目录一、创建相关目录1、创建azkaban-web-server相关目录2、创建azkaban-exec-server相关目录二、下载并编译ldap相关jar包1、下载并修
与自己作战·2022-11-29 14:15

将激光雷达数据包.bag转换为pcd文件

rosrunpcl_rosbag_to_pcd其中name.bag为所录制bag包的名称，topic为自己的话题，最后的pcd为会在当前位置生成一个名为pcd的文件夹来存放转换后的pcd文件例如：rosrunpcl_rosbag_to_pcdhall.bagvelodyne_pointspcd
代码好烦啊·2022-11-28 20:13

PC协议/微信协议/ipad协议823最新版

当然分析得并不全，目前只支持1-RTT-ECDH握手。什么是协议？协议就是规则，是数据传输的
q2919761440·2022-11-28 16:37

idea 中 Maven下载cdh依赖失败等问题

com.spring4allspring-boot-starter-hbase1.0.0.RELEASE但是报了一堆错Cannotresolveorg.apache.hbase:hbase-annotations:1.0.0-cdh5.4.4Cannotresolveorg.apache
不减一百斤不改名·2022-11-28 13:15

RabbitMQ集群安装rabbitmq_delayed_message_exchange插件问题

前言我们的RabbitMQ需要安装rabbitmq_delayed_message_exchange插件。环境版本信息是：Erlang：22.0，RabbitMQ：3.7.16CentOS：7集群配置是双节点的镜像模式如果还没有安装Erlang、RabbitMQ，可以看这篇https://blog.csdn.net/xcy1193068639/article/details/95484649如果还
阿云_·2022-11-28 13:12

大数据技术架构演化

构建初期，一般会通过CDH或HDP的产品套
IT转型指北·2022-11-27 21:10

这么高颜值的Kubernetes管理工具Lens，难道还不能C位出道吗

2特性与安装2.1特性Lens的优势主要有：很强的可用性和优秀的用户体验；多集群管理，可支持几百个集群；独立应用，无须在集群安装任何东西；可实时查看集群状态；可直达Pods和Containers的终端工
程序一逸·2022-11-27 12:30

TDengine集群安装

安装包下载：1、下载TDengine-server-2.0.20.12-Linux-x64.tar.gz下载地址：https://www.taosdata.com/cn/all-downloads/二、集群安装
左边520·2022-11-26 16:26

Linux查看文件或文件夹大小: du命令

语法：du[-abcDhHklmsSx][-L][-X][--block-size][--exclude=][--max-depth=][--help][--version][目录或文件]常用参数说明：
那年聪聪·2022-11-25 16:42

77.Oozie的HA启用

77.1演示环境介绍RedHat版本：7.3CM和CDH版本：5.13.1已启用Kerberos77.2操作演示在集群中选择一台服务器作为OozieServer高可用节点安装Mysql驱动[root@ip
大勇若怯任卷舒·2022-11-23 08:31

Linux集群安装tensorflow-gpu经验总结

背景：新人小白，集群系统CentOS，获得账号的时候环境里面已经配好了torch的gpu版本(1.9.0+cu102)，且运行作业能够调用gpu，并且提供的说明书中说已经装好了python3.8，cuda11。想使用tensorflow2.4.1版本，但tensorflow-gpu的调用一直失败（tf.__version__:2.4.1，tf.test.is_gpu_available：False
xaaaab·2022-11-23 07:08

【Kubernetes快速实战】

K8S官网文档：https://kubernetes.io/zh/docs/home/文章目录前言一、K8S核心特性二、K8S集群安装1.安装K8S集群1、关闭防火墙2、关闭selinux3、关闭swap4
我是廖志伟·2022-11-22 09:31

L1正则化(weight_decay)

关于weight_decay的介绍:参考资料:https://towardsdatascience.com/weight-decay-l2-regularization-90a9e17713cdhttps
lyyiangang·2022-11-22 08:08

17届智能车基础四轮---扫线

直到扫到当前行的边界，如果没扫到就判为丢线，当上一行中线上的那个点超出左或右边界时，停止扫描，直接用上一行的边界去加上一个值(代码通俗易懂)voidImageGetSide(uint8imageInput[LCDH
shiuwon·2022-11-22 01:43

单细胞数据分群的几种方法

这个图是通过Seurat标准流程降维后得到的muscle组织分群图然后查阅文章得到muscle组织不同细胞的markergenegenes_VEC=c("Fabp4","Cdh5","Cav1")#vascularendothelialcellsgenes_FC
微光**·2022-11-21 15:00

Pentaho Kettle 连接 CDH Hive (No suitable driver found for jdbc:hive2 错误解决方法)

关键点:清理Kettle缓存:rm-rf /home/user/data-integration/./system/karaf/cachesrm-rf /home/user/data-integration/./system/karaf/datakaraf是Kettle用于实现插件的一个组件,比如一些大数据有关的shim都算做kettle的插件配置Kettlebigdatasetting:在Ket
yimenglin·2022-11-21 12:31

Linux 根目录/ home目录与~目录的区别

其他用户进入root进入home目录(叫用户列表目录更形象)cdhome会显示这台机器的所有用户，任何用户进入都会显示~目录~目录就是进入home目录下当前用户的目录，可以称为用户家目录root用户没有相应的
wsp+·2022-11-21 00:16

HIVE集群安装

1.初始准备：准备3台虚拟机，其IP分别为：192.168.5.130s201192.168.5.131s202我在这个服务器上安装的mysql192.168.5.132s203需要安装好JDK，环境生效即可需要配置好Hadoop并启动需要安装并配置好Mysql2.安装Hive在Apache的官方镜像中我们可以下载Hive的各个版本：https://mirrors.tuna.tsinghua.ed
醉卧千山下，诗酒趁年华。·2022-11-20 21:17

大数据学习目录

推荐1、gitbook这里可以找到优秀的文章及书籍2、about云大数据论坛，网站上很多大数据资料hadoop博文：1、Hadoop2.x集群安装配置笔记初学搭建hadoop2、搭建hadoop2.6.0HDFSHA
硅谷工具人·2022-11-20 19:27

大数据、云计算系统高级架构师课程学习路线图

xHDFSYARNMapReduceETL数据清洗HiveSqoopFlume/Oozieo大数据WEB工具HueHBaseStormStormScalaSparkSpark核心源码剖析CM5.3.x管理CDH5.3
tao_wei162·2022-11-20 13:55

spark-streaming pull方式拉取 flume-1.6.0-cdh5.10.1数据

注意：文章末尾提供apache-flume-1.6.0-cdh5.10.1-bin网盘资源连接1、flume配置文件flume-conf-spark-netcat-pull.propertiesa1.sources
sunnyboy_4·2022-11-20 09:45

BEVfusion环境配置笔记

Multi-TaskMulti-SensorFusionwithUnifiedBird’s-EyeViewRepresentation论文代码：bevfusion下载项目原文推荐用nvidiadocker，其实可以不用，直接：cdhome
努力发文章·2022-11-19 17:39

“红亚杯”-大数据环境搭建与数据采集技能线上专题赛赛题

系列文章目录集群安装搭建赛题解析构建数据仓库赛题解析目录“红亚杯”-大数据环境搭建与数据采集技能线上专题赛赛题前言在此鸣谢资料链接一、集群安装搭建（70/70分）1.比赛框架2.比赛内容3.版本说明core-site.xml
慕铭yikm·2022-11-19 04:52

数仓采集项目【04数仓采集模块之zookeeper，kafka，flume安装及kafka source sink channel的几个小案例】

文章目录1Zookeeper安装（1）集群规划（2）安装流程（3）修改配置文件（4）zookeeper群起/关脚本2kafka集群安装（1）集群规划（2）安装流程（3）kafka群起/关脚本（4）kafka
OneTenTwo76·2022-11-16 07:01

Hbase:实验一-在Hadoop集群上配置Hbase

1实验目的理解HBase的基本概念；掌握ZooKeeper集群安装步骤；掌握HBase各种安装配置的步骤。
写报告的小菜鸟·2022-11-13 09:27

（2022版）一套教程搞定k8s安装到实战 | 汇总

1.（2022版）一套教程搞定k8s安装到实战|Kubernetes学习路线_COCOgsta的博客-CSDN博客2.（2022版）一套教程搞定k8s安装到实战|K8s集群安装（Kubeadm）_COCOgst
COCOgsta·2022-11-10 10:55

人群圈选效率提升 30 倍，云积互动基于 Apache Doris 构建统一数仓的实践

导读：随着业务量快速增长，云积互动对数据的实时性及灵活性提出更高要求，早期基于CDH的大数据平台已无法满足当前难度以及复杂度较高的的业务需求，因此云积互动于2021引进ApacheDoris在部分业务中使用
SelectDB技术团队·2022-11-10 10:51

React+TS学习和使用

一、项目创建与准备1、创建项目创建名为hook-ts的项目：npxcreate-react-apphook-ts--templatetypescriptcdhook-ts#通过vscode打开code.
杨小凹·2022-11-09 03:47

基于k8s部署的es7集群安装插件

一、前言  基于上篇文章【Kubernetes1.23搭建Elasticsearch7集群】写一下如何给k8s上的es集群安装插件，就以安装ik分词器为例给大家演示实际操作。
cs阿坤dn·2022-11-07 10:01

台湾地区信用卡客户贷款违约预测

数据集地址：链接：https://pan.baidu.com/s/1vQgkQs1aTC-zm6zcDH4kKQ提取码：6ois1数据说明与导入导入必需的库和数据。
Day-3·2022-11-03 15:18

大数据常用开源框架

目录系统平台（Hadoop、CDH、HDP）监控管理（CM、Hue、Ambari、Dr.Elephant、Ganglia、Zabbix、Eagle）文件系统（HDFS、GPFS、Ceph、G
lucasmaluping·2022-11-02 13:10

Hadoop集群搭建（一）----伪分布式集群与eclipse的安装

Haoop集群搭建【一】--伪分布式集群与eclipse的安装Ⅰ前言Ⅱ搭建虚拟机准备（附带下载链接）一.VMware二.终端模拟器及文件传输软件三.虚拟机镜像四.相关组件Ⅲ.集群安装与配置教程一，创建虚拟机二
俗人的浅吟^ω^·2022-11-02 11:02

高创伺服驱动器CDHD2和sick伺服编码器hiperface通讯时的故障解决

二、配置：1、驱动器：高创ethercat型驱动器CDHD2-0062A-EC22、电机：科尔摩根直驱电机KBM系列3、编码器：sick伺服编码器SES90（正弦信
机构师·2022-11-01 17:04

hadoop2.8配置_Hadoop 2.8集群安装及配置记录

第一部分：环境配置(含操作系统、防火墙、SSH、JAVA安装等)Hadoop2.8集群安装模拟环境为：主机：Hostname:Hadoop-host,IP:10.10.11.225节点1：Hostname
超人越山峰·2022-10-31 15:31

Hadoop集群安装和配置(完全分布式集群搭建）

1虚拟机的环境准备1.1下载的软件1、安装Vmware-workstation主要步骤就不讲述，网上可以收到相关Linux虚拟机的相关密钥和安装步骤。2、VM网络设置打开电脑里面的控制面板——>网络和Internet——>网络和共享中心——>更改适配器设置——>VMnet8(右击鼠标，点击属性)—>IPv4(配置IP地址和DNS地址).我的电脑配置如下：3、查看虚拟机的ip地址打开VmwareWo
希光之旅·2022-10-31 15:30

人群圈选效率提升 30 倍，云积互动基于 Apache Doris 构建统一数仓的实践

导读：随着业务量快速增长，云积互动对数据的实时性及灵活性提出更高要求，早期基于CDH的大数据平台已无法满足当前难度以及复杂度较高的的业务需求，因此云积互动于2021引进ApacheDoris在部分业务中使用
·2022-10-30 23:21

CDH大数据平台 22Cloudera Manager Console之azkaban与freeIPA、Kerberos等组合配置(markdown新版三)

个人主页：@与自己作战作者简介：CSDN@博客专家、CSDN@大数据领域优质创作者、CSDN@内容合伙人、阿里云@专家博主希望大佬们多多支持，携手共进如果文章对你有帮助的话，欢迎评论点赞收藏加关注⛔如需要支持请私信我，必支持文章目录一、Azkaban安装配置1、复制azkaban相关安装包到指定目录2、解压azkaban相关安装包3、azkaban做软连接4、删除压缩包并确认azkaban是否正常
与自己作战·2022-10-30 19:49
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他