Hadoop云计算

Springboot快速教程---Docker搭建与整合Hbase

Hbase简介HBase是Hadoop的生态系统，是建立在Hadoop文件系统（HDFS）之上的分布式、面向列的数据库，通过利用Hadoop的文件系统提供容错能力。
爆米花机枪手·2024-01-31 07:53

docker搭建hbase环境

hbase是hadoop生态中的一员，最早搭建hbase，需要先安装hadoop，然后安装zookeeper，再安装hbase。
luffy5459·2024-01-31 07:52

大数据环境搭建(一)-Hadoop

1.服务器环境准备Linux镜像:centos7.9JDK:jdk1.8.0_212Hadoop:apache-hadoop-3.3.4创建虚拟Linux服务器配置虚拟机，每台主机名与ip如下主机名ipbd-centos01192.168.159.101bd-centos02192.168.159.102bd-centos03192.168.159.103
xfchn多多学习学习·2024-01-31 07:20

云计算HCIE学习和考试过程经验分享

热烈祝贺方同学通过华为云计算HCIEv3.0认证近日，在云校李云涛老师的教学指导下，方同学一次通过华为云计算HCIE-CloudComputingv3.0实验考试，成为云校第一个获得华为云计算HCIEv3.0
智汇云校乐乐老师·2024-01-31 07:32

HCIE该考哪个方向？

其中HCIE证书是华为认证的高级证书，HCIE的知名度很高，有很多人想考取HCIE来提升个人就业竞争力，HCIE有很多方向，其中比较常见的有Datacom认证、安全、云计算、存储、大数据、物联网、人工智能
智汇云校乐乐老师·2024-01-31 07:02

云计算HCIE备考经验分享

大家好，我是来自深圳信息职业技术学院22级鲲鹏3-1班的刘同学，在2023年9月19日成功通过了华为云计算HCIE认证，并且取得了A的成绩。下面把我的考证经验分享给大家。
智汇云校乐乐老师·2024-01-31 07:55

阿里云——学生成长计划领取资格考试

阿里云——学生成长计划领取资格考试1.在数据库中，空值是指（C）未知的值2.云计算的优势是（超大规模、按需服务）3.XaaS是（）的缩写Anythingasaservice4.以下常见的通讯协议中，不属于应用层协议的是
水母哟 (￣^￣)ゞ·2024-01-31 07:39

大数据存储与管理

大数据存储与管理本节主要讲述大数据存储与管理技术的概念和原理，包括Hadoop分布式文件系统(HDFS)和分布式数据库（Hbase）;体系结构：一、分布式文件系统HDFS1.HDFS体系结构2.HDFS
Kris林·2024-01-31 07:25

大数据-Hadoop概论

1、大数据概念2、大数据特点1、Volume(大量)2、Velocity(高速)3、Variety(多样)4、Value(低价值密度)3、大数据应用场景4、大数据部门业务流程分析5、大数据部门组织机构Hadoop1
Mr.史·2024-01-31 06:21

大数据----4.hadoop分布式框架搭建

hadoop分布式框架搭建一、Hadoop的三种运行模式（启动模式）1.1、单机模式（独立模式）（Local或StandaloneMode）-默认情况下，Hadoop即处于该模式，用于开发和调式。
学无止境的大象·2024-01-31 06:49

大数据----12.MapReduce计算框架

1.2Hadoop的MapReduce的并行编程模型如下图2所示，Hadoop的MapReduce先将数据划分为多个key/value键值对。然后输
学无止境的大象·2024-01-31 06:49

二百二十一、HiveSQL报错：return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

一、目的在运行HiveSQL时，执行报错tatement:FAILED:ExecutionError,returncode2fromorg.apache.hadoop.hive.ql.exec.mr.MapRedTask
天地风雷水火山泽·2024-01-31 06:48

Python+大数据-hadoop(四)-Hadoop MapReduce、YARN、HA

Python+大数据-hadoop(四)-HadoopMapReduce、YARN、HA今日课程学习目标理解分布式计算分而治之的思想学会提交MapReduce程序掌握MapReduce执行流程掌握YARN
呆猛的呆呆小哥·2024-01-31 06:16

linux云计算主要就业岗位有哪些

云计算产业已覆盖政府、金融、交通、企业、教育、医疗、信息消费等各应用领域，并且与通信、物联网、互联网产业相融合，人才需求加剧。
QFdongdong·2024-01-31 06:05

大数据技术Hadoop之分布式计算框架MapReduce

Hadoop作为一种分布式计算框架，被广泛应用于大数据处理领域。其中，MapReduce是Hadoop中最重要的组件之一。
大马猴写bug·2024-01-31 06:11

云计算对未来社会的意义

摘要：云计算对当今社会产生了深刻的影响，对未来社会有重要意义，分析其意义能够更好地指导云计算的发展。云计算的本质是使计算资源分配得更加高效、合理，在大数据时代和人工智能时代显得更加重要。
Channing Lewis·2024-01-31 06:11

Hadoop系列之-4、MapReduce分布式计算

大数据系列文章目录目录MapReduce计算模型介绍理解MapReduce思想HadoopMapReduce设计构思MapReduce编程规范及示例编写编程规范编程步骤WordCount示例编写MapReduce
技术武器库·2024-01-31 06:10

Hadoop大数据原理(3) - 分布式计算框架MapReduce

MapReduce计算框架3.1三类关键进程大数据应用进程JobTracker进程TaskTracker进程3.2作业启动和运行机制3.3数据合并与连接机制shuffle的过程1.大数据的通用计算  Hadoop
小爱玄策·2024-01-31 06:09

【大数据】Hadoop_MapReduce➕实操（附详细代码）

目录前言一、概述1.MapReduce定义、优缺点2.MapReduce核心思想、进程3.MapReduce编程——WordCount二、Hadoop序列化1.序列化概述2.自定义bean对象实现序列化接口
欧叶冲冲冲·2024-01-31 06:37

大数据 - Hadoop系列《四》- MapReduce（分布式计算引擎）的核心思想

上一篇：大数据-Hadoop系列《三》-MapReduce（分布式计算引擎）概述-CSDN博客目录13.1MapReduce实例进程13.2阶段组成13.4概述13.4.1Map阶段（映射）13.4.2Reduce
王哪跑nn·2024-01-31 06:02

大数据开发：hadoop系统搭建以及spark编程

csdn这个坑先留着…传送门：https://github.com/louxinyao/Hadoop-spark
墨染枫·2024-01-31 06:47

云原生：改变产品、架构与商业模式的未来引领者

随着云计算的快速发展，云原生作为一种创新的软件开发和部署范式，逐渐成为了技术界的热门话题。云原生不仅仅是一种技术，更是一种思想的转变，通过充分利用云计算平台的特性，将应用程序打包成
快乐非自愿·2024-01-31 06:31

大数据存储与处理技术之Spark

，可用于构建大型的、低延迟的数据分析应用程序•2013年Spark加入Apache孵化器项目后发展迅猛，如今已成为Apache软件基金会最重要的分布式计算系统开源项目之一•Spark在2014年打破了Hadoop
小嘤嘤怪学·2024-01-31 05:28

HDFS RBF 联邦企业级生产实战

RBF(Router-BasedFederation)isanewfeatureofHDFSofApacheHadoop.ByenablingtheRBF,itcanhandlemultipleHadoopclustertransparentlyasoneoftheHadoop
跟着大数据和AI去旅行·2024-01-31 05:01

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2024-01-31 05:41

什么叫超融合基础架构？

云计算三大类别：私有云、公有云、混合云；三个层次：IAAS、PAAS、SAAS；超融合属于私有云中的IAAS服务层。一般在企业初次上云，除了会选择简便、高性价比私有云方案，更热门的就是超融合了。
greatrooster·2024-01-31 04:17

智能家居不再遥远，它已在我们的身边

众所周知，近几年来，无线通信、人工智能、云计算等技术的引入，大大加速了住宅智能化的进程，同时，随着物联网技术的飞速发展，全屋无线智能家居的概念应时而生，并且逐渐成为最具市场前景的新兴产业。
stinaw·2024-01-31 03:25

Termius 管理服务器使用入门

前言在现代云计算和网络技术的背景下，服务器管理成为了许多开发者和系统管理员必备的技能。Termius是一款功能强大的终端管理工具，可以帮助用户轻松管理远程服务器。
叽里咕噜qiu·2024-01-31 02:43

docker compose搭建elasticsearch7集群

一、集群介绍系统环境：Centos7.5服务器节点：主机名IPhadoop03192.168.1.153hadoop04192.168.1.154hadoop05192.168.1.155二、环境准备1
码道功成·2024-01-31 02:28

【Oracle云】使用 boto3 访问 OCI 对象存储 (AWS S3协议兼容)

在现代云计算环境中，S3（SimpleStorageService）协议已经成为云对象存储的事实标准。它提供了简单、可扩展、高度耐用的存储解决方案，得到了广泛应用。
炸鸡物料库·2024-01-31 01:26

OCI Python SDK 认证 代码示例

OCI（OracleCloudInfrastructure）是由Oracle提供的云计算服务平台，旨在为企业和个人提供可扩展、安全、高性能的云解决方案。
炸鸡物料库·2024-01-31 01:55

启动bin/spark-shell警告：WARN NativeCodeLoader: Unable to load native-hadoop library for your platform.

启动bin/spark-shell警告：WARNNativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicable
2301_79479951·2024-01-31 00:18

基于PHP的网盘云盘管理系统

基于PHP的网盘云盘管理系统目录前言系统架构开发技术需求分析数据库设计系统实现效果图总结计算机毕业设计案例前言随着云计算和大数据技术的不断发展，云存储服务已逐渐成为人们日常生活和工作中不可或缺的一部分。
计算机毕业设计之家·2024-01-30 21:41

java操作Hadoop

HDFSFileIfExist的项目添加JAR包对着项目右键，增加一个额外的library根据以下的图片添加一些jarlib下的所有jar文件操作代码创建一个类将HDFS下面那个文件打开，然后复制到类中上传test到hadoop
kkoneone11·2024-01-30 21:00

ubantu操作hbase

到firefox中按照网站找以下文件进行下载新建一个窗口启动节点下载完成则回到下载目录如果下载慢也可以将文件放在share中，然后拷贝到当前目录进入到root然后回到hadoop解压到/usr/local
kkoneone11·2024-01-30 21:28

ISC2015听会小计

今天，冒雨去国家会议中心听取ISC2015大会，期间有些许收获，记录、分享：1.个人感觉云计算安全与传统网络安全，在防御方面最大的不同是：传统网络防御可以把待防御对象看成信息孤岛，因此，边界性很强;然后开一个门
sdulibh·2024-01-30 20:30

Spring cloud智慧工地信息平台管理系统源码

整改超时预警检查问题数量统计安全隐患趋势安全日志管理视频监控查看视频回放AI危险源识别AI应用总览AI设备机械设备司机识别：塔机监测：吊钩可视化：升降机运行监测：智慧工地解决方案依托计算机技术、物联网、云计算
源码技术栈·2024-01-30 19:00

华为openEuler在服务器自动化部署中的应用案例

案例背景：随着云计算和大数据技术的不断发展，服务器部署的效率和稳定性成为企业关注的焦点。
GT开发算法工程师·2024-01-30 18:56

数据中心代理IP：最优性价比业务应用指南

 高速数据传输业务在云计算、大数据分析等业务中，数据传输速度是关键。数据中心代理IP凭借其优越的网络速度和低延迟
做跨境的红姐·2024-01-30 18:16

云计算运维 · 第三阶段 · shell编程2

学习b记·第三阶段一、shell编程1、数值运算1)expr2)$(())3)$[]#前面这三个直接echo测试就可4)let#这个可以直接运算变量5)bc#支持小数#输入两个随机数进行运算#!/bin/bashecho$1+$2'='`echo$1+$2|bc`echo$1-$2'='`echo$1-$2|bc`echo$1*$2'='`echo$1*$2|bc`echo$1/$2'='`ech
Dragon_qu·x·2024-01-30 18:38

云计算运维 · 第三阶段 · gitlib

学习b记·第三阶段三、持续集成1、gitlibGitLab是一个用于仓库管理系统的开源项目。使用Git作为代码管理工具，并在此基础上搭建起来的web服务。可通过Web界面进行访问公开的或者私人项目。它拥有与Github类似的功能，能够浏览源代码，管理缺陷和注释。可以管理团队对仓库的访问，它非常易于浏览提交过的版本并提供一个文件历史库。团队成员可以利用内置的简单聊天程序(Wall)进行交流。它还提供
Dragon_qu·x·2024-01-30 18:38

云计算运维 · 第二阶段 · Ansible_playbook · 变量

学习b记·第二阶段十五、Ansible_playbook1、什么是PlayBookplay:定义的是主机的角色。task:定义的是具体执行的任务。playbook:由一个或多个play（角色）组成，一个play（角色）可以包含多个task。简单理解为:使用不同的模块完成一件事情2、PlayBook与ad-hoc1）PlayBook功能比ad-hoc更全，是对ad-hoc的一种编排.2）PlayBo
Dragon_qu·x·2024-01-30 18:08

云计算运维 · 第二阶段 · Ansible流程控制

学习b记·第二阶段十六、Ansible流程控制1、playbook条件语句不管是shell还是各大编程语言中，流程控制，条件判断这些都是必不可少的，在我们使用Ansible的过程中，条件判断的使用频率极其高。例如：1）我们使用不同的系统的时候，可以通过判断系统来对软件包进行安装。2）在nfs和rsync安装过程中，客户端服务器不需要推送配置文件，之前我们都是写多个play，会影响效率。3）我们在源
Dragon_qu·x·2024-01-30 18:08

云计算运维 · 第三阶段 · shell编程

学习b记·第二阶段一、shell编程1、什么是shellshell是一种命令语言，是为使用者提供操作界面的一种软件，软件可以接收用户的命令，并且执行用户输入的命令，然后对相应的程序进行调用。2、shell可以分为两种方式1）shell命令行式例如一些系统linux，从传统的意义上来说，如果不去注明的话，shell一般是命令行式。shell是传统操作和外部的接口，shell是操作系统的最外层，并且管
Dragon_qu·x·2024-01-30 18:08

云计算运维 · 第二阶段 · Ansible

学习b记·第二阶段十三、Ansible1、什么是Ansible？Ansible是一个自动化统一配置管理工具，自动化主要体现在Ansible集成了丰富模块以及功能组件，可以通过一个命令完成一系列的操作，进而能减少重复性的工作和维护成本，可以提高工作效率。2、Ansible的架构1）连接插件connectionplugins用于连接主机用来连接被管理端2）核心模块coremodules连接主机实现操作
Dragon_qu·x·2024-01-30 18:07

云计算运维 · 第三阶段 · git

学习b记·第三阶段三、持续集成1、git#安装yum-yinstallgit[root@git-git~]#gitconfig–-globaluser.name"qxl"#配置git使用用户[root@git-git~]#gitconfig–-globaluser.email"[email protected]"#配置git使用邮箱[root@git-git~]#gitconfig–-globalcolor
Dragon_qu·x·2024-01-30 18:36

Redis三种特殊数据类型-Bitmap

云计算的长征之路：阿里云的这群
小阿鑫丫·2024-01-30 17:06

记录hadoop一次奇怪的问题操作

今天早上，我启动Hadoop，然后访问9870端口，显示的却是这样的image.png刚开始，我以为我哪里配置有问题，于是查看日志，例如出现这种错误，image.png我也尝试过去解决，这里并不是Linux
万事万物·2024-01-30 16:16

如何接手一个大数据项目

以下是个人的一些思考总结：了解一个大数据系统，我认为需要从以下几个方面入手：宏观方面：1.了解系统的整体架构和技术栈：需要了解系统中使用的技术栈，包括各种大数据组件和工具，例如Hadoop、Spark、
Mmj666·2024-01-30 15:19

Spark的核心RDD（Resilient Distributed Datasets弹性分布式数据集）

Spark的核心RDD（ResilientDistributedDatasets弹性分布式数据集）铺垫在hadoop中一个独立的计算，例如在一个迭代过程中，除可复制的文件系统（HDFS）外没有提供其他存储的概念
fcyh·2024-01-30 15:46
上一页 20 21 22 23 24 25 26 27 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他