hadoop那点事

Hadoop1.0和2.0的主要区别

Hadoop1.0指的是版本为ApacheHadoop0.20.x、1.x或者CDH3系列的Hadoop，组件主要由HDFS和MapReduce两个系统组成，HDFS是一个分布式文件存储系统，MapReduce
web_15534274656·2025-02-06 03:43

Hadoop1.0-HDFS介绍

Hadoop是Apache软件基金会所开发的并行计算框架与分布式文件系统。最核心的模块包括HadoopCommon、HDFS与MapReduce。
szjianzr·2025-02-06 03:13

SQL on Hadoop

SQL_on_HadoopSQLonHadoop概述Hadoop提供了一种分布式存储和计算的平台，为了解决传统关系型数据库无法处理海量数据的问题，通过扩展SQL的方式在Hadoop上执行分布式查询，称之为
Lostgreen·2025-02-06 03:42

计算机网络一点事（23）

传输层端口作用：标识主机特定进程，TCP，UDP协议端口号分类：服务器：0-1023，熟知1024-49151登记客户端：49152-65535功能：实现端到端，进程到进程的通信，实现复用（多进程使用同一个协议）分用（正确交付）差错检测：TCP丢弃通知重传，UDP丢弃不通知提供TCP，UDP服务（前者面向连接，可靠，确保完整正确但开销大实时性差，后者相反）IP地址＋端口号对应主机上一个特定进程UD
一只鱼玉玉·2025-02-06 01:55

物联网架构之Hadoop

hadoop体系结构Hadoop是一个开源的分布式计算平台，主要用于存储和处理大规模数据集。
moluxiangfenglo·2025-02-06 01:54

IT从业人员面试经典必问的70问答

回答提示：一般人回答这个问题过于平常，只说姓名、年龄、爱好、工作经验，这些在简历上都有，其实，企业最希望知道的是求职者能否胜任工作，包括：最强的技能、最深入研究的知识领域、个性中最积极的部分、做过的最成功的事，
小小小妮子~·2025-02-05 21:29

kafka的高可用情况下,挂掉一个节点,为什么消费者消费不到数据了

brokerkafka集群kafka01kafka02kafka032.创建topictest(分区3副本3)kafka-topics.sh--create--topic'test'--zookeeper'hadoop01
黄土高坡上的独孤前辈·2025-02-05 21:55

云计算：从基础架构原理到最佳实践之：云计算大数据分析与处理

禅与计算机程序设计艺术文章目录1.简介2.云计算概述2.1云计算简介2.2云计算特点3.大数据的定义与特点3.1大数据定义3.2大数据特点4.大数据分类、存储和处理技术4.1大数据分类4.2大数据存储和处理技术5.Hadoop-Cloud
AI天才研究院·2025-02-05 20:18

车载软件架构 --- SOA设计与应用（中）

老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：屏蔽力是信息过载时代一个人的特殊竞争力，任何消耗你的人和事，多看一眼都是你的不对。
车载诊断技术·2025-02-05 19:12

大数据相关开源项目汇总

调度与管理服务Azkaban是一款基于Java编写的任务调度系统任务调度，来自LinkedIn公司，用于管理他们的Hadoop批处理工作流。
万里浮云·2025-02-05 17:03

60款顶级大数据开源工具

一、Hadoop相关工具1.HadoopApache的Hadoop项目已几乎与大数据划上了等号。它不断壮大起来，已成为一个完整的生态系统，众多开源工具面向高度扩展的分布式计算。
La victoria·2025-02-05 17:33

盘点大数据生态圈，那些繁花似锦的开源项目

盘点大数据生态圈，那些繁花似锦的开源项目发表于12小时前|2466次阅读|来源CSDN|6条评论|作者仲浩大数据开源HadoopSparkwidth="22"height="16"src="http
AI周红伟·2025-02-05 17:30

我的创作纪念日

机缘我偶然看见CSDN，便当起了博主……收获在CSDN的陪伴下，我收获了许多粉丝，感谢大家日常我爱学习，人都会学习成就我发布了《斗罗大陆》憧憬我希望在未来的道路上我会不断前行，希望大家万事如意，工作顺利
hlb20130715·2025-02-05 15:47

大型软件开发项目启动。

想做什么都不能做，再把目标放到50万，当目标做到了，却发现与我要做的事，50万显得如此渺小。很多时候我觉得我自己都活在了追时间的时间上。到了今天我才发现我所缺的是力量。
chunhun9064·2025-02-05 14:06

开工大吉 | 鸿启新程，奋楫笃行

“路虽远，行则将至；事虽难，做则必成。”在新的征程中，脚踏
·2025-02-05 14:29

C++类的初始化列表是怎么一回事?哪些东西必须放在初始化列表中进行初始化,原因是什么?

目录01-C++类的初始化列表的概要介绍语法为什么使用初始化列表？示例代码小结02-初始化列表是写在构造函数的函数体之前的代码的**1.结构分析****2.示例：基类+成员变量****输出****3.初始化列表vs构造函数体****(1)使用初始化列表****(2)在构造函数体赋值**03-必须放在初始化列表中进行初始化的东西常量成员引用成员没有默认构造函数的类成员类的基类没有默认构造函数01-C
昊虹AI笔记·2025-02-05 09:28

为什么我的CDH不用Hue，改用Scriptis了？

理性谈谈Hue的优缺点平时做数据开发用的比较多的是CDH的Hue，Hue提供了对接Hadoop平台的UI界面，可以对Hbase数据进行直接操作，执行Mapreducer任务时有可视化的执行界面，进行数据报表和
兔子那么可爱·2025-02-05 09:58

Hadoop HDFS 安装详细步骤

Hadoop安装详细步骤安装前分别在master、slave1、slave2三台机器的root用户下的主目录下创建目录bigdata，即执行下面的命令：mkdir~/bigdataHadoop安装包下载检查
碟中碟山·2025-02-05 07:16

Hadoop框架及HDFS详细概述

文章目录Hadoop概述一、Hadoop1、分布式和集群2、Hadoop框架2.1概述2.2版本更新2.3Hadoop架构详解2.4官方示例2.4.1圆周率练习2.4.2词频统计3、Hadoop的HDFS3.1
搬砖人_li·2025-02-05 07:14

PyQt5教程——事件和信号（5）

在事件模型，有三个参与者事
weixin_33834075·2025-02-05 05:01

攻防世界 WEB WEB_PHP_UNSERIALIZE

首先需要讲明的一件事是，PHP序列化的时候对publicprotectedprivate变量的处理方式是不同的具体看这篇文章，https://blog.csdn.net/Xxy605/article/details
显哥无敌·2025-02-05 04:23

大数据：一种收集、分析和使用数据的文化

与所有IT投资一样，大数据成功的关键在于迭代，而不是关于Hadoop、NoSQL、Splunk或者任何特定的供应商或技术。
程序猿广坤·2025-02-04 22:39

6 postgresql事务与并发控制

事务与并发控制事务可以理解为做一件事，数据库就是一件事要么做完，要么不做，不然这数据库给给人不可靠的感觉正如解释事务具有四个重要特性：ACID（原子性，一致性，隔离性，持久性）原子性，隔离性由mvcc控制
ly201552y·2025-02-04 07:14

Ubuntu下Hadoop的安装与使用

1、创建hadoop用户打开终端sudouseradd-mhadoop-s/bin/bashsudopasswdhadoop//为hadoop设置密码sudoadduserhadoopsudo//为hadoop
ly201552y·2025-02-04 07:44

【数据仓库】hadoop web UI 增加账号密码认证

升级了hadoop版本到3.3.6,未配置任何鉴权，默认端口98708088开放到了公网，结果没几天就被挖矿攻击了。通过开放的端口提交了很多非法任务到yarn上，并成功在服务器执行了恶意脚本。
花菜回锅肉·2025-02-04 07:13

Hadoop3.2.1安装-单机模式和伪分布式模式

Hadoop入门篇概述Hadoop是使用Java编写的，是为了解决大数据场景下的两大问题，分布式存储和分布式处理而诞生的，包含很多组件、套件。需要运行在Linux系统下。
花菜回锅肉·2025-02-04 07:13

Spark3.1.2单机安装部署

类似Hadoop，但对Hadoop做了优化，计算任务的中间结果可以存储在内存中，不需要每次都写入HDFS，更适用于需要迭代运算的算法场景中。
花菜回锅肉·2025-02-04 07:43

唠唠 RDS 那些事 ——RDS 服务部署

RDS服务部署主题：[RDS服务简介](#RDS服务简介)系统要求部署RDS服务简介RDS（RemoteDesktopService），中文称为“远程桌面服务”，即之前的TerminalService。RDS服务包括以下的核心组件：RDCB——RemoteDesktopConnectionBroker，远程桌面连接代理。RDWA——RemoteDesktopWebAccess，远程桌面Web访问。
SimminonGarcia·2025-02-04 07:09

美团二面拷打：MySQL中 SQL 语句的执行流程？

相关阅读：MySQL常见面试题总结MySQL索引详解MySQL三大日志(binlog、redolog和undolog)详解MySQL事
JavaGuide·2025-02-04 05:29

hexo部署成功但是没效果_使用 Hexo+GitHub 搭建个人免费博客教程（小白向）

虽然搭建时比较麻烦，有点折腾，但是配置完成后，基本不需要操心维护的事，甚至放了几年都忘记了，打开来看文章依然还在。本文就详细介绍下如何使用Hexo+GitHub搭建免费个人博客网站的教程。
探索者19·2025-02-04 04:18

Flink Standalone集群模式安装部署全攻略

二、安装前准备首先，确保已经安装好了Hadoop环境（因为后续配置中涉及到与Hadoop的集成）。三、安装步骤（一）环境准备退出conda的base环境（如果存在
自节码·2025-02-04 04:17

NPDP第二章：组合管理

组合管理定义（过程）（组合管理就是做对的项目）组合管理是动态决策的过程、持续评估选择的项目、不确定性、合理分配资源完成正确的事组合管理价值：早期选择、快决策、提高回报率、降低风险组合管理的特点：1.在动态决策环境下运行
钱包不紧张女士·2025-02-04 00:49

c与python-Python与Cpython

因此，在开始解释之前，我愿意清除三件事：Python：这是一门语言，它仅说明/描述如何向解释器（接受您的python代码的程序）传达/表达自己。
weixin_37988176·2025-02-03 22:28

react面试题

1.当你调用setState的时候，发生了什么事？
獨角@歸來·2025-02-03 19:10

Spring 事务与 MySQL 事务：深度解析与实战指南

二、事务的基本概念（一）什么是事
一叶飘零_sweeeet·2025-02-03 18:31

Hive 分区和分桶总结

分区介绍2、分区表的操作3、动态分区2、分桶表1、分桶表介绍2、分桶表的操作3、分区表和分桶表的区别参考分区和分桶总结1、分区1、分区介绍由于数据量过于庞大，使用分区，可以并行的进行处理数据，有点类似于Hadoop
Stray_Lambs·2025-02-03 14:23

车载诊断数据库---ODX数据库解析

老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：屏蔽力是信息过载时代一个人的特殊竞争力，任何消耗你的人和事，多看一眼都是你的不对。
车载诊断技术·2025-02-03 13:47

HBase的原理

一、什么是HBaseHBase是一个分布式，版本化，面向列的数据库，依赖Hadoop和Zookeeper（1）HBase的优点提供高可靠性、高性能、列存储、可伸缩、实时读写的数据库系统(2)HBase表的特性
会探索的小学生·2025-02-03 11:30

macbook自带python保存文件夹_在mac下查找python包存放路径site-packages的实现方法 在Mac系统下python如何安装第三方函数库?...

mac怎么查看python的site-package位置世界上最伤心的事，不是你爱的人不爱你，而是他爱你过后，最后却不爱你。
Charnychi·2025-02-03 07:32

Hadoop的基础操作_hadoop常用操作

####下载文件语法：hadoopfs-gethadoopfs-copyToLocal示例：将user/text.txt文件下载到本地/usr/local/下-copyToLocal：复制到本地[root
字节全栈_kYu·2025-02-03 07:28

kylin套_Apache Kylin（一）Kylin介绍

1.传统大数据分析的问题在基于Hadoop生态的传统大数据分析中，主要使用的技术是MPP(MassivelyParallelProcessing)大规模并行处理和列式存储。
weixin_39898011·2025-02-03 07:57

linux的apache安装,Apache Kylin | 安装指南

软件要求Hadoop:2.7+,3.1+(sincev2.5)Hive:0.13-1.2.1+HBase:1.1+,2.0(sincev2.5)Spark(可选)2.3.0+Kafka(可选)1.0.0
姜白的树洞·2025-02-03 07:26

kylin linux 安装教程,Apache Kylin | 安装指南

软件要求Hadoop:2.7+Hive:0.13-1.2.1+HBase:1.1+Spark2.1.1+JDK:1.7+OS:Linuxonly,CentOS6.5+orUbuntu16.0.4+用HortonworksHDP2.2
社本·2025-02-03 07:26

电子电气架构---面临巨大的网络架构和设计挑战

老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：屏蔽力是信息过载时代一个人的特殊竞争力，任何消耗你的人和事，多看一眼都是你的不对。
车载诊断技术·2025-02-03 04:32

（尚硅谷 Java 学习 B 站大学版）Day 13 面向对象 方法

4-5类的成员之二：方法（Method）一、“万事万物皆对象”**：（理解）1、在Java语言范畴中，我们都将功能、结构等封装到类中，通过类的实例化，来调用具体的功能结构>Scanner,String等
亢从文_Jackson·2025-02-03 02:19

电子电气架构 --- 汽车电子电器设计概述

无人问津也好,技不如人也罢,你都要试着安静下来,去做自己该做的事.而不是让内心的烦躁、焦虑、毁掉你本就不多的
车载诊断技术·2025-02-02 23:24

新时代理论课程论文|历史是什么

“发生的是过去，写出来的是历史”，这句话的意思是说：“已经发生了的过去的事”，或者更简洁地说“过去发生的事”，并不自动地成为“历史”；它通过记录与叙述或实物的遗存，留下许多混杂的“碎片”（即“史料”），
jackl的科研日常·2025-02-02 20:35

Hadoop---(6)Sqoop（数据传输）

6.SqoopSqoop是一个用于hadoop数据和结构化数据之间转换的工具。
Mr Cao·2025-02-02 15:27

核弹级0day深信服运维安全管理系统（堡垒机）存在信息泄露漏洞

身份认证、单点登录、资源授权、访问控制和操作审计为一体，能够对IT资产(如服务器、网络设备、安全设备、数据库等)的操作过程进行有效的运维操作审计，使运维审计由事件审计提升为操作内容审计，通过事前预防、事中控制和事后审计的能力全面解决运维安全问题
SDASDASD111asd·2025-02-02 12:36

Redis | serverCron函数

目录一、前言二、serverCron函数做了哪些事（1）更新服务器时间缓存（2）更新LRU时钟（3）更新服务器每秒执行命令次数（4）更新服务器内存峰值记录（5）处理SIGTERM信号（6）管理客户端资源
瘦弱的皮卡丘·2025-02-02 11:31
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他