Hadoop学习分享

HDFS中的Erasure Coding纠删码是个什么样的存在？

在Hadoop3.x之后就引入了纠删码技术（ErasureCoding）纠删码技术（Erasurecoding）简称EC，是一种编码容错技术。最早用于通信行业，数据传输中的数据恢复。它通过对数
小KKKKKKKK·2024-01-21 03:29

ElasticSearch 亿级数据检索深度优化！

一、前言数据平台已迭代三个版本，从头开始遇到很多常见的难题，终于有片段时间整理一些已完善的文档，在此分享以供所需朋友的实现参考，少走些弯路，在此篇幅中偏重于ES的优化，关于HBase，Hadoop的设计优化估计有很多文章可以参考
夜空_2cd3·2024-01-21 03:53

Redis学习笔记--尚硅谷

、Tomcat、HTML、Linux、JDBC、SVNe解决扩展性的问题:Struts、Spring、SpringMVC、Hibernate、Mybatise解决性能的问题:NoSQL、Java线程、Hadoop
Geho·2024-01-21 02:52

大数据技术原理及应用课实验1 熟悉常用的Linux操作和Hadoop操作

实验1熟悉常用的Linux操作和Hadoop操作一、实验目的Hadoop运行在Linux系统上，因此，需要学习实践一些常用的Linux命令。
Blossom i·2024-01-21 02:21

大数据技术原理及应用课实验2 ：熟悉常用的HDFS操作

实验2熟悉常用的HDFS操作目录实验2熟悉常用的HDFS操作一、实验目的二、实验平台三、实验步骤（每个步骤下均需有运行截图）（一）编程实现以下功能，并利用Hadoop提供的Shell命令完成相同任务：（
Blossom i·2024-01-21 02:21

【学习分享】运营管理（18）——如何解决供给量的问题

【学习分享】运营管理（18）——如何解决供给量的问题【课程】圈外商学院我们处于一个资产泡沫的时代，什么都在涨价。但工资总是没有物价涨的快。所以我们恨不得把所有钱都拿去理财，至少能对抗通货膨胀。
简乐l·2024-01-21 02:22

通过WordCount解析Spark RDD内部源码机制

HelloSparkHelloScalaHelloHadoopHelloFlinkSparkisAwesome然后在Eclipse中编写wo
联旺·2024-01-21 01:54

客户案例｜知名证券机构核心大数据平台升级之路

Hadoop作为海量数据处理的关键技术框架，自诞生以来就改变了企业对数据的存储、处理和分析的过程，因具备开源低成本、高可靠等特性，在证券行业得到了广泛的应用。
云掣YUNCHE·2024-01-21 01:17

Spark(一): 基本架构及原理

前言:目标：架构及生态：Spark与hadoop:运行流程及特点：常用术语:Spark运行模式：RDD运行流程：前言:ApacheSpark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009
贝賏赑钡·2024-01-20 22:46

2022-03-22

李红武焦点学习分享第84天，约练15次。画龙点晴的提醒与强化。晤谈总结反馈：SfBT咨询包括晤谈、暂停和反馈。反馈主要包括三大部分，赞美、桥梁和建议。
dcfac43304da·2024-01-20 21:56

高省官方邀请码3冠是不是真的?高省官方邀请码3冠是真的吗

直接用微信号或手机号注册登录即可.多学习分享知识:你做同城，商业转载请讨论作者得到
凌风导师·2024-01-20 21:36

2018-08-01

孙小猛～河北惠友集团【日精进打卡第141天】【知～学习】《六项精进》3遍共423遍《大学》3遍共423遍【经典名句分享】人生：赢在坚持，贵在速度【行～实践】一、修身：（对自己个人）读书学习分享《管理者应具备的素质
亮亮sxm·2024-01-20 21:17

大数据导论（3）---大数据技术

文章目录1.大数据技术概述2.数据采集与预处理2.1数据采集2.2预处理3.数据存储和管理3.1分布式基础架构Hadoop3.2分布式文件系统HDFS3.3分布式数据库HBase3.4非关系型数据库NoSQL4
冒冒菜菜·2024-01-20 21:28

Sqoop与HBase结合使用：实现强大的数据存储

Sqoop用于将数据从关系型数据库导入到Hadoop生态系统中，而HBase则用于实时、非关系型数据存储和查询。
晓之以理的喵~~·2024-01-20 19:57

使用Sqoop从Oracle数据库导入数据

在大数据领域，将数据从关系型数据库（如Oracle）导入到Hadoop生态系统是一项常见的任务。Sqoop是一个强大的工具，可以帮助轻松完成这项任务。
晓之以理的喵~~·2024-01-20 19:27

Sqoop数据传输中的常见挑战及其解决方法

Sqoop是一个用于将数据传输到Hadoop生态系统的强大工具，但在实际使用中，可能会面临一些挑战。
晓之以理的喵~~·2024-01-20 19:26

创建虚拟机

弹出如下对话框，点击“下一步”3.继续点击“下一步”4.选择“稍后安装操作系统”，然后点击“下一步”5.在版本下拉框中选择“CentOS764位”，然后点击“下一步”6.给虚拟机起一个名字，本机叫做“Hadoop100
吃草料的羊·2024-01-20 19:56

一起学习分享黄帝内经

生气不足，发病的内在原因风雨寒热不得虚，邪不能独伤人。卒然逢疾风暴雨而不得病，盖无虚，故邪不能独伤人。此必因虚邪之风，与其身形，两虚相得，乃客其形；两实相逢，众人肉坚。其中于虚邪也，因于天时与其身形，参以虚实，大病乃成。气有定舍，因处为名，上下中外，分为三员。有了护城河城墙，就可以很好的保护自己领地，不被侵犯。身体也是如此，自身正气不足是发病的内在依据，邪气只是发病的外在条件。当自然界的邪气来临，
2b024a6716e2·2024-01-20 19:50

TTT讲师特训营

刚刚结束的商学院课程TTT讲师特训营聘请国内最具权威的业界名师刘子熙授课图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自AppTTT讲师训特训营学习分享本次学习收益满满
张嘉恩2019·2024-01-20 19:15

大数据Hadoop入门——HDFS分布式文件系统基础

HDFS命令基础语法：【hadoopfs具体命令、hdfsdfs具体命令】两个是完全相同的。显示文件列表#hdfsdfs-lsURL创建目录#hdfsdfs-mkdir[-p]URL使用-p参数可以
nucty·2024-01-20 16:00

2020-11-08《时间管理100讲》学习分享49（反思）连接想法与行动的三个问句

今天我们来分享一个非常重要的理念，如果你能够学到这个理念，在未来的日子里，你的想法就可以把它转化为行动，你的人生就能够不断的出成果。在我们的节目当中，第一阶段讲了计划的模块。我们谈到了一个非常重要的理念，就是我们不能用大脑来管理事件。时间管理的本质是对事件的分类，我们首先需要对事件进行收集，我们要清空大脑。因为大脑是CPU不是硬盘，大脑是用来思考的，而不是用来做记忆的。记忆是个低级的大脑活动不能让
正能量A遇见更好的自己·2024-01-20 16:25

Zookeeper简介

一、Zookeeper简介ZooKeeper是一个分布式的、开放源码的分布式应用程序协调服务，它是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
破茧......·2024-01-20 16:35

大数据技术之Hadoop伪分布式安装步骤及结果（Ubuntu）

、下载安装虚拟机软件；下载Ubuntu镜像文件，安装Ubuntu虚拟机；2、在Ubuntu系统中创建用户、更新APT、安装SSH并配置SSH无密码登录、安装Java环境、配置PATH环境变量；3、下载Hadoop
小嘤嘤怪学·2024-01-20 16:52

智慧父母课堂焦点学习分享第51天

尊重平等是营建正向解决气氛的基础为了能与来访者共同建构新的故事叙说的目标，带来赋能的效应，治疗师不是置于一个优势专家的强权高位，自行重新塑造来访者的主观世界，而是以平等尊重来访者之资非专家之势，融入来访者的世界，尊重来访者主观世界的诠释架构与独特经验的意义，并且积极寻找可与之对话的位置。由于来访者的压力与情绪是很私人性的，只有来访者自己最了解自己的状态，所以有关来访者想要改变的层次，程度与强度，依
e8b9ab5ee1cc·2024-01-20 15:34

【大数据】了解 YARN 架构的基础知识

3.1.2ApplicationManager应用程序管理器3.2NodeManager节点管理器3.3ApplicationMaster应用程序主控3.4Container容器4.在YARN中提交应用程序5.HadoopYARN
G皮T·2024-01-20 14:23

Hive性能优化

sum,count,max,min等UDAF，不怕数据倾斜问题,hadoop在map端的汇总合并优化，使数据倾斜不成问题。count(distinct),在数据量大的情况下，效率较
La victoria·2024-01-20 13:23

hive Error while compiling statement: FAILED: ClassCastException org.apache.hadoop.hive.serde2.objec

Errorwhilecompilingstatement:FAILED:ClassCastExceptionorg.apache.hadoop.hive.serde2.objectinspector.primitive.WritableConstantStringObjectInspectorcannotbecasttoorg.apache.hadoop.hive.serde2
圆周率的后六位·2024-01-20 12:35

hadoop运行任务出错，Hive Runtime Error while processing row

Error:java.lang.RuntimeException:org.apache.hadoop.hive.ql.metadata.HiveException:HiveRuntimeErrorwhileprocessingrow
圆周率的后六位·2024-01-20 12:05

Hadoop配置文件加载

1.hadoop使用org.apache.hadoop.conf.Configuration类来加载配置文件2.一般我们在写客户端程序等需要连接hadoop集群时，需要自己准备好core-site.xml
sf_www·2024-01-20 11:52

美好清晨20210429——育儿育己：忙的时候，不辜负路。

凝飞早练晨读20210429家庭教育学习分享——父母必须给孩子的10种品质：1.感恩:也是一种修养；2.宽容:学会"心理换位"；3.乐观:开启光明未来之门；4.自信:构建动力金三角；5.诚信：他人生的通行证
凝飞呀·2024-01-20 11:05

Hadoop基础知识

Hadoop基础知识1、Hadoop简介广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。
坐在风口上de猪·2024-01-20 10:10

大数据开发之Hadoop（完整版+练习）

第1章：Hadoop概述1.1Hadoop是什么1、Hadoop是一个由Apache基金会所开发的分布式系统基础架构。2、主要解决，海量数据的存储和海量数据的分析计算问题。
Key-Key·2024-01-20 10:36

Kylin安装学习教程

Kylin安装学习教程Kylin是一个开源的分布式分析引擎，提供Hadoop/Spark之上的SQL接口及多维分析（OLAP）能力以支持大数据分析，最初由eBayInc.开发并贡献到开源社区。
Luo_Yang111·2024-01-20 09:28

美好清晨20210713——育儿育己：从现在起

凝飞早练晨读20210713家庭教育学习分享——从现在起天不怕地不怕，就怕孩子放暑假！尽管带孩子很辛苦，但也要保持良
凝飞呀·2024-01-20 09:26

黑猴子的家：Linux 文件有空格或特殊字符--转义

1、使用window斜杠""转义处理[victor@hadoop102~]$cdwindow\vnc/2、使用英文双引号处理[victor@hadoop102~]$cd"windowvnc"
黑猴子的家·2024-01-20 07:10

发展瓶颈期究竟需不需要引入企业管理咨询，大搞公司文化建设（心胸篇）

老弟说道，然后他就看他的手机，却说，“我去，学习分享还没写，哎，算了，回去再写。”我不禁问道，“什么学习！？”老弟说，“哎，公司的企业文化学习，没啥用！”小编陷入了沉思，然后问道，“你们也经常
云客lucky·2024-01-20 05:44

Windows平台安装配置Hadoop2.7.X

一，准备1.安装jdk1.82.下载hadoop2.7.7.tar.gz官网下载地址：https://archive.apache.org/dist/hadoop/common/hadoop-2.7.7
sun_十一·2024-01-20 04:23

余老师带你学习大数据-Spark快速大数据处理第十章Kafka第八节Kafka-Connect

kafkaKafkaConnect基本概念1、KafkaConnect是Kafka流式计算的一部分，左侧是数据源包括了数据库、hadoop、文本等等，右侧是数据结果包括了文本、hadoop、数据库，中间上层就是
weixin_45810046·2024-01-20 03:41

Kylin基础教程（一）

一、Kylin介绍1.1现状Hadoop于2006年初步实现，改变了企业级的大数据存储（基于HDFS）和批处理（主要基于MR）问题，10几年过去了，数据量随着互联网的发展井喷式增长，如何高速、低延迟的分析数据成为后续面临的挑战
GOD_WAR·2024-01-20 03:43

kylin安装学习教程

ApacheKylin是一个开源的分布式分析引擎，提供Hadoop/Spark之上的SQL接口及多维分析（OLAP）能力以支持大数据分析，最初由eBayInc.开发并贡献到开源社区。
打工人何苦为难打工人·2024-01-20 03:07

Kylin安装学习教程

ApacheKylin是一个开源的分布式分析引擎，提供Hadoop/Spark上的SQL查询接口及多维分析（OLAP）能力以支持超大规模数据。
终将老去的穷苦程序员·2024-01-20 03:04

CVE-2023-46226 Apache iotdb远程代码执行漏洞

它具有体量轻、性能高、易使用的特点，完美对接Hadoop与Spark生态，适用于工业物联网应用中海量时间序列数据高速写入和复杂分析查询的需求。
棱镜七彩·2024-01-20 02:27

番茄工作法读后感【06232018】

感谢易效能2.0伙伴一起践行，大家一起学习分享，分享提高！
碧玉辽刀·2024-01-20 01:56

Google街景全景图下载

描述：下载指定两个坐标点间或某区域的全景图片，由于是访问Google，所以网络方面需要本文档仅供学习分享，提供思路目的：本地实现静态仿Google街景效果参考资料：Google文档：https://developers.google.com
木子家有小可爱·2024-01-20 00:35

超详细版Hadoop的安装与使用（单机/伪分布式）

一、首先安装VMware虚拟机虚拟机安装包以及UbuntuISO映像下载：https://pan.baidu.com/s/19Ai5K-AA4NZHpfMcCs3D8w?pwd=9999下载完成后，进入VMware，点击右上角【文件】——【新建虚拟机向导】1.1选择典型1.2选择光盘映像映像文件选择上方刚刚下载的ubuntukylin-16.04-desktop-amd641.3命名根据自己需求来
比护隆佑·2024-01-19 23:49

hadoop dfs web页面访问增加鉴权

前言装好了Hadoop，通过浏览器访问，发现竟然不需要鉴权就能访问，且暴露了很多服务器层文件路径信息，基于多年积累的安全意识，必须得配置些鉴权信息，就有了该文，仅做学习记录，下次自己再装时能提高效率。
花菜回锅肉·2024-01-19 21:10

Hadoop 伪分布式坏境搭建

环境说明：VM上ubuntu16.04版本安装hadoop前的准备（1）ssh免密登录（2）配置好Java环境（1）（2）步骤的安装见网上博客安装Hadoop（1）下载hadoop到上一篇博客给出的网下载
zoux·2024-01-19 19:16

2018-06-05

致自己【行～实践】一、修身：（对自己个人）读书学习分享《致自己--失足可以很快弥补》二、齐家：给家人打电话三、建功：（对工作）公司开会阜平工程进度，沟通增加培训人数｛积善｝：发愿从2018年3月11日起尽力行善事
亮亮sxm·2024-01-19 19:55

《千峰逆战“记录蜕变、见证奇迹”学习分享活动》2020-03-15

#千峰逆战班，SZ201刘峻#在千峰“逆战”学习第35天今天复习了本周的知识点，网站管理，域名服务，开源数据库MySQL，搭建，DDL，DML，DQL，DCL语句，数据库的授权，数据库日志管理。人生路上，存在着许多我们无法掌控的变数。所以，活在当下就好！
Mask_o·2024-01-19 19:04

钢琴学习分享

所以，当一个人把钢琴学好了，就提升了智力、专注力、鉴赏力，增强了毅力和自制力，养成坚持和细心的好习惯，那么做好其他事情，还会很难吗？
音乐王子的故事音乐预备同工·2024-01-19 18:58
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他