E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop技术
让SQL用户快速进入Hadoop大数据时代 —— Transwarp Inceptor是怎样炼成的
摘要:当前
Hadoop技术
蓬勃发展,用于解决大数据的分析难题的技术平台开始涌现。
sdulibh
·
2023-01-17 08:18
云计算
大数据
《大数据 知识图谱导航》有勇气的牛排
作者:有勇气的牛排官方博客地址:https://www.couragesteak.com/CSDN、公众号、官网均同名可搜,欢迎关注哦✅✅✅文章目录一、
hadoop技术
栈二、ES三、其他四、报错一、
hadoop
有勇气的牛排
·
2023-01-05 03:43
云计算大数据虚拟化
hadoop
python
基于大数据的推荐算法研究(1)
孙远帅.基于大数据的推荐算法研究[D].厦门大学,2014.读的一篇论文的总结总览基于项目层次结构的推荐算法,并结合
Hadoop技术
实现矩阵分解算法。
yimiaomochu
·
2022-12-30 05:04
推荐算法
大数据
算法
协同过滤算法
推荐系统
大数据的分布式数据库技术的对比
大数据技术的实现离不开很多其他的技术,我们提到最多的就是
Hadoop技术
,其实就目前而言,
Hadoop技术
看似是自成一套体系,其实并不是这样的,Hadoop和Spark以及分布式数据库其实也是存在差异的
CDA·数据分析师
·
2022-12-10 21:59
独家 | 一文读懂Hadoop(一):综述
读者可以通过阅读“一文读懂Hadoop”系列文章,对
Hadoop技术
有个全面的了解,
weixin_33860553
·
2022-10-12 19:25
大数据
shell
java
ElasticSearch入门学习
ElasticSearch分布式全文搜索引擎6.X和7.X区别特别大1、入门大数据需要解决的两个问题:存储、计算Google和
Hadoop技术
对比GoogleHadoopGFSHDFSMapReduceMapReduceBidTableHBase
一只嘻嘻嘻
·
2022-10-08 18:10
SpringBoot
elasticsearch
elasticsearch
spring
boot
开源云原生分布式文件系统 - JuiceFS
大家最耳熟能详的分布式文件系统当属HDFS,它的全称是HadoopDistributedFileSystem,在
Hadoop技术
栈盛行时大放异彩。
七包辣条
·
2022-09-19 16:23
Java
程序员
编程
开源
云原生
首届Apache
Hadoop技术
社区中国Meetup在京举办(内附完整PPT)
近日,在ApacheHadoop社区主导及邀请下,腾讯开源、腾讯大数据、腾讯云联合承办了
Hadoop技术
社区在中国的首次Meetup。
tencent__open
·
2022-08-24 10:13
首届Apache
Hadoop技术
社区中国Meetup在京举办(附PPT)
近日,在ApacheHadoop社区主导及邀请下,腾讯开源、腾讯大数据、腾讯云联合承办了
Hadoop技术
社区在中国的首次Meetup。
腾讯技术工程
·
2022-08-24 10:41
Hadoop基础入门
Hadoop生态圈技术栈:|
Hadoop技术
栈||||Hadoo
女友在高考
·
2022-07-30 08:00
资料网址收藏
)-H&K-博客园用于挖掘Web日志的数据仓库系统实现-微软ERP技术-搜狐博客Hadoop集群(第6期)_WordCount运行详解-虾皮-博客园Ubuntu下SSH设置-BradyChen-博客园
Hadoop
cloud-2014
·
2022-07-27 21:22
网址收藏
大数据—Hadoop生态圈
生态圈数据存储:HDFSHDFS,它是
Hadoop技术
体系中的核心基石,负责分布式存储数据,你可以把它理解为一个分布式的文件系统。
活到老&学到老
·
2022-07-18 13:38
大数据
hadoop
big
data
mapreduce
大数据学习路线
Linux操作系统MySQL数据库Kettle数据预处理ApacheSuperset可视化开发电商运营指标分析java语言编程编程基础面向对象常用类集合操作IO操作Java基础增强大数据技术要点学习:
hadoop
章鱼哥TuNan&Z
·
2022-03-07 14:21
分享
笔记:专注场景与底层技术谁更有前途?
当然,无论是Docker、OpenStack还是
Hadoop技术
,如果没有众多应用落地的案例,也不会发动众多社区的贡献者参与,也就不可能成为一项通用的技术。
不讲道理女编辑
·
2022-02-16 09:13
#SQL on
Hadoop技术
分析
//SQLon
Hadoop技术
分析(一)-大数据和云计算技术(欢迎关注同名微信公众号)-ITeye技术网站http://jiezhu2007.iteye.com/blog/2314063自打Hive出现之后
葡萄喃喃呓语
·
2022-02-14 03:18
Hadoop 技术生态体系
广义上的Hadoop是指其整个技术生态体系,包括但不限于以下组件:图3-1-1:
Hadoop技术
生态体系这里选择几个比较重要的组件简单介绍一下,之后会作详细介绍:一、HBase:分布式数据库HBase是
·
2021-12-24 11:41
hadoop
如何提升Hadoop访问对象存储US3的效率?我们做了这些技术实践
这背后的主要原因包括:1、由于网络技术的高速发展,使得网络传输性能不再是大数据场景下高吞吐业务需求的瓶颈;2、
Hadoop技术
栈中的HDFS存储解决方案运维复杂且成本高昂;3、云平台基
·
2021-07-27 19:33
定时任务调度——oozie总结
Oozie与
Hadoop技术
栈的项目集成,支持多
红莲之火
·
2021-06-24 00:39
大数据岗位要求之大数据运维
“技术含量最高”的职位之一,这里说的大数据运维主要是指hadoop生态体系方面的运维,在一些小公司或者传统行业的大公司也会使用oracle、db2等技术栈,在互联网行业数据量稍微大点的公司基本都是使用
hadoop
数据追随者
·
2021-06-22 07:35
如何提升Hadoop访问对象存储US3的效率?我们做了这些技术实践
这背后的主要原因包括:1、由于网络技术的高速发展,使得网络传输性能不再是大数据场景下高吞吐业务需求的瓶颈;2、
Hadoop技术
栈中的HDFS存储解决方案运维复杂且成本高昂;3、云平台基
·
2021-06-18 21:12
SQL on
Hadoop技术
综述
SQLon
Hadoop技术
综述一、系统架构runtimeframeworkv.s.mpp在SQLonHadoop系统中,有两种架构:1、一种是基于某个运行时框架来构建查询引擎,典型案例是Hive;2、另一种是仿照过去关系数据库的
Michael_林
·
2021-05-14 15:32
Hadoop技术
总概
Hadoop1HDFS解决海量数据的存储一个主节点namenode,多个从节点datanodenamenode:存储元数据,响应用户的操作请求。datanode:存储数据,block64M,有三个副本。secondarynamenode作用:进行元数据的合并,备份元数据。hdfs格式化以后会生成一个FSimage的镜像文件,用于保存元数据。fsimage的信息有两份一份存在内存中一份存在磁盘上。当
活英雄
·
2021-05-05 02:38
Java编程入门
因为自己确实是太菜了(近期受的打击有些大),所以决定还是回到Java基础学习里,花几天时间快速过一遍,我想应该有很多是我遗漏的点,毕竟咱的目标是大数据开发,基础不牢地动山摇,在此立flag:毕业前java、
hadoop
是我,Zack
·
2021-05-01 14:46
Java
#
Java
SE
冯诺依曼结构
java
操作系统
万维网
cpu
真正了解sqoop的一切
一.sqoop的简单概论1.sqoop产生的原因:A.多数使用
hadoop技术
的处理大数据业务的企业,有大量的数据存储在关系型数据中。
宇晨棒棒的
·
2021-04-28 11:18
高校大数据工程教学实训平台解决方案,数道云大数据
75%以上的公司表示在人员和培训方面存在障碍,会大数据挖掘技术的人才很热门,但是比较难找而且昂贵,会
Hadoop技术
的数据挖掘人才更是奇缺。
数道云
·
2021-04-25 02:29
《大数据的下一站是什么?服务/分析一体化(HSAP)》
这促成了过去十多年来以
Hadoop技术
开始的大数据革命,解决了海量数据分析的需求。与此同时,数据库领域也出现
阿里云技术
·
2021-04-19 11:27
大数据的下一站是什么?服务/分析一体化(HSAP)
这促成了过去十多年来以
Hadoop技术
开始的大数据革命,解决了海量数据分析的需求。与此同时,数据库领域也出现
阿里云Hologres
·
2021-04-18 17:49
大数据的下一站是什么?服务/分析一体化(HSAP)
这促成了过去十多年来以
Hadoop技术
开始的大数据革命,解决了海量数据分析的需求。与此同时,数据库领域也出现
Flink中文社区
·
2021-04-18 09:10
Hadoop技术
之HDFS
HDFS基础1.HDFS的相关概述2.HDFS的相关概念3.HDFS的体系结构4.HDFS的存储原理5.HDFS的数据读写6.HDFS常用的Shell命令操作7.HDFS常用的JavaAPI操作1.HDFS的相关概述分布式文件系统把文件分布存储到多个计算机节点上,成千上万的计算机节点构成计算机集群。分布式文件系统在物理结构上是由计算机集群中的多个节点构成的,这些节点分为两类:“主节点”(Maste
ProChick
·
2021-04-17 14:25
大数据
大数据
hdfs
Linux第10课:数据挖掘理论
Linux第10课:数据挖掘理论时间2019-03-14下午3:30主讲杨成林地点四楼电教室随着
Hadoop技术
的成熟,海量数据的存储和计算突破了技术瓶颈。那么,大数据的价值该如何体现?
刘培富
·
2021-04-13 02:11
Hadoop技术
内幕:深入解析MapReduce架构设计与实现原理 (大数据技术丛书) - 电子书下载(高清版PDF格式+EPUB格式)...
Hadoop技术
内幕:深入解析MapReduce架构设计与实现原理(大数据技术丛书)-董西成著在线阅读百度网盘下载(ihhy)书名:
Hadoop技术
内幕:深入解析MapReduce架构设计与实现原理(大数据技术丛书
xiaohuanglv
·
2020-09-16 04:46
《
Hadoop技术
内幕深入解析YARN架构设计与原理》读书笔记(1)
《
Hadoop技术
内幕深入解析YARN架构设计与原理》读书笔记(1)第二章:YARN的设计理念和基本架构由于mrv1在扩展性,可靠性,资源利用和多框架等方面存在明显的不足,诞生了新的MapReduce,
As a layman
·
2020-09-16 04:14
大数据
Hadoop技术
内幕:深入解析MapReduce架构设计与实现原理
这里帮宣传下,董西城的书,
Hadoop技术
内幕:深入解析MapReduce架构设计与实现原理http://item.jd.com/11226135.html大致看下目录,就可以系统的了解hadoop的学习思路了
飞火流云
·
2020-09-16 02:34
hadoop
Hadoop技术
内幕(YARN)第4章问题部分答案
问题1:改写DistributedShell程序,使得每个container运行在不同节点上(目前是随机的,可能运行在任意节点上)。问题2:改写DistributedShell程序,使得某个用户指定的命令可以在集群的每个节点上仅执行一次。参考http://tech.ddvip.com/2014-04/1396616894209607.htmlhttp://mail-archives.apache.
aoluochou3553
·
2020-09-16 01:09
大数据
大数据公司MapR被惠普企业收购,看重竟然不是Hadoop能力
8月6日,惠普企业HPE宣布将收购大数据基础软件企业、
Hadoop技术
三大巨头之一的MapRTechnologies的资产。
Z1Y492Vn3ZYD9et3B06
·
2020-09-13 10:59
大数据
Hadoop技术
在银行的七个应用实例
大数据
Hadoop技术
在银行的七个应用实例2014-08-2510:24佚名36大数据字号:T|T如今,Hadoop几乎存在于各个方面,其通过利用大数据来分析信息和增加竞争力。
lo3656485
·
2020-09-11 19:39
【征文】Hadoop十周年特别策划——我与Hadoop不得不说的故事
“我与Hadoop不得不说的故事“大型征文活动将聊聊你与Hadoop的那些事,你可以谈谈你在
Hadoop技术
方面
CSDN官方博客
·
2020-09-10 12:30
大数据GIS系列(1)——大数据时代下的GIS技术
Hadoop技术
ApacheHadoop项目提供了一个可扩展且可靠的分布式计算框架,允许大型数据集使用简单的编程模型在计算机集群上进行分布式处理。
SuperMap地图
·
2020-08-26 14:23
大数据GIS
MapReduce任务执行过程研究之Collect过程
参考书目:【1】《Java编程思想(第四版)》【2】《
Hadoop技术
内幕:深入解析MapReduce架构设计与实现原理》
择思
·
2020-08-26 07:08
Java技术
Hadoop技术
Hadoop源码学习研究
java大数据面试总结
(重点)
hadoop技术
和storm技术;Hadoop生态圈(M
fct2001140269
·
2020-08-24 08:41
java
java基础
[DSL]Cascading 2.5 支持 Hadoop 2
尽管
Hadoop技术
的运用越来越广泛,而且一直在增长,但是很
葡萄喃喃呓语
·
2020-08-23 10:53
Apache Impala 简介
它对查询进行快速响应,同时支持对分析查询进行交互式的数据探索和查询调整,而不是传统上那种与SQL-on-
Hadoop技术
相关联的长时间批量作业。(您将经常看到“交互式”一
devilteam2006
·
2020-08-22 20:40
yarn中的container之我见
下面只是帮助理解的说法,有什么错误希望大家指正之前一直很困惑,为什么在yarn上能执行storm,spark这样的框架呢,他们是怎么运行的呢,我想对这个有困惑的朋友应该不止我一个,在这里向大家推荐一本书:
hadoop
Java蜗牛
·
2020-08-22 16:15
yarn学习
国内首家!主导Apache Hadoop新版本发布的,是腾讯云这位小哥哥
在那时,中国移动、百度、淘宝等都已经开始使用
Hadoop技术
。Hadoop现在早已成为Apach
cpongo4'"\?;@
·
2020-08-21 12:39
大数据的下一站是什么?服务/分析一体化(HSAP)
这促成了过去十多年来以
Hadoop技术
开始的大数据革命,解决了海量数据分析的需求。与此同时,数据库领域也出现
阿里云hologres
·
2020-08-21 02:25
大数据
架构设计
flink
数据仓库
交互式
大数据的下一站是什么?服务/分析一体化(HSAP)
这促成了过去十多年来以
Hadoop技术
开始的大数据革命,解决了海量数据分析的需求。与此同时,数据库领域也出现
ApacheFlink
·
2020-08-21 02:18
flink
大数据
大数据处理
实时计算
流计算-storm
Hadoop技术
(一)分布式文件系统HDFS
分布式文件系统HDFS第一章统一思维单机大数据处理实现以及问题问题引入现在收集到的想法问题升级第二章Hadoop一Hadoop简介HDFS优点HDFS缺点二Hadoop分布式文件系统HDFS相关介绍HDFS架构图架构模型存储模型(重点掌握)NameNode(NN)SecondaryNameNode(SNN)Block的副本放置策略三HDFS的读写流程HDFS写流程HDFS读流程四HDFS中的角色权
时间静止不是简史
·
2020-08-19 06:07
大数据学习
JAVA小窝(笔记)
hadoop介绍(关于
hadoop技术
知识的学习笔记)
1.1云平台hadoop基础信息Hadoop[1]是一个能够对大量数据进行分布式处理的软件框架。主要是由HDFS和MapReduce组成。1.1.1hadoop概念Hadoop是N个开源项目的总称[4]。主要是由HDFS和MapReduce组成。HDFS是GoogleFileSystem(GFS)的开源实现。MapReduce是GoogleMapReduce的开源实现。这个分布式框架很有创造性,而
yijiyong100
·
2020-08-18 23:38
hadoop学习笔记
hadoop介绍
CDH 20个实战案例
p=15601.CCA介绍ClouderaCertifiedAssociate(CCA认证)是Cloudera面向初中级
Hadoop技术
人员推出的认证考试。
lhdz_bj
·
2020-08-16 23:53
Linux
Hadoop
ubuntu 14.04 hadoop eclipse 初级环境配置
其中有《
Hadoop技术
内幕》这本书,第一章讲述了这个配置过程,但是不详细~---------------安装jdk-------------------------------1.下载jdk1.6.0
孙暖阳
·
2020-08-16 06:39
hadoop
linux
eclipse
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他