E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
大数据技术栈-hadoop
Hadoop
的基础操作_
hadoop
常用操作
####下载文件语法:
hadoop
fs-get
hadoop
fs-copyToLocal示例:将user/text.txt文件下载到本地/usr/local/下-copyToLocal:复制到本地[root
字节全栈_kYu
·
2025-02-03 07:28
hadoop
eclipse
大数据
kylin套_Apache Kylin(一)Kylin介绍
1.传统
大数据
分析的问题在基于
Hadoop
生态的传统
大数据
分析中,主要使用的技术是MPP(MassivelyParallelProcessing)大规模并行处理和列式存储。
weixin_39898011
·
2025-02-03 07:57
kylin套
linux的apache安装,Apache Kylin | 安装指南
软件要求
Hadoop
:2.7+,3.1+(sincev2.5)Hive:0.13-1.2.1+HBase:1.1+,2.0(sincev2.5)Spark(可选)2.3.0+Kafka(可选)1.0.0
姜白的树洞
·
2025-02-03 07:26
linux的apache安装
kylin linux 安装教程,Apache Kylin | 安装指南
软件要求
Hadoop
:2.7+Hive:0.13-1.2.1+HBase:1.1+Spark2.1.1+JDK:1.7+OS:Linuxonly,CentOS6.5+orUbuntu16.0.4+用HortonworksHDP2.2
社本
·
2025-02-03 07:26
kylin
linux
安装教程
可视化大屏
它不仅在电影中常见,而且已经实实在在地被应用在商业、金融、制造等各个行业的业务场景中,成为
大数据
分析和展示的重要工具。
梦屿千寻!!
·
2025-02-03 06:53
信息可视化
从零开始构建一个简单的Python Web爬虫实战指南与技巧
从零开始构建一个简单的PythonWeb爬虫实战指南与技巧随着数据科学和
大数据
分析的快速发展,网络爬虫(WebScraping)成为了获取互联网数据的重要工具。
一键难忘
·
2025-02-03 06:21
python
前端
爬虫
Python
Web
MongoDB深度解析与实践案例
MongoDB深度解析与实践案例在当今
大数据
盛行的时代,NoSQL数据库以其灵活的数据模型和水平扩展能力,成为了众多应用场景下的首选。
我的运维人生
·
2025-02-03 04:37
mongodb
数据库
运维开发
技术共享
2024年作品汇总
读书笔记-《Redis设计与实现》(一)数据结构与对象(上)读书笔记-《
大数据
时代》读书笔记-《Spring技术内幕》(一)IoC容器的实现读书笔记-《Spring技术内幕》(二)AOP的实现读书笔记-
萝卜青今天也要开心
·
2025-02-03 04:34
spring
java
后端
笔记
学习
Web 开发入门:从前端到后端的全栈开发探索
Web开发涉及到的领域非常广泛,涵盖了前端、后端、数据库等多个
技术栈
。在这篇文章中,我们将详细介绍Web开发的基本概念、前端和后端的技术、全栈开发的特点以及如何开始从事Web开发。
HelloZheQ
·
2025-02-03 01:04
前端
基于云计算的自然资源视频监控系统设计与研究
该系统基于云计算和视频中台等技术构建了两级云架构的视频处理与存储系统,通过AI等
大数据
算法对数据进行整合、分析,进而构建了具有执法线索、监督问效、行动处置和综合指挥等功能的自然资源管理系统。
罗伯特之技术屋
·
2025-02-03 00:00
大数据与数字化的设计应用专栏
云计算
音视频
老玩童:互联网智慧助老平台——科技赋能银发族,开启智慧养老新生活
基于互联网技术的智慧助老平台“老玩童”,通过整合物联网、
大数据
、人工智能等先进技术,构建了一个全方位、智能化、个性化的助老服务体系,为老年人及其家庭提供了全新的解决方案。
IT源码大师
·
2025-02-02 22:47
科技
生活
以太坊Solidity智能合约开发(一) - 合约结构
我们先从学习合约的开发开始,因为后面的
技术栈
中,我们需要用支持与以太坊交互的编程语言与以太坊交互,与合约交互,都是基于合约的代码逻辑来的,所以,接下来我们这个系列里,我们先从学会掌握solidity智能合约开发开始
心辰说区块链
·
2025-02-02 15:27
智能合约
区块链
Hadoop
---(6)Sqoop(数据传输)
6.SqoopSqoop是一个用于
hadoop
数据和结构化数据之间转换的工具。
Mr Cao
·
2025-02-02 15:27
sqoop
大数据
简述web3.0前端开发的最简单三个步骤
Web3.0是互联网的下一代前沿技术,包括人工智能,
大数据
和区块链都是这项技术的核心,Web3.0为用户提供了更为智能的互联网服务体验,该技术的核心要素为去中心化,也就是摆脱中心化的权力控制,能够让数据和各项交易通过网络里的各项节点来维护和验证
飞机号Mrsfu223
·
2025-02-02 10:25
web3
区块链
python
java
开发语言
22章2节:如何在 R Markdown 和 R Notebook 中创建使用
它结合了R语言的强
大数据
处理和分析能力,以及Markdown的简洁易用的文本格式,使得创建专业和美观的报告变得更加简单和高效。
DAT|R科学
·
2025-02-02 10:24
用R探索医药数据科学
r语言
开发语言
JavaSE笔记总结
桌面应用开发企业级应用开发移动应用开发科学计算
大数据
开发游戏开发3、Java的特性面向对
火车驶向云外.11
·
2025-02-02 10:23
java
开发语言
hbase无法建表:org.apache.
hadoop
.hbase.PleaseHoldException: Master is initializing
1.环境:cdh6.2.12.现象:hbaseshell进去后,list命令执行正常,执行建表语句后报错:ERROR:org.apache.
hadoop
.hbase.PleaseHoldException
magicchu
·
2025-02-02 09:18
CDH
HBASE
大数据
我的名字叫
大数据
:第1~4章
第1章大家好,我叫
大数据
1.1我的家族传统:从我小小的祖先到壮大的我1.1.1最初的我:原始部落里的计数石头大家好,我是你们人类文明的“老朋友”——
大数据
。你们知道吗?
大数据张老师
·
2025-02-02 08:08
我的名字叫大数据
大数据
大数据认知
大数据启蒙
什么是大数据
数据库
python
深度学习基因组学+机器学习单细胞分析,当下最火热研究方向!
深度学习通过强大的深度神经网络模型从高维
大数据
中自动
qwmb919
·
2025-02-02 07:25
人工智能
深度学习
机器学习
python
云原生后端开发:技术、实践与应用
本文将围绕云原生后端的
技术栈
与架构设计展开,结合实践案例,介绍云原生后端的关键技术、开发流程和最佳实践。一、云原生后端的核心概念1
一ge科研小菜鸡
·
2025-02-02 05:16
Java
后端
后端
Java 大视界 -- Java
大数据
中的数据脱敏技术与合规实践(60)
一、欢迎加入【福利社群】点击快速加入:青云交灵犀技韵交响盛汇福利社群点击快速加入2:2024CSDN博客之星创作交流营(NEW)二、本博客的精华专栏:
大数据
新视
青云交
·
2025-02-02 05:11
大数据新视界
Java
大视界
大数据
数据脱敏
替换法
加密法
掩码法
Spark
SQL
Flink
Java 大视界 -- Java
大数据
实时数仓的构建与运维实践(55)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、欢迎加入【福利社群
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
实时数仓
Flume
Flink
HBase
ClickHouse
Lambda架构
Java 大视界 -- Java
大数据
中的强化学习算法实践与优化 (57)
一、欢迎加入【福利社群】点击快速加入:青云交灵犀技韵交响盛汇福利社群点击快速加入2:2024CSDN博客之星创作交流营(NEW)二、本博客的精华专栏:
大数据
新视
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
强化学习算法
Q-learning
经验回放
探索利用平衡
智能能源管理
算法优化
Java
大数据
自动化数据管道构建:工具与最佳实践(47)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:10
大数据新视界
Java
大视界
大数据
自动化数据管道
Sqoop
Flume
NiFi
数据质量
性能优化
java
Java
大数据
与区块链的融合:数据可信共享与溯源(45)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
区块链
数据可信共享
数据溯源
智能合约
区块链存储
金融应用
java
Java
大数据
高性能计算:利用多线程与并行计算框架(39)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
高性能计算
多线程
并行计算框架
Apache
Spark
线程安全
数据一致性
java
Java 与量子计算在
大数据
中的潜在融合:原理与展望(33)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。一、本博客的精华专栏:
青云交
·
2025-02-02 05:40
大数据新视界
Java
大视界
大数据
量子计算
融合原理
技术路径
未来展望
跨学科人才
量子云计算
java
大数据
新视界 -- Hive 事务管理的应用与限制(2 - 16 - 8)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:大数
青云交
·
2025-02-02 05:38
大数据新视界
#
Hive
之道
Hive
事务管理
应用场景
优化策略
数据一致性
并发处理
大数据爱好者们
大数据
深度学习-图像数据标注工具使用(LabelImg和BBox)
文章与视频资源多平台更新微信公众号|知乎|B站|头条:AI研习图书馆深度学习、
大数据
、IT编程知识与资源分享,欢迎关注,共同进步~图像数据标注工具的使用教程1.LabelImgLabelImg下载地址:
AI研习图书馆
·
2025-02-02 03:35
方法教程
LabelImg
BBox
图像标注工具
Hive 整合 Spark 全教程 (Hive on Spark)
hadoop
.proxyuser.luanhao.groups*
hadoop
.proxyuser.luanhao.groups*2)HDFS配置文件配置hdfs-site.xmldfs.namenode.http-addressBigdata00
字节全栈_rJF
·
2025-02-02 02:56
hive
spark
hadoop
Spark 任务与 Spark Streaming 任务的差异详解
Spark任务与SparkStreaming任务的主要差异源自于两者的应用场景不同:Spark主要处理静态的
大数据
集,而SparkStreaming处理的是实时流数据。
goTsHgo
·
2025-02-02 00:14
spark-streaming
分布式
大数据
spark
streaming
大数据
分布式
spark和python的区别_Spark入门(Python)
Spark使用函数式编程范式扩展了MapReduce模型以支持更多计算类型,可以涵盖广泛的工作流,这些工作流之前被实现为
Hadoop
之上的特殊系统。
weixin_39934257
·
2025-02-01 23:42
spark和python的区别
spark python入门_python pyspark入门篇
一.环境介绍:1.安装jdk7以上2.python2.7.113.IDEpycharm4.package:spark-1.6.0-bin-
hadoop
2.6.tar.gz二.Setup1.解压spark
weixin_39686634
·
2025-02-01 23:12
spark
python入门
前端微应用体系
每个微应用可以使用不同的
技术栈
,与
趙子昂
·
2025-02-01 23:41
前端
前端框架
Python
大数据
之PySpark(三)使用Python语言开发Spark程序代码_windows spark python
算子:rdd的api的操作,就是算子,flatMap扁平化算子,map转换算子Transformation算子Action算子步骤:1-首先创建SparkContext上下文环境2-从外部文件数据源读取数据3-执行flatmap执行扁平化操作4-执行map转化操作,得到(word,1)5-reduceByKey将相同Key的Value数据累加操作6-将结果输出到文件系统或打印代码:#-*-codi
2401_84181704
·
2025-02-01 23:09
程序员
大数据
python
spark
《
大数据
时代“快刀”:Flink实时数据处理框架优势全解析》
在数字化浪潮中,数据呈爆发式增长,实时数据处理的重要性愈发凸显。从金融交易的实时风险监控,到电商平台的用户行为分析,各行业都急需能快速处理海量数据的工具。Flink作为一款开源的分布式流处理框架,在这一领域崭露头角,备受瞩目。一、真正实时,毫秒级响应与部分将流处理模拟为微批处理的框架不同,Flink是专为实时流处理打造的“原生”引擎。它直接处理持续不断的事件流,无需将数据攒成批次再处理,这种设计赋
程序猿阿伟
·
2025-02-01 20:15
大数据
flink
园区智能化系统实现管理与服务的智能化转型与创新进阶
通过集成
大数据
分析、物联网和人工智能,园区智能化系统能够为各类园区如工业园、产业园、物流园、写字楼与公寓等提供切实可行的解决方案。“智能化管理不仅是未来的发展趋势,更是提升竞争力的必要手段。”
快鲸智慧楼宇管理系统
·
2025-02-01 19:35
其他
CDH_6.3.2的搭建
一站式搭建
大数据
的应用1、前提条件和准备工作hostnamectlset-hostnamecdh01hostnamectlset-hostnamecdh02hostnamectlset-hostnamecdh032
我的K8409
·
2025-02-01 17:22
Flink
linux
大数据
分布式
大数据
笔记之 Flink1.17 算子
文章目录前言一、Partition分区(物理分区)1.1随机分区shuffle1.2轮询分区rebalance1.3重缩放分区rescale1.4广播分区broadcast1.5全局分区global1.6keyby1.7自定义分区Custom二、transform2.1flatMap2.2filter2.3RichFunction2.4map三、Aggregate聚合3.1keyBy()3.2ma
凡许真
·
2025-02-01 17:20
大数据
flink1.17
算子
安装HBase-2.4.12 (
hadoop
3.3.1)
1.下载https://www.apache.org/dyn/closer.lua/hbase/2.4.12/hbase-2.4.12-bin.tar.gz节点角色配置节点MasterZooKeeperRegionServernode001yesyesyesnode002backupyesyesnode003noyesyes2.解压下载的文件,并切换到新创建的目录。(base)[root@node
不饿同学
·
2025-02-01 17:18
大数据
hbase
big
data
hadoop
01.双Android容器解决方案
ControlGroups)1.1.3联合文件系统(UnionFileSystem)1.2容器的应用1.2.1微服务架构1.2.2持续集成和持续部署(CI/CD)1.2.3多租户环境1.2.4混合云和多云环境1.2.5
大数据
和机器学习
高桐@BILL
·
2025-02-01 13:46
容器
Android
监控易:智慧高校一体化综合运维解决方案
自“十三五”规划中明确提出“支持各级各类学校建设智慧校园,综合利用互联网、
大数据
、人工智能和虚拟现实技术探索未来教育教学新模式”以来,政策春风也不断加码教育信息化进程,《教育信息化2.0行动计划》以及《
MXsoft618
·
2025-02-01 13:15
运维
信息安全
物联网
监控类
TDengine 做为 FLINK 数据源技术参考手册
ApacheFlink是一款由Apache软件基金会支持的开源分布式流批一体化处理框架,可用于流处理、批处理、复杂事件处理、实时数据仓库构建及为机器学习提供实时数据支持等诸多
大数据
处理场景。
TDengine (老段)
·
2025-02-01 11:02
tdengine
flink
大数据
涛思数据
时序数据库
数据库
vuecli3 打包加载超慢_解决vue cli使用typescript后打包巨慢的问题
前言最近新开了一个项目,虽然用的是vue
技术栈
,但是为了项目的健壮性,还是强上了typescript,于是引出了下面的问题。
李day
·
2025-02-01 10:58
vuecli3
打包加载超慢
Hadoop
--HA架构详解
为了解决上述问题,
Hadoop
给出了高容错,高可用的HA方案:一个HDFS集群至少存在两个nameNode,一个nameNode处在active(主)状态,其他nameNode处在standby(备
娘子,出来看上帝
·
2025-02-01 10:20
Hadoop
Hadoop
大数据
HA
Hadoop
HA 架构
企业里面,多台机器伪分布式每一个角色都是一个进程HDFS:NNSNNDNYARN:RMNM
大数据
所有组件,都是主从架构master-slaveHDFS读写请求都是先到NN节点,但是,HBase读写请求不是经过
weixin_30569033
·
2025-02-01 09:49
shell
大数据
守护每一比特的安全——探索基于差分隐私的MySQL数据脱敏之道
在当今数字化时代,随着互联网和
大数据
技术的发展,数据的价值愈发凸显。然而,随之而来的个人隐私泄露风险也日益增加,成为社会广泛关注的问题之一。
墨夶
·
2025-02-01 09:13
数据库学习资料2
安全
mysql
数据库
【腾讯云HAI域探秘】通过ControlNet实现二维码美化应用
3.3ControlNet介绍3.3下载QRCodeMonsterModel3.4测试QRCodeMonsterModel3.5测试文生图ControlNetAPI四、构建二维码美化应用4.1.项目中
技术栈
yahasakiii
·
2025-02-01 08:34
腾讯云
人工智能
云计算
12.udp
数据传输:适合传输
大数据
,但实际传输受网络MTU等因素限制。2.UDP编程框架(C/S模式)服务器端流程:创建套接字:调用socket()函数,参
就很对
·
2025-02-01 05:40
udp
网络协议
网络
【
hadoop
学习之路】Hive HQL 语句实现查询
目录表数据表1students_data.txt表2course.txt实验步骤结论表数据表1students_data.txt21434,Sara,F,21,20,73,classC41443,Mary,M,19,30,90,classA43333,Dery,F,20,40,85,classB45454,Mary,F,22,10,91,classA14634,Henry,M,18,50,56,c
新世纪debug战士
·
2025-02-01 03:58
hadoop学习之路
hive
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他