E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【大数据技术】
数智化推送助力用户精准分层,MobPush是如何实现用户价值变现的
MobPush利用丰厚的
大数据技术
,通过用户标签和全链路数据统计,帮助众多APP
MobTech袤博科技
·
2023-10-27 19:42
个人开发
大数据
数据管理解决方案 | 零售行业如何搭建全渠道大数据平台?
零售行业数据管理特点随着
大数据技术
的引进,零售商们的诉求集中在如何收集和利用与业务需求相关的数据,如何有效利用数据来促进业务增长等方面。但零售行业往往门店多、客户多、库存多,数据量大且繁杂,在数据管理
running_elephant
·
2023-10-27 01:40
大数据
零售
github
kafka
flink
【kafka技术篇】kafka数据到底会不会丢失?
博主介绍博主主页:淼淼_喵的博客_CSDN博客-Zookeeper,Hadoop,
大数据技术
领域博主✨主攻领域:【大数据开发】【数据仓库】【ETL】【数据分析】【面试分析】点赞➕评论➕收藏==养成习惯
chad__chang
·
2023-10-27 01:49
kafka
kafka
java
分布式
【唠唠嵌入式】__嵌入式方向真的“遥遥领先”吗?
No.1计算机科学与技术No.2数字媒体技术专业No.3信息安全专业No.4数据科学与
大数据技术
No.5软件工程总结嵌入式待遇如何?嵌入式容易晋升吗?
Rleco_
·
2023-10-26 23:24
嵌入式话题
嵌入式硬件
1024程序员节
单片机
stm32
51单片机
mcu
物联网
大数据技术
与实践
11.1大数据概述11.1.2大数据的定义大数据的“大”是相对而言的,是指所处理的数据规模巨大到无法通过目前主流数据库软件工具,在可以接受的时间内完成抓取、储存、管理和分析,并从中提取出人类可以理解的资讯。11.1.3大数据的4V特征业界普遍认同大数据具有4个V特征(数据量大Volume、变化速度快Velocity、多类型Variety与高价值Value)。简而言之,大数据可以被认为是数据量巨大且
Mr. 劉℡
·
2023-10-26 13:10
大数据技术与实践
大数据隐私保护技术综述 - 大数据
大数据隐私保护技术综述-大数据随着
大数据技术
的发展和广泛应用,人们对于大数据隐私保护的关注逐渐增加。在大数据环境下,个人和组织的隐私信息容易受到泄露和滥用的风险。
NoerrorCode
·
2023-10-26 08:03
Python
大数据
大数据前端团队生存指南
开始前问几个问题:你了解
大数据技术
吗?为什么需要大数据前端团队(和大数据有什么关联)?大数据前端团队在前端团队中的定位?
悲伤日记
·
2023-10-26 07:39
大数据
前端
大数据技术
之Hadoop-入门
第1章Hadoop概述1.1Hadoop是什么分布式:多台服务器共同完成某一项任务。1.2Hadoop发展历史1.3Hadoop三大发行版本Hadoop三大发行版本:Apache、Cloudera、Hortonworks。Apache版本最原始(最基础)的版本,对于入门学习最好。2006Cloudera内部集成了很多大数据框架,对应产品CDH。2008Hortonworks文档较好,对应产品HDP
华尔街的幻觉
·
2023-10-26 06:14
hadoop
大数据
hdfs
尚硅谷
大数据技术
之电商用户行为数据分析
尚硅谷
大数据技术
之电商用户行为分析第1章项目整体介绍1.1电商的用户行为电商平台中的用户行为频繁且较复杂,系统上线运行一段时间后,可以收集到大量的用户行为数据,进而利用
大数据技术
进行深入挖掘和分析,得到感兴趣的商业指标并增强对风险的控制
okbin1991
·
2023-10-25 16:02
大数据
数据挖掘
人工智能
华为携手东方世纪 开启防汛抗旱监测预警大数据时代
方案核心基于东方世纪19年来研发的通用洪水预报模型,搭载于华为鲲鹏云平台——实现了专业模型与
大数据技术
的完美结合,依托华为鲲鹏的强大算力提升了人类抵御洪涝灾害的能力。
祥云气象
·
2023-10-25 07:01
#后疫情时代的新思考#“大数据+行业”渗透融合全面展开,新业态正处酝酿期丨数据猿公益策划...
不仅各地政府及相关部门纷纷借助
大数据技术
助力疫
数据猿
·
2023-10-25 04:39
大数据
人工智能
物联网
数据分析
区块链
链动2+1模式:裂变增长,轻松吸引百万用户
链动2+1模式利用互联网
大数据技术
,采用合法裂变方式,推动业务快速发展。这种模式简单易懂,只需推荐两位朋友购买商城中的礼包即可升级为老板,轻松实现用户增长。该模式中的直接分润机制直接触及消费者内心。
DIZL11
·
2023-10-25 01:58
大数据
小程序
开源软件
区块链
大数据技术
导论|datawhale组队学习
学习链接:https://datawhalechina.github.io/juicy-bigdata/#/READMETask01阅读第一、二章第一章主要介绍了大数据的概念、应用以及其关键技术。第二章开始介绍hadoop的相关内容。附厦大子雨老师的mooc教程:https://dblab.xmu.edu.cn/blog/285/,提供一些安装步骤!安装过程中遇到的一个比较难搞的就是ssh配置那块
郑粗心
·
2023-10-24 20:43
学习
大数据
hadoop
测试饱和了? 大数据测试就业薪资和前景究竟怎么样?
只是最基础的岗位需求在慢慢变少了,但行业中比较深的细分岗位,仍存在着非常多的机会,比如大数据测试岗位,看看市场对大数据岗位招聘需求:1那什么是大数据测试随着业务规模越来越大,大数据是现在中大型企业实际面临的问题,
大数据技术
需要解决的是海量数据
软件测试老莫
·
2023-10-24 20:35
软件测试
自动化测试
测试工具
大数据
hadoop 伪分布式模式学习笔记
前言Hadoop在
大数据技术
体系中的地位至关重要,Hadoop是
大数据技术
的基础。这是一篇记录我自己学习的文章,Hadoop的学习方法很多,网上也有很多学习路线图。
金曜软件工程师
·
2023-10-24 16:44
大数据
大数据
大数据学习
hadoop
人工智能
【算法】加密解密算法(DES、3DES、SM2、SM3、SM4)以及RSA加密算法
DES算法的安全性在一定程度上受到了量子计算和
大数据技术
的冲击,因为它的密钥长度较短,容易被暴力破解。3DES(TripleDES)算法是DES算法的扩展,也称为三重DES。3DES算法使
奔向理想的星辰大海
·
2023-10-24 13:10
算法
架构
技术研发
1024程序员节
算法
数据结构
大数据技术
学习笔记(三)—— Hadoop 的运行模式
目录1本地模式2伪分布式模式3完全分布式模式3.1准备3台客户机3.2同步分发内容3.2.1分发命令3.2.2执行分发操作3.3集群配置3.3.1集群部署规划3.3.2配置文件说明3.3.3修改配置文件3.3.4分发配置信息3.4SSH无密登录配置3.4.1配置ssh3.4.2无密钥配置3.5单点启动集群3.5.1启动HDFS集群3.5.2启动YARN集群3.6群起集群3.6.1配置workers
夏木夕
·
2023-10-24 09:06
大数据
大数据
分布式
hadoop
笔记
大数据技术
——Hadoop3.X入门搭建+安装调优(2.HDFS)
文章目录一、HDFS概述1.1HDFS产出背景及定义1.2HDFS优缺点1.3HDFS组成架构1.4HDFS文件块大小(面试重点)二、HDFS的Shell操作(开发重点)2.1基本语法2.2命令大全2.3常用命令实操2.3.1准备工作2.3.2上传2.3.3下载2.3.4HDFS直接操作三、HDFS的API操作3.1客户端环境准备3.2HDFS的API案例实操3.2.1HDFS文件上传(测试参数优
虚神公子
·
2023-10-24 08:56
大数据
HDFS
大数据技术
之Zookeeper实战
Zookeeper实战一、分布式安装部署1、集群规划2、解压安装3、配置zoo.cfg文件4、集群操作二、客户端命令行操作三、API应用1、IDEA环境搭建2、创建ZooKeeper客户端3、创建子节点4、获取子节点并监听5、判断znode是否存在四、案例实战:分布式秒杀————————————————————————————————————————————一、分布式安装部署1、集群规划在bigd
故明所以
·
2023-10-24 01:40
大数据hadoop生态组件
zookeeper
大数据
大数据技术
之HBase原理与实战归纳分享-下
文章目录整合Phoenix定义为何要使用安装SHELL操作表的映射简易JDBC示例二级索引二级索引配置文件全局索引包含索引本地索引(localindex)HBase与Hive的集成使用场景集成方法示例整合已有HBase表示例整合Phoenix定义Phoenix官网地址https://phoenix.apache.org/Phoenix作为一款OLTP和ApacheHadoop的操作分析,是面向HB
IT小神
·
2023-10-24 01:03
大数据
Java
运维
hbase
大数据
Apache Doris (四十六): Doris数据更新与删除 - 批量删除
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入
大数据技术
讨论群聊,获取更多大数据资料。
IT贫道
·
2023-10-23 22:43
大数据OLAP体系技术栈
Apache
Doris
doris
数据有价值吗?如何评估?
了解数据的真正价值并熟练利用
大数据技术
的公司,正在得到持续增长。按市值计算,六大公司中有五家是大数据企业,包括苹果、亚马逊、Alphabet、微软、Facebook。
数据治理侠
·
2023-10-23 21:50
大数据技术
之-presto
一、Presto简介1、Presto概念Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。注意:虽然Presto可以解析SQL,但它不是一个标准的数据库。不是MySQL、Oracle的替代品,也不能用来处理在线事务(OLTP)2、Presto应用场景
是小先生
·
2023-10-23 21:24
大数据05-Hive
大数据
数据库
presto
解读大数据与Hadoop之间的关系
大数据技术
一旦进入超级计算时代,很快便可应用于普通企业,在遍地开花的过程中,它将改变许多行业业务经营的模式。但是很多人对大数据存在误解,下面就跟着小编来缕一缕大数据与Hadoop之间的关系。
qunqun8889
·
2023-10-23 01:05
大数据
大数据
大数据开发
大数据学习
大数据分析
Hadoop
深入探索大数据:常见案例解析与源代码分享
本文将深入探讨大数据的常见应用案例,并分享相应的源代码,帮助读者更好地理解
大数据技术
的运用。用户行为分析
大数据技术
在用户行为分析方面发挥着重要作用。
心之所向,或千或百
·
2023-10-23 01:17
大数据
大数据
大数据的简介:探索大规模数据的力量
大数据技术
的出现,使得我们能够处理和分析这些庞大的数据集,从而揭示隐藏在其中的模式、趋势和见解。在大数据领域,有几个关键概念需要
雨中徜徉的思绪漫溢
·
2023-10-22 15:20
大数据
大数据
云计算与
大数据技术
第一章
1.1什么是云计算云计算概述云计算(CloudComputing)是基于互联网的相关服务的增加,使用和交付模式,通常涉及通过互联网来提供动态易扩展且常为虚拟化的资源,是并行计算(ParallelComputing)、分布式计算(DistributedComputing)和网格计算(GridComputing)等的融合和发展,也是虚拟化(Virtualization),效用计算(UtilityCom
常愿43
·
2023-10-22 12:22
云计算
hadoop
mapreduce
大数据技术
之Kafka
文章目录Kafka四部分第1章Kafka概述1.1初识Kafka1.2消息队列1.2.1传统消息队列的应用场景1.2.2消息队列的两种模式1.3Kafka基础架构第2章Kafka生产者2.1生产者消息发送流程2.2生产者分区2.3生产者发送消息的分区策略2.4数据可靠性(去重)第3章KafkaBroker3.1KafkaBroker工作流程3.2Leader和Follower故障处理细节3.2.1
Red-P
·
2023-10-22 10:16
大数据基础
Kafka
kafka
大数据
大数据技术
学习笔记(二)—— Hadoop运行环境的搭建
目录1模版虚拟机准备1.1修改主机名1.2修改hosts文件1.3修改IP地址1.3.1查看网络IP和网关1.3.2修改IP地址1.4关闭防火墙1.5创建普通用户1.6创建所需目录1.7卸载虚拟机自带的openJDK1.8重启虚拟机2克隆虚拟机3在hadoop101上安装JDK3.1传输安装包并解压3.2配置JDK环境变量3.3测试JDK是否安装成功4在hadoop101上安装Hadoop4.1解
夏木夕
·
2023-10-22 08:08
大数据
大数据
分布式
hadoop
什么是大数据测试?有哪些类型?应该怎么测?
随着目前世界上各个国家使用大数据应用程序或应用
大数据技术
场景的数量呈指数增长,相应的,对于测试大数据应用时所需的知识与大数据测试工程师的需求也在同步增加。
软件测试曦曦
·
2023-10-22 07:09
软件测试工程师
自动化测试
软件测试
功能测试
软件测试
自动化测试
程序人生
职场发展
解决增长问题,才是企业突围的核心之道
2018年终,腾讯用
大数据技术
抓去了国内企业界最被提及最多的词语——增长。人口红利消退,买方市场带来的影响在各个行业愈加明显,“增长”一词成了中国乃至全球企业家的核心焦虑和关注点。
神马运营
·
2023-10-21 22:52
问卷调查法与后台数据的融合分析
特别是在移动互联网和
大数据技术
的驱动下,层出不穷的互联网企业利用产品特性及后台埋点技术获取了海量的用户数据,并基于后台数据分析开展多
小虾米被抢注
·
2023-10-21 09:32
大数据平台开发经验
如果我是一个有着10年大数据平台开发经验的开发者,面试时可能需要准备以下知识大数据生态系统:**熟悉
大数据技术
栈,如Hadoop、Spark、Flink等,了解它们的原理、用途和优劣势。
三思而后行,慎承诺
·
2023-10-21 07:04
架构
大数据
短视频矩阵源码开源搭建--基于PHP语言
短视频矩阵系统是一种基于云计算和
大数据技术
的智能化视频分发系统,旨在为用户提供个性化的短视频推荐和播放服务。
--- za898668
·
2023-10-21 05:00
抖音seo源码
短视频seo
抖音矩阵系统
矩阵
线性代数
java
开源
开发语言
php
sass
大数据技术
学习之 ZooKeeper应用——解决分布式系统单点故障。
大数据课程涵盖Java、spark、Hadoop等内容,而不是Java中涵盖大数据,现在是大数据的时代,学习大数据课程之前必须先了解大数据课程大纲,否则很容易学到假的大数据课程。今天小编给大家分享一下:ZooKeeper应用--解决分布式系统单点故障。1.单点故障问题什么是分布式系统中的单点故障:通常分布式系统采用主从模式,就是一个主控机连接多个处理节点。主节点负责分发任务,从节点负责处理任务,当
千锋大数据
·
2023-10-21 02:46
【
大数据技术
原理】MapReduce详解
本文主要针对MapReduce1.0相关概念进行介绍,主要参考厦大林子雨教授的mooc,结合自己理解总结成文。文章目录简介背景比较模型模型策略模型理念模型架构Map和Reduce函数体系结构工作流程过程拆解概览shuffle注意点应用程序执行流程实例:wordCount简介MapReduce是一种分布式并行编程框架,支持横向扩展的数据处理能力。HadoopMapReduce是分布式应用程序Hado
YoHu人家
·
2023-10-20 18:10
数据
mapreduce
big
data
hadoop
期末救命-
大数据技术
原理及应用(林子雨版)(巧记知识点)
大数据第一章1、三次信息化浪潮信息化浪潮发生时间标志解决问题第一次浪潮1980年前后个人计算机信息处理第二次浪潮1995年前后互联网信息传输第三次浪潮2010年前后物联网、云计算、大数据信息爆炸2、信息技术为大数据时代提供技术支撑(大数据到来的原因)?1.存储设备容量不断增加,价格在不断下降2.CPU处理能力大幅提升3.网络带宽不断增加3、数据产生方式的变革,是促成大数据时代来临的重要因素(数据产
泡泡里的月亮
·
2023-10-20 17:11
番外篇
经验分享
程序人生
最新最全大数据专业毕业设计选题精华汇总-持续更新中
大数据技术
在各个行业中的应用日益广泛,所
DanCheng-studio
·
2023-10-20 16:09
毕业设计
python
毕设
大数据之MapReduce——一个分布式的离线并行计算框架
前言对于没有接触过
大数据技术
的人来说,听到大数据这个名词可能会感到很陌生,会很疑惑大数据是个什么东西。当年刚毕业的我就是这样。
微亮之海
·
2023-10-20 15:37
big
data
mapreduce
分布式
Kerberos安全认证-连载7-
大数据技术
组件之搭建Kafka集群
目录1.节点划分2.安装配置Kafka3.Kafka命令操作技术连载系列,前面内容请参考前面连载6内容:https://blog.csdn.net/qq_32020645/article/details/1310812461.节点划分这里选择Kafka版本为3.3.1,对应的搭建节点如下:节点IP节点名称Kafka服务192.168.179.4node1kafkabroker192.168.179
IT贫道
·
2023-10-20 13:36
Kerberos安全认证
大数据
安全
kafka
大数据技术
之 Flink-CDC
第1章CDC简介1.1什么是CDCCDC是ChangeDataCapture(变更数据获取)的简称。在广义的概念上,只要是能捕获数据变更的技术,我们都可以称之为CDC。核心思想是,监测并捕获数据库的变动(包括数据或数据表的插入、更新以及删除等),将这些变更按发生的顺序完整记录下来,写入到消息中间件中以供其他服务进行订阅及消费。目前通常描述的CDC技术主要面向数据库的变更,是一种用于捕获数据库中数据
骚戴
·
2023-10-20 12:58
大数据
大数据
Flink-CDC
大数据技术
系列(1)
大数据技术
概述 转载于:https://younger.blog.csdn.net/article/details/127632128?
爱吃西瓜的小菜鸟
·
2023-10-20 11:32
数据库
大数据
大数据技术
之Hadoop(入门)V3.0 --配置安装较多
1.1大数据概念1.2大数据特点(4V)1.3大数据应用场景1.4大数据发展前景1.5大数据部门业务流程分析1.6大数据部门组织结构(重点)第2章从Hadoop框架讨论大数据生态2.1Hadoop是什么2.2Hadoop发展历史(了解)2.3Hadoop三大发行版本(了解)Hadoop三大发行版本:Apache、Cloudera、Hortonworks。Apache版本最原始(最基础)的版本,对于
okbin1991
·
2023-10-20 07:00
hadoop
大数据
hdfs
分布式
mapreduce
Apache SeaTunnel Web 功能正式发布!
在
大数据技术
的不断进步之下,ApacheSeaTunnel成为了众多开发者和企业关注的焦点。今天,我们很高兴地宣布:ApacheSeaTunnelWeb功能已正式发布,带来了前所未有的易用性和效率。
SeaTunnel
·
2023-10-20 07:25
大数据
食品安全大数据可视化关联分析
点击上方蓝字关注我们食品安全大数据可视化关联分析陈谊,孙梦,武彩霞,孙小然北京工商大学计算机学院食品安全
大数据技术
北京市重点实验室,北京100048摘要:随着检测技术的提高和互联网技术的广泛应用,食品安全数据的规模不断增大
唐名威
·
2023-10-20 00:11
可视化
大数据
数据挖掘
编程语言
机器学习
Apache Doris (四十四): Doris数据更新与删除 - Delete 数据删除
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入
大数据技术
讨论群聊,获取更多大数据资料。
IT贫道
·
2023-10-20 00:59
大数据OLAP体系技术栈
Apache
Doris
doris
Apache Doris (四十五): Doris数据更新与删除 - Sequence 列
个人主页:IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入
大数据技术
讨论群聊,获取更多大数据资料。
IT贫道
·
2023-10-20 00:22
大数据OLAP体系技术栈
Apache
Doris
doris
大数据开发中的秘密武器:探索Hadoop纠删码的奇妙世界
随着
大数据技术
的发展,HDFS作为Hadoop的核心模块之一得到了广泛的应用。为了系统的可靠性,HDFS通过复制来实现这种机制。
技术琐事
·
2023-10-19 22:46
hadoop
java
java-ee
后端
spring
简单谈谈我参加数据分析省赛的感受与体会
该竞赛旨在鼓励和推动大数据分析领域的技术创新和人才培养,促进
大数据技术
与应用的深度融合,切实解决实际问题。
鲜于言悠905
·
2023-10-19 16:41
经验分享
数据分析
数据挖掘
学习方法
程序人生
程序员创富
生活
学习
【数据仓库】hadoop生态圈与数据仓库
转换与装载过程5.4.过程管理和自动化调度5.5.数据目录(或者称为元数据管理)5.6.查询引擎和SQL层5.7.用户界面本文主要讨论:关系型数据库拓展的瓶颈cap理论想了解数仓需要哪些能力以及这些能力靠哪些
大数据技术
实现
roman_日积跬步-终至千里
·
2023-10-19 11:12
数据仓库
数据仓库
hadoop
大数据
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他