【大数据技术】

解读大数据与Hadoop之间的关系

大数据技术一旦进入超级计算时代，很快便可应用于普通企业，在遍地开花的过程中，它将改变许多行业业务经营的模式。但是很多人对大数据存在误解，下面就跟着小编来缕一缕大数据与Hadoop之间的关系。
qunqun8889·2023-10-23 01:05

深入探索大数据：常见案例解析与源代码分享

本文将深入探讨大数据的常见应用案例，并分享相应的源代码，帮助读者更好地理解大数据技术的运用。用户行为分析大数据技术在用户行为分析方面发挥着重要作用。
心之所向，或千或百·2023-10-23 01:17

大数据的简介：探索大规模数据的力量

大数据技术的出现，使得我们能够处理和分析这些庞大的数据集，从而揭示隐藏在其中的模式、趋势和见解。在大数据领域，有几个关键概念需要
雨中徜徉的思绪漫溢·2023-10-22 15:20

云计算与大数据技术 第一章

1.1什么是云计算云计算概述云计算(CloudComputing)是基于互联网的相关服务的增加，使用和交付模式，通常涉及通过互联网来提供动态易扩展且常为虚拟化的资源，是并行计算(ParallelComputing)、分布式计算(DistributedComputing)和网格计算(GridComputing)等的融合和发展，也是虚拟化(Virtualization)，效用计算(UtilityCom
常愿43·2023-10-22 12:22

大数据技术之Kafka

文章目录Kafka四部分第1章Kafka概述1.1初识Kafka1.2消息队列1.2.1传统消息队列的应用场景1.2.2消息队列的两种模式1.3Kafka基础架构第2章Kafka生产者2.1生产者消息发送流程2.2生产者分区2.3生产者发送消息的分区策略2.4数据可靠性（去重）第3章KafkaBroker3.1KafkaBroker工作流程3.2Leader和Follower故障处理细节3.2.1
Red-P·2023-10-22 10:16

大数据技术学习笔记（二）—— Hadoop运行环境的搭建

目录1模版虚拟机准备1.1修改主机名1.2修改hosts文件1.3修改IP地址1.3.1查看网络IP和网关1.3.2修改IP地址1.4关闭防火墙1.5创建普通用户1.6创建所需目录1.7卸载虚拟机自带的openJDK1.8重启虚拟机2克隆虚拟机3在hadoop101上安装JDK3.1传输安装包并解压3.2配置JDK环境变量3.3测试JDK是否安装成功4在hadoop101上安装Hadoop4.1解
夏木夕·2023-10-22 08:08

什么是大数据测试？有哪些类型？应该怎么测?

随着目前世界上各个国家使用大数据应用程序或应用大数据技术场景的数量呈指数增长，相应的，对于测试大数据应用时所需的知识与大数据测试工程师的需求也在同步增加。
软件测试曦曦·2023-10-22 07:09

解决增长问题，才是企业突围的核心之道

2018年终，腾讯用大数据技术抓去了国内企业界最被提及最多的词语——增长。人口红利消退，买方市场带来的影响在各个行业愈加明显，“增长”一词成了中国乃至全球企业家的核心焦虑和关注点。
神马运营·2023-10-21 22:52

问卷调查法与后台数据的融合分析

特别是在移动互联网和大数据技术的驱动下，层出不穷的互联网企业利用产品特性及后台埋点技术获取了海量的用户数据，并基于后台数据分析开展多
小虾米被抢注·2023-10-21 09:32

大数据平台开发经验

如果我是一个有着10年大数据平台开发经验的开发者，面试时可能需要准备以下知识大数据生态系统：**熟悉大数据技术栈，如Hadoop、Spark、Flink等，了解它们的原理、用途和优劣势。
三思而后行，慎承诺·2023-10-21 07:04

短视频矩阵源码开源搭建--基于PHP语言

短视频矩阵系统是一种基于云计算和大数据技术的智能化视频分发系统，旨在为用户提供个性化的短视频推荐和播放服务。
--- za898668·2023-10-21 05:00

大数据技术学习之 ZooKeeper应用——解决分布式系统单点故障。

大数据课程涵盖Java、spark、Hadoop等内容，而不是Java中涵盖大数据，现在是大数据的时代，学习大数据课程之前必须先了解大数据课程大纲，否则很容易学到假的大数据课程。今天小编给大家分享一下：ZooKeeper应用--解决分布式系统单点故障。1.单点故障问题什么是分布式系统中的单点故障：通常分布式系统采用主从模式，就是一个主控机连接多个处理节点。主节点负责分发任务，从节点负责处理任务，当
千锋大数据·2023-10-21 02:46

【大数据技术原理】MapReduce详解

本文主要针对MapReduce1.0相关概念进行介绍，主要参考厦大林子雨教授的mooc，结合自己理解总结成文。文章目录简介背景比较模型模型策略模型理念模型架构Map和Reduce函数体系结构工作流程过程拆解概览shuffle注意点应用程序执行流程实例：wordCount简介MapReduce是一种分布式并行编程框架，支持横向扩展的数据处理能力。HadoopMapReduce是分布式应用程序Hado
YoHu人家·2023-10-20 18:10

期末救命-大数据技术原理及应用(林子雨版）（巧记知识点）

大数据第一章1、三次信息化浪潮信息化浪潮发生时间标志解决问题第一次浪潮1980年前后个人计算机信息处理第二次浪潮1995年前后互联网信息传输第三次浪潮2010年前后物联网、云计算、大数据信息爆炸2、信息技术为大数据时代提供技术支撑（大数据到来的原因）？1.存储设备容量不断增加，价格在不断下降2.CPU处理能力大幅提升3.网络带宽不断增加3、数据产生方式的变革，是促成大数据时代来临的重要因素（数据产
泡泡里的月亮·2023-10-20 17:11

最新最全大数据专业毕业设计选题精华汇总-持续更新中

大数据技术在各个行业中的应用日益广泛，所
DanCheng-studio·2023-10-20 16:09

大数据之MapReduce——一个分布式的离线并行计算框架

前言对于没有接触过大数据技术的人来说，听到大数据这个名词可能会感到很陌生，会很疑惑大数据是个什么东西。当年刚毕业的我就是这样。
微亮之海·2023-10-20 15:37

Kerberos安全认证-连载7-大数据技术组件之搭建Kafka集群

目录1.节点划分2.安装配置Kafka3.Kafka命令操作技术连载系列，前面内容请参考前面连载6内容:https://blog.csdn.net/qq_32020645/article/details/1310812461.节点划分这里选择Kafka版本为3.3.1,对应的搭建节点如下：节点IP节点名称Kafka服务192.168.179.4node1kafkabroker192.168.179
IT贫道·2023-10-20 13:36

大数据技术之 Flink-CDC

第1章CDC简介1.1什么是CDCCDC是ChangeDataCapture（变更数据获取）的简称。在广义的概念上，只要是能捕获数据变更的技术，我们都可以称之为CDC。核心思想是，监测并捕获数据库的变动（包括数据或数据表的插入、更新以及删除等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。目前通常描述的CDC技术主要面向数据库的变更，是一种用于捕获数据库中数据
骚戴·2023-10-20 12:58

大数据技术系列（1）

大数据技术概述  转载于：https://younger.blog.csdn.net/article/details/127632128?
爱吃西瓜的小菜鸟·2023-10-20 11:32

大数据技术之Hadoop（入门）V3.0 --配置安装较多

1.1大数据概念1.2大数据特点(4V)1.3大数据应用场景1.4大数据发展前景1.5大数据部门业务流程分析1.6大数据部门组织结构(重点)第2章从Hadoop框架讨论大数据生态2.1Hadoop是什么2.2Hadoop发展历史(了解)2.3Hadoop三大发行版本(了解)Hadoop三大发行版本：Apache、Cloudera、Hortonworks。Apache版本最原始(最基础)的版本，对于
okbin1991·2023-10-20 07:00

Apache SeaTunnel Web 功能正式发布！

在大数据技术的不断进步之下，ApacheSeaTunnel成为了众多开发者和企业关注的焦点。今天，我们很高兴地宣布：ApacheSeaTunnelWeb功能已正式发布，带来了前所未有的易用性和效率。
SeaTunnel·2023-10-20 07:25

食品安全大数据可视化关联分析

点击上方蓝字关注我们食品安全大数据可视化关联分析陈谊,孙梦,武彩霞,孙小然北京工商大学计算机学院食品安全大数据技术北京市重点实验室，北京100048摘要：随着检测技术的提高和互联网技术的广泛应用，食品安全数据的规模不断增大
唐名威·2023-10-20 00:11

Apache Doris (四十四）： Doris数据更新与删除 - Delete 数据删除

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-10-20 00:59

Apache Doris (四十五）： Doris数据更新与删除 - Sequence 列

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-10-20 00:22

大数据开发中的秘密武器：探索Hadoop纠删码的奇妙世界

随着大数据技术的发展，HDFS作为Hadoop的核心模块之一得到了广泛的应用。为了系统的可靠性，HDFS通过复制来实现这种机制。
技术琐事·2023-10-19 22:46

简单谈谈我参加数据分析省赛的感受与体会

该竞赛旨在鼓励和推动大数据分析领域的技术创新和人才培养，促进大数据技术与应用的深度融合，切实解决实际问题。
鲜于言悠905·2023-10-19 16:41

【数据仓库】hadoop生态圈与数据仓库

转换与装载过程5.4.过程管理和自动化调度5.5．数据目录（或者称为元数据管理）5.6．查询引擎和SQL层5.7．用户界面本文主要讨论：关系型数据库拓展的瓶颈cap理论想了解数仓需要哪些能力以及这些能力靠哪些大数据技术实现
roman_日积跬步-终至千里·2023-10-19 11:12

2022-11-28

在钢铁企业智慧能源管控中心构建过程中,主要依靠的是大数据技术优势,将迅捷的计算方法和廉价传感器作为基础,为钢铁企业经营生产提供支持,形成了多元化的能源供给方式。1.钢铁企
z张燕婷·2023-10-19 05:59

表单对象与大数据：优化数据采集与分析

在这个过程中，表单对象和大数据技术成为了不可或缺的工具。本文将介绍如何利用表单对象和大数据技术来优化数据的采集和分析，以实现更高效的业务决策。
抱紧大佬大腿不松开·2023-10-19 02:56

产教融合 | 中南大学暑期实训，用万应低代码践行敏捷开发之路

2023年8月11日，由潇湘大数据研究院、中南大学计算机学院及云畅科技联合组织的2020级数据科学与大数据技术专业暑期‘生产实训’项目圆满结束。
万应低代码·2023-10-19 01:41

Apache Doris (四十一）： RESOTRE数据恢复

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-10-18 21:50

Apache Doris (四十二）： RECOVER数据删除恢复

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-10-18 21:50

Apache Doris (四十）： BACKUP数据备份

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-10-18 21:20

Apache Doris (四十三）： Doris数据更新与删除 - Update数据更新

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2023-10-18 21:14

第二课 大数据技术之Fink1.13的实战学习-API操作

第二课大数据技术之Fink1.13的实战学习-API操作文章目录第二课大数据技术之Fink1.13的实战学习-API操作第一节执行环境ExecutionEnvironment1.1DataStreamAPI
道教儒佛电磁波·2023-10-18 21:11

伸手党看过来 从入门到精通的大数据课程视频你确定要错过？

大数据时代，学习大数据技术已然成为一股热潮，不仅仅是计算机专业的专职，还有很多不是计算机专业的学生也纷纷踏入大数据行业。毕竟大数据行业的就业前景和薪资待遇是如此的诱人。大数据开发工
千锋大数据·2023-10-18 18:27

Flink SQL 时区

大数据技术AIFlink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料95篇原创内容公众号TIMESTAMPvsTIMESTAMP_LTZTIMESTAMP类型TIMESTAMP
hyunbar·2023-10-18 17:38

大数据技术之Hive SQL题库-中级

第1章环境准备1.1用户信息表1）表结构user_id(用户id)gender(性别)birthday(生日)101男1990-01-01102女1991-02-01103女1992-03-01104男1993-04-012）建表语句hive>DROPTABLEIFEXISTSuser_info;CREATEtableuser_info(user_idstringcomment'用户id',gen
骚戴·2023-10-18 11:13

经济停滞是因为思路没打开

第四次科技革命，大数据技术与5G通讯的迅速发展，让提速跨越生产常态成为可能。新能源车与储能正在开发与利用，那么，与之配套的路桥与充电桩是不是也要大力发展。
叶黄知是缘浅·2023-10-18 03:58

工作十年，我都用到了哪些在学校学到的知识

移动互联网磅礴发展的十年搜索技术的逐渐成熟的后十年推荐技术应用最为广泛的十年大数据技术越发成熟的十年我眼中过去技术发展的十年，我怎么理解当前的互联网公司的技术工种？
沐曌·2023-10-17 22:02

不得不说的六个大数据产业园

近年来，随着物联网、云计算的发展，大数据技术也成为了热门词汇。而对于大数据企业的发展，大数据产业园的作用可谓举足轻重。
互联互通社区·2023-10-17 18:51

大数据技术系列：【大数据技术体系】学习实践导览

导言截止目前为止，在自己的技术生涯中，要说哪一种技术体系的学习路径最为曲折，那非大数据技术体系莫属了。
yaocoder·2023-10-17 17:58

315曝光数据隐私问题，企业如何上好数据隐私保护这门必修课？

这是今年315晚会曝光的数据隐私滥用现象：一些科技公司利用大数据技术，获取用户个人信息和上网行为，并提供给营销公司，形成利用大数据拨打骚扰电话的黑色产业链。此消息一经报道，舆论瞬间哗然。
大数据在线·2023-10-17 06:20

全流程多维度风控管理，大数据技术保障运营安全

“大数据风控”是近年来金融行业的热词，最近，越来越多的机构与平台不断提到大数据风控，那么，什么是大数据呢，什么又是大数据风控呢，钱盆网大数据风控究竟怎么保护出借人的利益呢？大数据风控是什么大数据，顾名思义，是指体量特别大，类别特别多的数据集。但在今天的金融行业，大数据一词的含义主要是指全量数据、用户行为数据和围绕客户的信用数据。这些数据的特点是和用户的信用情况高度相关。大数据风控，确切地说就是利用
天启四骑士_7152·2023-10-17 02:55

综合能源系统（8）——综合能源系统支撑技术

综合能源系统关键技术与典型案例何泽家，李德智主编1、大数据技术1.1、大数据技术概述大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量
Fo*(Bi)·2023-10-16 22:24

大数据分析就业班项目介绍

大数据分析培训的适学人员包括：1、大三大四应届学生数学类、统计类、计算机类、经济金融类等专业缺乏工作经验和技能，对未来没有明确目标与规划，想拥有一技之长2、有基础的在职人员具有一定数据分析、或者软件开发基础想通过提升大数据技术
泰迪智能科技·2023-10-16 18:14

9月活动回顾（免费领取PPT）｜火山引擎DataLeap、ByteHouse多位专家带来DataOps、实时计算等前沿技术分享！

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群在上月举行的火山引擎开发者社区Meetup第12期暨超话数据专场《数智化转型背景下的火山引擎大数据技术揭秘》上，来自火山引擎
字节数据平台·2023-10-16 14:56

python数据分析——大数据伦理风险分析

大数据伦理风险分析前言一、大数据伦理二、大数据技术伦理风险(一)算法安全性、可信赖性及稳定性风险及其应对(二)算法的可解释性风险及其应对(三)算法的决策不可预见性风险及其应对(四)数据收集与储存中的泄漏风险及其应对案例
鲜于言悠905·2023-10-16 09:46

大数据技术-Hive学习笔记

目录Hive-安装部署Hive-配置元数据库MetaStore配置MetaStore到MySQL使用元数据服务的方式访问Hive使用JDBC方式访问Hive后台启动Hive-常用SHELL命令Hive常用交互命令Hive常用命令Hive常见属性配置Hive运行日志信息配置打印当前库和表头Hive参数配置方式Hive-数据类型基本数据类型集合数据类型集合数据操作Hive-DDL数据定义数据库操作内部
笑一笑、·2023-10-16 06:01

Doris入门了解

微信公众号：大数据高性能计算大数据存储与分析入门学习文档：深入了解Doris大数据技术已成为现代数据处理的核心组成部分，为企业提供了更多洞察和决策支持。
花开终为谢·2023-10-16 01:15
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他