大数据相关技术汇总

【大数据】大数据相关概念

文章目录大数据：一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合，具有海量的数据规模、快速的数据流转、多样的数据类型以及价值密度四大特征。Hadoop：是一个能够对大量数据进行分布式处理的软件框架，用户可以利用Hadoop生态体系开发和处理海量数据。由于Hadoop有可靠及高效的处理性能，使得它逐渐成为分析大数据的领先平台。Hadoop的核心是HDFS和Map
白白卡路里·2023-06-21 18:03

大数据相关常用软件下载地址集锦

  由于大数据开发中经常需要用到Zookeeper、Hadoop、Spark、HBase、Kafka、Flume、Redis、Hive等软件，安装的时候需要它们的下载地址，这里就汇总一下，方便同学们查找。一、软件下载地址如下VMware下载地址：https://www.vmware.com/cn.htmlcentos镜像下载地址：http://mirrors.aliyun.com/centos/7
想你依然心痛·2023-06-21 09:10

[大数据 Hive的周边工具 Sqoop应用集成]

MySQLJavaSpringboot框架集成Sqoop,Hive,Mysql实现hive的导入/导出POM依赖:在application.properties文件中添加以下配置：代码实现:指令含义解读:控制器实现前言:分享一下大数据相关的应用学习
是汤圆丫·2023-06-21 06:04

大数据相关性大于因果性

由因果关系转变为关注相关性关注相关性而不是因果关系，社会需要放弃它对因果关系的渴求，而仅需关注相关关系，也就是说只需要知道是什么，而不需要知道为什么。这就推翻了自古以来的惯例，而我们做决定和理解现实的最基本方式也将受到挑战。例如：大数据思维一个最突出的特点，就是从传统的因果思维转向相关思维，传统的因果思维是说我一定要找到一个原因，推出一个结果来。而大数据没有必要找到原因，不需要科学的手段来证明这个
金多·2023-06-20 23:20

2023-04-17移动云苏州研究所java开发面试

问的问题基本上是大数据相关的或者是java基础的，这应该是和我的过往项目经历相关的。1、怎么搭建一个大数据平台根据我的工作经验以及我平时对大数据平台技术的了解，我讲了一些我对大数据平台的认识。
志起计算机编程·2023-06-19 03:42

Flink实战：FlinkSQL接收开启Kerberos认证的Kafka集群数据存入MySQL

微信公众号：大数据开发运维架构关注可了解更多大数据相关的资讯。
大数据开发运维架构·2023-06-19 01:32

【真·一篇就够了】网络优秀博文汇总

文章目录注:部分参考《后端架构师技术图谱》架构相关存储搜索分布式相关监控链路跟踪日志队列中间件微服务相关大数据相关语言相关Linux系统相关网络相关数据结构算法相关技术社区注:部分参考《后端架构师技术图谱
独臂阿童木·2023-06-18 09:25

大数据相关概念了解

Hadoop生态及Hive、HBase、Impala、HDFS之间的关系Hadoop生态(什么是Hadoop)ApacheHadoop软件库是一个框架，允许使用简单的编程模型在计算机集群之间对大型数据集进行分布式处理。它旨在从单个服务器扩展到数千台计算机，每台计算机都提供本地计算和存储。库本身不是依靠硬件来提供高可用性，而是旨在检测和处理应用程序层的故障，因此在计算机群集（每台计算机都可能容易出现
java资深菜鸟·2023-06-17 06:23

大数据相关技术

大数据相关技术所谓大数据，通俗理解就是短时间内快速产生的海量数据的各种有价值的数据，关键词是时间短，快速，海量，有价值，数据，通过大数据技术分析海量数据来得到其中有价值的数据用于商业途径，譬如分析用户的行为来进行定向广告投放
彼得潘多·2023-06-16 19:00

python海量数据分析师职业技能_大数据分析师技能图谱详解与零基础自学内容大全...

随着大数据在国内的发展，大数据相关人才却出现了供不应求的状况，大数据分析师更是被媒体称为“未来最具发展潜力的职业之一”。大数据分析师大数据分析师就是一群玩数据的人
weixin_39907133·2023-06-16 17:27

大数据分析师高级证书_有大数据分析师资格证书吗？

其数据分析方式与传统的数据分析师类似，但是在涉及到数据挖掘、预处理、可视化等环节时，就需要更多大数据相关的技术了。大数据分析师资格正式也就是数据分析师证书。
Jancon·2023-06-16 17:57

【迅动股票】交易差价降低成本，趋势交易者仍需耐心等待

关注三季度主营业绩持续预增个股，及5G，芯片，软件服务，云计算，大数据相关的板块个股。从34周的循环周期窗口计算，认为9月中下旬才是进入趋势的参与买点。
迅动·2023-06-14 14:34

kafka集群搭建超详细教程

kafka安装目录6、编写kafka集群操作脚本7、启动kafka集群8、测试创建主题查看主题列表启动控制台生产者启动控制台消费者前言大家好，我是风云，欢迎大家关注我的博客，在未来的日子里我们一起来学习大数据相关的技术
笑看风云路·2023-06-14 08:44

【大数据之路1】Hadoop 入门

1.Hadoop入门1.大数据概述1.大数据相关说明2.Hadoop及大数据生态圈3.Hadoop核心组件4.Hadoop生态圈5.集群安装模式6.Hadoop运行模式7.Hadoop工作流程8.Hadoop
程序员胖五·2023-06-13 18:13

pyflink实现实时数据从kafka消费到mysql

写在前头：更多大数据相关精彩内容请进我的知识星球，每周定期更新正篇技术路线：实时数据——>kafka——>flink——>mysql1、实时数据：参考链接https://blog.csdn.net/qq
菜鸟社长·2023-06-13 05:01

Day05 05-MySQL实战练习及答案

大数据开发、数据仓库开发、数据分析师或者数据治理等大数据相关岗位，其实更多的时候都是在对SQL进行拿捏，所以建议大家有时间一定一定要把
Aidon-东哥博客·2023-06-12 18:16

人工智能时代，什么人会失业

最近人工智能、大数据相关的智能方向非常火爆，连酒桌中都有人问我，博士，机器人那么厉害，我们以后不是没工作了。
MikeLiu·2023-06-12 13:02

Ai前沿技术汇总[1]：Quivr非结构化信息搜索、Drag Your GAN AI修图、MiniGPT-4、Falcon-40B、localGPT

“AI前沿技术”专栏汇集了最前沿的人工智能技术，包括自然语言处理、语音识别、图像识别、机器学习、深度学习、强化学习、计算机视觉、区块链技术、智能机器人技术和虚拟现实技术等。本专栏将带您了解人工智能领域的最新进展和研究成果，探索人工智能技术的应用前景，感受人工智能给社会带来的变革。1.Quivr是一款使用生成AI技术来存储和检索非结构化信息的“第二大脑”1.Quivr是一款使用生成AI技术来存储和检
汀、人工智能·2023-06-11 04:02

Kafka入门:集群安装部署（最新版kafka-2.4.0）

微信公众号：大数据开发运维架构关注可了解更多大数据相关的资讯。
大数据开发运维架构·2023-06-10 22:44

[博学谷学习记录] 超强总结，用心分享|Pyspark基础入门7_RDD的内核调度

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-06-09 03:25

1. Hadoop 入门

1.Hadoop入门1.大数据概述1.大数据相关说明大数据由来：传统数据处理应用软件不足以处理（存储和计算）它们大而复杂的数据集大数据面临的两大问题：针对海量数据的存储、计算大数据的特性：容量大、种类多
程序员胖五·2023-06-08 19:38

大数据架构师的岗位工作职责及应具备的能力

技术研发类岗位指的是针对大数据相关系统、软件、产品和功能进行的开发，而非IT系统的开发。
皮皮杂谈·2023-06-07 07:18

大数据开发及和大数据相关的技术

在现如今，随着互联网技术飞速的发展，目前有不少朋友询问关于大数据方面的问题，比如什么是大数据开发啊，和大数据相关的技术是什么呢等问题，我们今天就浅谈一下大数据开发及和大数据相关的技术的问题。
乐姐·2023-06-07 05:52

大数据面试题目（第一部分）

以下是一些关键概念和技术与大数据相关：概念/技术说明分布式文件系统大数据通常存储在分布式文件系统中，例如HadoopDistributedFileSystem(HDFS)。
码视野·2023-06-07 02:54

【i阿极送书——第三期】《Hadoop大数据技术基础与应用》

文章目录系列文章目录1、好书推荐2、内容简介3、目录4、章节介绍5、活动1、好书推荐2、内容简介本书由浅入深地介绍了Hadoop技术生态的重要组件，让读者能够系统地了解大数据相关技术
i阿极·2023-06-06 22:32

全平台数据(数据库)管理工具 DataCap 管理 Rainbond 上的所有数据库

DataCap是用于数据转换、集成和可视化的集成软件，支持多种数据源、文件类型、大数据相关数据库、关系数据库、NoSQL数据库等。
·2023-04-21 13:41

全平台数据(数据库)管理工具 DataCap 管理 Rainbond 上的所有数据库

DataCap是用于数据转换、集成和可视化的集成软件，支持多种数据源、文件类型、大数据相关数据库、关系数据库、NoSQL数据库等。
Rainbond-开源云原生应用管理平台·2023-04-21 13:18

数据之旅-开篇

在这些年的时间里做过WEB开发、大数据相关等工作，去过传统IT企业也去过互联网公司。新的一年总要有些进步与改变，那就开始写总结吧，做些有意义的事情。
叶之城·2023-04-20 10:20

大数据相关开源项目及组件汇总

前言花了一点时间，整理了大数据相关开源项目、组件和官网地址。按照实际应用功能的不同，分为以下10个部分，并在目录图中进行归纳，后续章节的内容则是分别介绍各组件的背景及应用场景。
wandy0211·2023-04-19 14:32

Pyspark_用户画像项目_1(数据通过Sqoop导入到Hive中)

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-18 11:32

最新hadoop大数据零基础入门新手学习视频教程

最新在学习hadoop、storm大数据相关技术，发现网上hadoop、storm相关学习视频少之又少，我这里整理了传智播客段海涛老师的hadoop学习视频，给大家学习。
山泥若丶·2023-04-16 16:39

大数据技术（入门篇） --- centos7安装CDH6.2集群

随着信息化时代的进步，业务系统的数据量出现了爆发式的增长，带来的不良结果就是数据库的数据量剧增，而部分业务系统需要实时数据，有些业务系统需要离线计算后的数据，所以就产生了大数据技术，因此最近在学习大数据相关的知识点
北漂的菜小白·2023-04-16 01:19

系统复习大数据知识点

大数据相关知识点大数据转行不易，希望能帮助到你资料下载+XMind：https://pan.baidu.com/s/1Xn7WPNwNUwdwDW6V0ZGyvg提取码：raog复制这段内容后打开百度网盘手机
Jecky不姓码·2023-04-15 09:27

从零构建react开发技术汇总

npm设置淘宝镜像sudonpminstall-gcnpm--registry=https://registry.npm.taobao.orgnpmsetregistryhttps://registry.npm.taobao.org更新npm版本[email protected]更新node版本[email protected]构建react开发环境npminstall-
mask哥·2023-04-15 00:51

220所院校获教育部批准开设大数据相关专业

2019年3月28日，教育部公布2018年度普通高等学校本科专业备案和审批结果。2018年度有203所本科院校获批“数据科学与大数据技术”专业（专业代码080910T），其中，有8所院校由理学调整为工学申报，实际新增院校为195所，工学149所，理学54所，分布于28个省/市。各省/市获批高校数量前三名为：河南、广东、山东。自2016年，北京大学成为教育部首批获准开设“数据科学与大数据技术”专业的
李雪燃·2023-04-13 16:22

大数据相关代码

创建表droptableifexistsdatabase.tablecreateexternaltabledatabase.name(idstring,namestring)ROWFORMATDELIMITEDFIELDSTERMINATEDBY','STOREDASTEXTFILElocation'/data/';-----------------------------------------
yaobo2816·2023-04-11 01:10

大数据知识汇总

1.1文章介绍介绍本文主要介绍大数据相关的技术和项目1.2目录1.1文章介绍介绍1.2项目介绍1.3项目指标1.3.1离线指标
光数葱丁·2023-04-08 17:45

线程同步技术汇总

备注：整理一些同步技术，方便日后回顾。目前技术还在学习中，了解到同步方面的新知识会补充到本文。关于Zookeeper实现的分布式锁，目前还在研究中，日后补充单机多线程情况：synchronized1、解读：（1）jvm层面的同步技术，字节码实现。当代码执行出现问题的时候（比如说抛出异常），JVM会自动释放锁，让其他阻塞的线程继续执行（2）可重入的：当线程已经获取锁对象，并且再次进入同步块，把锁的计
Huang远·2023-04-07 05:47

Pyspark基础入门5_RDD的持久化方法

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-07 05:47

Pyspark基础入门6_RDD的共享变量

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-07 05:16

城市排水管道三类非开挖修复技术汇总

城市排水管网是现代化城市不可缺少的重要基础设施，是对城市经济发展具有全局性、先导性影响的基础产业，是城市水污染防治和城市排涝、防洪的骨干，是衡量现代化城市水平的重要标志。目前，我国大多数城市中排水管道的修复都是采用开挖后重新埋管的方法，随着城市化的进展，城市地下管线错综复杂，城市道路的负荷越来越严重，使得地下管线在修复的过程中存在大量的技术问题。随着城市建设的不断完善，非开挖铺管、修管和换管技术以
杭伟·2023-04-07 01:25

什么是 Hadoop？它主要能解决“大数据”的哪两个问题？

前言之前工作中,有接触到大数据的需求,虽然当时我们体系有专门的大数据部门,但是由于当时我们中台重构,整个体系的开发量巨大,共用一个大数据部门,人手已经忙不过来,没法办,为了赶时间,我自己负责的系统的大数据相关操作
Java后端架构猛猛·2023-04-06 16:23

Pyspark_结构化流1

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 09:45

Pyspark_结构化流2

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 09:45

Pyspark_结构化流3

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 09:15

人工智能大数据专业最好的大学 - 人工智能大数据云计算三者关系

大数据相关的技术紧紧围绕数据展开，包括数据的采集、整理、传输、存储、安全、分析、呈现和应用等等。目前，大数据的价值主要体现在分析和应用上，比如大数据场景分析等
阳阳2013哈哈·2023-04-06 08:27

Pyspark_结构化流4

Pyspark注：大家觉得博客好的话，别忘了点赞收藏呀，本人每周都会更新关于人工智能和大数据相关的内容，内容多为原创，PythonJavaScalaSQL代码，CVNLP推荐系统等，SparkFlinkKafkaHbaseHiveFlume
陈万君Allen·2023-04-06 08:11

三层vxlan原理_VXLAN技术在园区网的应用探讨

by:常笑随着互联网+、云计算以及大数据相关业务普及，以云计算、虚拟化等技术为基础的规模化运营云数据中心逐渐成为市场主流。
weixin_39951773·2023-04-05 02:03

参加区块链应用场景及基础架构、大数据讲座

周末去成都菁蓉国际中心听了区块链应用场景及基础架构、大数据相关的讲座，各类人才对新兴技术的探索、精益求精是带动社会向前发展的动力。以下是本次讲座内容和一些简单思考，拍砖引玉。
NydiaPeng·2023-04-04 16:45

特征工程之_筛选

2.特征工程 大数据相关的工作可简要地归纳为：模型部分和数据部分，在模型部分，目前大家的做法主要是拿现成的模型来用，对其做内部修改或重写的很少，主要工作在选型和调参。 
xieyan0811·2023-04-04 14:51
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他