MongoBD大数据处理

我理解的大数据和你理解有何不同？Hadoop、Spark、Storm、Drill

一时间，各种大数据处理技术如井喷一般涌现。Hadoop.Spark、Storm、Dremel、Drill等大数据解决方案争先
BAO7988·2020-08-04 11:45

cloudera-manager-el6-cm5.7部署流程，及踩坑过程和解决方案

ClouderaManager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件，对集群中主机、Hadoop、Hive、Spark
阿啄debugIT·2020-08-04 10:34

Hadoop--HDFS集群的搭建

1HADOOP介绍1.1介绍大数据处理的技术栈1、HADOOP是apache旗下的一套开源软件平台2、HADOOP提供的功能：利用服务器集群，根据用户的自定义业务逻辑，对海量数据进行分布式处理3、HADOOP
愤进的蜗牛·2020-08-04 07:25

视频教程-Python数据可视化教程：基于Plotly的动态可视化绘图-Python

从事多年JAVAEE、大数据处理方向的研发，设计和管理工作，擅长分布式开发和实时计算。对Hadoop、Storm、Spark等大数据领域技术框架有一定的实践经验。
leoguo微信·2020-08-04 04:00

视频教程-Python数据可视化 Matplotlib实战 视频课程-机器学习

从事多年JAVAEE、大数据处理方向的研发，设计和管理工作，擅长分布式开发和实时计算。对Hadoop、Storm、Spark等大数据领域技术框架有一定的实践经验。
weixin_33054339·2020-08-04 04:00

视频教程-19年并发编程及原理视频培训教程入门到精通-Java

年并发编程及原理视频培训教程入门到精通7年的开发架构经验，曾就职于国内一线互联网公司，开发工程师，现在是某创业公司技术负责人，擅长语言有node/java/python，专注于服务端研发，人工智能相关领域,熟悉分布式高可用系统的架构，大数据处理
weixin_31447939·2020-08-04 04:59

大数据学习笔记（三）——大数据处理框架Hadoop

第三章大数据处理框架Hadoop3.1概述3.1.1Hadoop简介Hadoop是Apache软件基金会旗下的一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构。
stepondust·2020-08-03 23:17

Spark入门笔记

书籍>-spark大数据处理技术-sparkmllib机器学习实践-ApacheSpark源码剖析-Spark快速数据处理-深入理解Spark核心思想与源码分析-统计学习方法-spark官方文档中文版环境搭建教程
jerry_hero·2020-08-03 18:28

【技术分享】探究数据库内核开发

演讲嘉宾姜瑞海山东瀚高数据库首席内核架构师现任山东瀚高基础软件股份有限公司瀚高数据库首席内核架构师，负责主持瀚高数据库集群的设计和研发工作，同时参与瀚高大数据处理平台的设计。
gaokeke·2020-08-03 10:18

Scala模式匹配、类型系统笔记

大数据处理首选Scala语言，Java语言在Java8之前无数据处理能力，无函数式编程。
shmily‘’·2020-08-03 07:19

LongAdder 高性能原子计数器

在大数据处理过程，为了方便监控，需要统计数据，少不了原子计数器。为了尽量优化性能，需要采用高效的原子计数器。在jdk8中，引入了LongAddr，非常适合多线程原子计数器。
melin1204·2020-08-03 02:01

Flink流式计算里的时间和watermark机制

一流计算对“批计算”的优势：“流计算”是相对于“批计算”来的，MapReduce，Spark底层的计算方式是目前主流的“批计算”实现方式，很多公司在使用这种方式做大数据处理。
flywind800·2020-08-03 00:34

大数据

潜在离网用户维挽场景场景二、综合网管分析平台-基站关联分析场景场景三、数据变现场景：户外数字媒体/非数字媒体价值评估场景四、企业级大数据平台架构1.总体介绍2.关键技术3.运营流程五、Hadoop基础技术1.大数据处理技术发展趋势
木瓜有益健康·2020-08-02 22:27

2015InfoQ软件大会技术记录

开发痛点所驱动的技术变革更是遍地开花、新的技术新的思维也是层出不穷；大会中频频提到的高扩展高可用架构、新兴前端(React.js、Flux、GraphQL、Relay、Immutability、Webpack、Babel)、大数据处理
dianxuequ6825·2020-08-02 17:19

hadoop基本教程之开源数据仓库工具hive

大数据课程培养的是德智体美全面发展，具有良好的职业道德和创新精神，且掌握计算机技术、hadoop、spark、storm开发、hive数据库、Linux操作系统等知识，具备分布式存储、分布式计算框架等技术，熟悉大数据处理和分析技术
肖晓晓·2020-08-02 14:31

Python的优点有哪些 Python编程要学哪些内容

越来越多的软件工程师使用Python进行大数据处理，越来越多的科研工作者使用Python来进行数据分析。
千锋郑州·2020-08-02 13:58

Spark 生态系统组件

摘要：随着大数据技术的发展，实时流计算、机器学习、图计算等领域成为较热的研究方向，而Spark作为大数据处理的“利器”有着较为成熟的生态圈，能够一站式解决类似场景的问题。
congsi9417·2020-08-02 12:24

HDFS、YARN、MapReduce原理--读书笔记

hadoop大数据工程师/hadoop工程师目的：高效的存储、处理这些海量、多种类、高速流动的数据hadoop来源google03~06年的三篇论文hadoop利用分而治之的朴素思想为大数据处理提供了一整套新的解决方案
BBlue-Sky·2020-08-01 14:11

如何选择合适的时钟系统厂家

NTP网络时钟同步系统技术必定将是整个大数据处理系统的重要支撑和保障。计算设备将统一、同步的标准时间用于记录各种事件发生时序，如E-MAIL
西安同步·2020-08-01 11:21

如何选择合适的时钟系统厂家

NTP网络时钟同步系统技术必定将是整个大数据处理系统的重要支撑和保障。计算设备将统一、同步的标准时间用于记录各种事件发生时序，如E-MAIL
西安同步·2020-08-01 11:19

Hadoop学习小结

Hadoop这个大数据处理框架
小雷FansUnion·2020-08-01 10:08

Hadoop是什么，主要由哪几个项目组成？

1Hadoop大数据处理的意义Hadoop得以在大数据处理应用中广泛应用得益于其自身在数据提取、变形和加载(ETL)方面上的天然优势。
人工智能爱好者·2020-08-01 10:58

视频教程-19年全套java教程javase零基础到高级视频idea小白自学编程jdk8-Java

jdk87年的开发架构经验，曾就职于国内一线互联网公司，开发工程师，现在是某创业公司技术负责人，擅长语言有node/java/python，专注于服务端研发，人工智能相关领域,熟悉分布式高可用系统的架构，大数据处理
weixin_33865748·2020-08-01 09:28

如何使用Greenplum提升PB级数据处理能力

在大数据处理方面，不同技术栈所具备的性能也有所不同。如何快速有效地处理这些体量庞大的数据，令不少开发者为之苦恼。
个推开发者·2020-08-01 09:53

Hadoop、Storm和Spark主流分布式系统特点和应用场景

概述大数据现在是业内炙手可热的话题，随着技术的发展，如HDFS，大数据存储技术已经不在是难点，但是对大数据如何做好存储后的下一步处理将是未来竞争的焦点，目前比较受欢迎的Storm,Spark,Hadoop三个大数据处理工具都是
chun_soft·2020-08-01 08:24

大数据处理技术之冗余消除

当然，数据加工是数据分析工作之前的工作，而在大数据处理中有很多数据整理的技术，其中最常见的就是冗余消除，那么什么是数据冗余呢？在这篇文章中我们就详细地给大家解答一下这个问题。
CDA·数据分析师·2020-08-01 08:45

大数据项目实战必备技能之Spark

导读：spark是基于内存计算的大数据并行计算框架，对于spark，Apachespark官方给出的定义：spark是一个快速和通用的大数据引擎，可以通俗的理解成一个分布式的大数据处理框架，它基于Rdd
Java架构没有996·2020-08-01 06:28

《大数据》第1期“专题”——大数据机器学习系统研究进展（下）

6跨平台统一大数据机器学习系统Octopus的研究设计6.1Octopus的基本设计思想上述绝大多数大数据机器学习方法和系统都是基于特定平台构建的，难以集成和兼容现有和未来出现的多种大数据处理引擎和平台
唐名威·2020-08-01 06:45

中外科研人员合作开发出光量子计算芯片

光量子计算机使用光子来编码量子比特，通过对光子的量子操控及测量来实现量子计算，有望解决密码破译、分子模拟、大数据处理等传统计算机难以解决或解决不好的计算任务。中国的军事科学院国防科技创新
蚂蚁芯城·2020-08-01 06:35

5G科普——边缘计算

其实如果说云计算是集中式大数据处理，边缘计算则可以理解为边缘式大数据处理。但不同的是，只是这一次，数据不用再传到遥远的云端，在边缘侧就能解决。边缘计算更适合实时的数据分析和智能化处理，相较单纯的云计
帆_5021·2020-08-01 05:36

戴尔数据库加速：让用户体验“飞”起来

以机械硬盘为核心的传统存储，缺乏对性能极大数据处理的灵活性，部署复杂的同时运维成本昂贵。如何让企业的数据库应用体验既快又稳？
weixin_33877092·2020-08-01 04:23

基于Apache Iceberg打造T+0实时数仓

导语大数据处理技术现今已广泛应用于各个行业，为业务解决海量存储和海量分析的需求。但数据量的爆发式增长，对数据处理能力提出了更大的挑战，同时对时效性也提出了更高的要求。
过往记忆·2020-08-01 02:18

别再叫我 Sql boy！

自从阿里Blink开源，Flink就因天然流式计算特性和强大处理性能，打破了Spark独霸实时计算领域的现状，一跃成为炙手可热的大数据处理框架。目前，包括阿里在内的很多公司都对Flink有一定布局。
大数据技术与架构·2020-08-01 02:09

到底什么才是大数据开发？

大数据开发其实分两种，第一类是编写一些Hadoop、Spark的应用程序，第二类是对大数据处理系统本身进行开发。第一类工作感觉更适用于dataanalyst这种职位吧，而
qq_43958076·2020-07-31 23:53

大数据处理 --- 求中位数

中位数并不是大小位于中间的数，而是排序之后，位置位于中间的数。若是n个数，n为奇数，则中位数是数组a[]排序之后a[(n+1)/2]；若n为偶数，中位数是(a[n/2]+a[n/2+1])/2如：5556789中位数是6题目：只有2G内存的pc机，在一个存有10G个整数的文件，从中找到中位数，写一个算法对于海量数据求中位数，在网上看到两种方法。1.分区间堆排序在现有M大小内存情况下若最多能够造出包
坚持是一种信仰·2020-07-31 20:30

CCF ADL97《图计算》整理

作为大数据处理的一种典型模式，图计算不仅对计算机体系结构提出了严峻的挑战，也对系统软件、数据管理和处理模式提出了重大挑战。
zxhohai·2020-07-31 18:03

spark简介

Spark由加州大学伯克利分校AMP实验室(Algorithms,Machines,andPeopleLab)开发，可用来构建大型的、低延迟的大数据处理的应用程序。
gongpulin·2020-07-31 17:15

大数据分析技术与实战之Spark Streaming（内含福利）

随着信息技术的迅猛发展，数据量呈现出爆炸式增长趋势，数据的种类与变化速度也远远超出人们的想象，因此人们对大数据处理提出了更高的要求，越来越多的领域迫切需要大数据技术来解决领域内的关键问题。
csdn大数据·2020-07-31 14:56

十分钟了解大数据处理的五大关键技术及其应用

BAT大数据工程师是怎么样炼成的数据处理是对纷繁复杂的海量数据价值的提炼，而其中最有价值的地方在于预测性分析，即可以通过数据可视化、统计模式识别、数据描述等数据挖掘形式帮助数据科学家更好的理解数据，根据数据挖掘的结果得出预测性决策。其中主要工作环节包括：大数据采集、大数据预处理、大数据存储及管理、大数据分析及挖掘、大数据展现和应用(大数据检索、大数据可视化、大数据应用、大数据安全等)。一、大数据采
首席数据师·2020-07-31 13:25

有java基础的人转行大数据该如何学习

Hadoop这是现在流行的大数据处理平台几乎已经成为大数据的代名词，所以这个是必学的。Hadoop里面包括几个组件HDFS、MapReduce和YARN，HDFS是存储数据的地方就像我
lockie_zou·2020-07-31 13:59

Powerbi：提高powerbi运行速度 [转载]

From：https://www.sohu.com/a/307969611_584557PowerBI是一个强大的工具，它的大数据处理能力、丰富的可视化对象、便捷的交互体验正在改变越来越多的人查看数据的方式
柚子大叔·2020-07-31 12:10

玩转工业大数据，你所需要了解的Kafka

在《工业大数据处理领域的“网红”——ApacheSpark》一文中，我们分享了新一代轻量级大数据快速处理平台。今天，我们将继
getech·2020-07-31 11:26

工业大数据处理领域的“网红”——Apache Spark

生活离不开水，同样离不开数据，我们被数据包围，在数据中生活。当数据越来越多时，就成了大数据。在“中国制造2025”的技术路线图中，工业大数据是作为重要突破点来规划的，而在未来的十年，以数据为核心构建的智能化体系会成为支撑智能制造和工业互联网的核心动力。而想要理解大数据，就需要理解大数据相关的查询、处理、机器学习、图计算和统计分析等。ApacheSpark作为新一代轻量级大数据快速处理平台，集成了大
getech·2020-07-31 11:25

通过LiveNVS(免费使用）集中化管理多个LiveNVR-数据透传摆脱局域网的公网IP限制

LiveNVR的解决方案.一个或多个LiveNVR采用主动注册的方式接入到LiveNVS,再由LiveNVS云管理平台进行统一的视频能力输出,并配套提供一整套的云端设备可视化运维功能,方便于用户进行云端的视频大数据处理
Marvin1311·2020-07-31 11:39

大数据和云计算是何关系？

大数据相当于海量数据的“数据库”，而且通观大数据领域的发展也能看出，当前的大数据处理一
weixin_33851429·2020-07-30 20:51

电子商务中数据分析的八大指标体系

而电子商务信息系统最核心的能力是大数据能力，包括大数据处理、数据分析和数据挖掘能力。无论是电商平台（如淘宝）还是在电商平台上销售产品的卖家，都需要掌握大数据分析的能力。
蓝之刃·2020-07-30 20:37

浅谈电商数据分析指标体系

对于电子商务信息系统最核心的能力便是大数据能力，包括大数据处理、数据分析和数据挖掘能力。无论是电商平台还是在电商平台上销售产品的卖家，都需要掌握大数据分析的能力。
hualalalalali·2020-07-30 19:38

电商数据分析基础指标体系

而电子商务信息系统最核心的能力是大数据能力，包括大数据处理、数据分析和数据挖掘能力。无论是电商平台（如淘宝）还是在电商平台上销售产品的卖家，都需要掌握大数据分析的能力。
zhuhengv·2020-07-30 19:18

电商数据分析基础指标体系

而电子商务信息系统最核心的能力是大数据能力，包括大数据处理、数据分析和数据挖掘能力。无论是电商平台（如淘宝）还是在电商平台上销售产品的卖家，都需要掌握大数据分析的能力。
weixin_34146410·2020-07-30 19:02

几个职位信息（阿里）

大数据处理系统安全工程师（为内部离线云计算平台服务）岗位要求：1.熟练使用C/Jav
折shui·2020-07-30 18:47
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他