E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式处理
基于机器学习和深度学习,华为大神手写AIoT系统学习小册Java架构技术
基于MLlib和H2O.ai平台,在ApacheSpark框架上实现对IoT数据的
分布式处理
。基于深度学习方法对时间序列数据进行预测。从可穿戴设备和智能设备得到的数据中获取独到的洞察。
娜布其 20224016017
·
2022-11-27 21:28
深度学习
学习
基于机器学习和深度学习,华为开发手写AIoT系统学习小册
基于MLlib和H2O.ai平台,在ApacheSpark框架上实现对IoT数据的
分布式处理
。基于深度学习方法对时间序列数据进行预测。从可穿戴设备和智能设备得到的数据中获取独到的洞察。
Javaesandyou
·
2022-11-27 21:26
java
程序人生
职场和发展
面试
阿里云
网安复试知识简略版
文章目录计算机网络(数据通信,资源共享,
分布式处理
)1.概念网络体系结构2.网络设备3.数据链路层功能4.局域网5.以太网6.广域网协议7.链路层设备8.网络层(主要任务是把分组从源端传到目的端,为分组交换网络的不同主机提供通信服务
greedy-hat
·
2022-11-27 17:45
#
北邮复试资料
linux
运维
服务器
基于Flink的用户行为实时数据分析,安装本地模式
一、什么是FlinkFlink开源的分布式,高可用,高性能的框架和
分布式处理
引擎,支持流数据处理和批处理二、为什么要使用Flink(特点)高可用批处理和流处理高吞吐和低延迟结果的准确性和良好的容错性能够快速真实反映出生活总的来说就是能够适应当下的发展三
lidan0427
·
2022-11-26 00:59
flink
flink
大数据
hadoop
Spark大数据
分布式处理
实战笔记(五):Spark MLlib
前言Spark是一种大规模、快速计算的集群平台,本公众号试图通过学习Spark官网的实战演练笔记提升笔者实操能力以及展现Spark的精彩之处。有关框架介绍和环境配置可以参考以下内容:1.大数据处理框架Hadoop、Spark介绍2.linux下Hadoop安装与环境配置3.linux下Spark安装与环境配置本文的参考配置为:Deepin15.11、Java1.8.0_241、Hadoop2.10
大数据之眸
·
2022-11-24 06:18
大数据干货丨京东基于 Spark 的风控系统架构实践和技术细节
Hadoop,Spark等大数据大集群
分布式处理
框架的不断发展为风
BAO7988
·
2022-11-23 13:15
大数据
大数据
spark
大数据开发
大数据分析
大数据入门
flink 编程模型及核心概念
flink编程模型及核心概念抽象层级:各种
分布式处理
框架处理流程比较:DataSetandDataStream批处理:DataSet流处理:DataStreamflink编程模型:Flink程序看起来像是转换数据集合的常规程序
龍尐
·
2022-11-22 14:14
flink
flink
核心概念
分布式机器学习原理及实战(Pyspark)
自2003年Google公布了3篇大数据奠基性论文,为大数据存储及
分布式处理
的核心问题提供了思路:非结构化文件分布式存储(GFS)、分布式计算(MapReduce)及结构化数据存储(BigT
算法进阶
·
2022-11-20 18:42
机器学习
大数据
算法
5年开发码农,靠着这部kafka核心设计,成功入职阿里,定级P7
目前越来越多的开源
分布式处理
系统如Cloudera、Storm、Spark、Flink等都支持与Kafka集成。K
娜布其 20224016017
·
2022-11-20 08:15
kafka
java
分布式
学习
后端
知识图谱学习笔记-知识图谱介绍
由多种类型的节点和多种类型的边组成构建知识图谱系统中所涉及到的技术数据获取:数据爬虫、数据库读取数据预处理:数据清洗、知识抽取、信息抽取、消歧分析等导入到知识图谱:数据筛选、知识图谱设计、批量导入、增量导入应用层搭建:各类模型搭建、GraphX
分布式处理
BUPT-WT
·
2022-11-14 13:17
风控
知识图谱
什么是分布式软件系统
分布式软件系统(DistributedSoftwareSystems)是支持
分布式处理
的软件系统,是在由通信网络互联的多处理机体系结构上执行任务的系统。
m0_72864708
·
2022-11-11 00:22
分布式
网络
数据库
GBase 8c 核心技术简介(中)
4并行技术GBase8c采用并行技术来提升系统的性能和吞吐量,主要特点有:1.分布式并行计划器,结合集群特征,对算子进行
分布式处理
,生成合适的分布式执行计划;2.通过基于规则和基于代价的优化,保证执行计划的高效
manhuai2022
·
2022-11-07 07:30
java
数据库
开发语言
什么是分布式软件系统
分布式软件系统(DistributedSoftwareSystems)是支持
分布式处理
的软件系统,是在由通信网络互联的多处理机体系结构上执行任务的系统。
m0_72864708
·
2022-11-06 08:04
分布式
数据库
服务器
bp神经网络数学建模论文,关于bp神经网络的论文
最初是86年,Rumelhart和McCelland领导的科学家小组在《平行
分布式处理
》一书中,对具有非线性连续变换函数的多层感知器的误差反向传播BP算法进行了详尽的分析,实现了Minsky关于多层网络的设想
普通网友
·
2022-11-02 15:47
神经网络
神经网络
网络
人工智能
cnn
一些常见的后端工具框架简介(1)--Hadoop,Memcached,Gunicorn
是一个能够对大量数据进行
分布式处理
的软件框架(即大数据处理框架,包括搜集、存储、调度、查询、计算、输出等各个方面),以一种可靠、高效、可伸缩的方式进行数据处理。
Icemelon99
·
2022-11-02 11:05
后端基础
Hadoop
Memcached
Gunicorn
大数据技术入门之
分布式处理
、并行处理和MapReduce
什么是大数据?百度百科解释为:“是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。”有点高级有点绕。简化一下,大数据就是拥有很高价值不能轻易被推倒(咳)处理的数据集合。就像你要去打一个数据究极体的boss,你需要带上最好的剑,翻过最高的山,闯进深的森林。boss挂了,自然你获得的经
Go_Data__
·
2022-10-24 18:41
Big
Data
Technology
mapreduce
大数据
spark
hadoop
Flink在数度Datagradient平台的应用
ApacheFlink是一个框架和
分布式处理
引擎,用于对无边界和有边界的数据流进行有状态的计算。
梯度科技
·
2022-10-13 15:32
大数据
spark
数据库
大数据
分布式处理
系统平台Hadoop的主要特征
Hadoop是Apache软件基金会下一个开源
分布式处理
系统平台,主要为用用户提供系统底层细节透明的分布式基础架构。该平台以HDFS和MapReduce为核心。
梯度科技
·
2022-10-13 15:30
云原生技术
hadoop
大数据
hdfs
云计算
云原生
大数据笔记
大数据时代二、大数据的四个特性1、数据量大(volume)2、数据类型繁多(velocity)3、处理速度快(variety)4、价值密度低(value)三、大数据的影响四、大数据关键技术1.分布式存储2.
分布式处理
五
上课不要睡觉了
·
2022-10-13 12:23
大数据
大数据
车联网OBD,分时租赁设备4G-TBOX,驾培驾考
移动管家车联网4G车载TBOX终端系统特征1系统模块化架构,采用多核
分布式处理
,CAN解码数据处理与主控MCU融合,实现数据读取、计算、控制更智能;2CAN模块适应当前车联网技术(支持发动机
zsmydz888
·
2022-10-12 08:11
共享汽车系统硬件软件
车联网解决方案
汽车T-Box车机硬件
服务器
运维
Data Analysis 常见的组件
Flink:ApacheFlink是一个框架和
分布式处理
引擎,用于在无边界和有边界数据流上进行有状态的计算。Spark:ApacheSpark是专为大规模数据处理而设计的快速通用的计算引擎。
·
2022-09-26 16:14
data
clickhouse系列第一篇之clickhouse的出现背景以及使用场景(6000多字总结)
场景的关键属性4.为什么面向列的数据库在OLAP场景中可以工作的更好5.CPU二:特色1.clickhouse是真正面向列的数据库管理系统2.数据压缩3.数据的磁盘存储4.多核并行处理5.多台服务器上的
分布式处理
安勿期
·
2022-09-22 05:15
大数据
大数据之Flink计算框架
一、Flink介绍Flink官网:https://flink.apache.org/zhApacheFlink是一个流批统一的计算框架和
分布式处理
引擎,用于在无边界和有边界数据流上进行有状态的计算。
飘然生
·
2022-09-16 13:08
大数据
tcp/ip
python
网络
实时和离线,大数据计算引擎谁主沉浮
本文主要内容包括:1、Flink简介2、Spark简介3、Flink和Spark的引擎技术对比4、两大技术的发展方向一、Flink简介1.1、官方定义:ApacheFlink是一个框架和
分布式处理
引擎,
学而知之@
·
2022-09-16 13:38
分布式
大数据
hadoop
人工智能
数据库
Github最新霸榜,Alibaba架构师手写的分布式系统核心原理手册
其实简单来说,分布式就是将一个大问题拆分成多个小问题,逐一解决,最终协同合作,而将多个系统协同合作完成一个特定任务,支持
分布式处理
的软件系统,就是我们所说的分布式系统。
Java爱好狂.
·
2022-09-09 07:39
数据库
系统架构
分布式
第三章 大数据之Hadoop搭建
可以使用一种简单的编程模式,通过多台计算机构成的集群,
分布式处理
大数据集。hadoop作为底层,其生态环境很丰富。hadoop基础包括以下四个基本模块:hadoop基础功能库:支持其他
测试小书童
·
2022-09-09 07:37
大数据测试
hadoop
big
data
mapreduce
Flink的安装与配置(集群版)(保姆级教程)
Flink简述:Flink是一个框架和
分布式处理
引擎,用于对无界和有界数据流进行有状态计算。
万家林
·
2022-09-08 10:10
flink
flink
什么是kafka、kafka的应用场景、Kafka基本知识
目前越来越多的开源
分布式处理
系统如Cloudera、Storm、Spark、Flink等都支持与Kafka集成。Kafka之所以受到越来越多的青
CodingAnHour
·
2022-09-08 10:21
消息队列
kafka
Hadoop3.3.4 理论
Hadoop为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持,它允许使用简单的编程模型跨计算机群集
分布式处理
大型数据集,并且支持在单台计算机到几千台计算机之间进行扩展。
Michaelwubo
·
2022-09-06 15:08
分布式
Seatunnel超高性能分布式数据集成平台使用体会
有Sqoop和DataX之类数据处理为何还要用ApacheSeaTunnel,这就要得益于ApacheSeaTunnel依赖Flink和Spark天然
分布式处理
数据的特性,前两者是单机同步数据不适于海量数据同步
itxiaoshen
·
2022-08-27 00:00
一篇学完:王道考研408计算机网络(全)
计算机网络的功能:数据通信、资源共享、
分布式处理
(hadoop平台)、提高可靠性、负载均衡...发展阶段-第一
XIAOWAN_233
·
2022-08-21 09:24
学习笔记
网络
tcp/ip
java分布式面试题的整合
1.什么是分布式系统分布式软件系统(DistributedSoftwareSystems)是支持
分布式处理
的软件系统,是在由通信网
lisas聊聊编程
·
2022-08-11 21:13
java
分布式
面试
架构
微服务
FLIP-147:支持包含结束任务的 Checkpoint 操作与作业结束流程修正
作者|高赟(云骞)点击进入Flink中文学习网https://flink-learning.org.cn/第一部分简介Flink可以同时支持有限数据集和无限数据集的
分布式处理
。
Apache Flink
·
2022-07-20 22:26
大数据
编程语言
flink
一文掌握常用的机器学习模型
为了让大家更好地理解分布式机器学习,AI科技大本营联合华章科技特别邀请到了本书的作者之一——微软亚洲研究院副院长刘铁岩老师进行在线公开课分享,详情请见文末信息,还有福利哦~~分布式机器学习并非
分布式处理
技术与机器学习的简单结合
喜欢打酱油的老鸟
·
2022-07-20 07:58
人工智能
常用
机器学习
模型
FLIP-147:支持包含结束任务的 Checkpoint 操作与作业结束流程修正
作者|高赟(云骞)点击进入Flink中文学习网第一部分简介Flink可以同时支持有限数据集和无限数据集的
分布式处理
。
·
2022-07-12 11:15
java分布式面试题的整合
1.什么是分布式系统分布式软件系统(DistributedSoftwareSystems)是支持
分布式处理
的软件系统,是在由通信网
·
2022-07-10 21:45
java
PolarDB-X 如何做分布式数据库热点分析
是一款计算存储分离的云原生分布式数据库,在PolarDB-X2.0的AUTO模式下,数据库会按照表的主键自动Hash分区,将数据均匀的分布到各个数据节点中,最理想的情况是各分区间数据和流量都是均衡的,能充分发挥出多节点的
分布式处理
能力
·
2022-07-07 15:11
程序员
git-2.10.2-64-bit介绍&&git下载&&git安装教程
Git离线操作性:Git可以离线进行代码提交,因此它称得上是完全的
分布式处理
,Git所有的操作不需要在线进行;这意味着Git的速度要比SVN等工具快得多,因为
鹿海园
·
2022-07-06 17:27
Git
Git
KAFKA 海量吞吐低延迟技术解密:KafkaController
1、导读KAFKA是基于Scala语言开发的一个多分区、多副本且基于ZooKeeper协调的分布式消息系统,它以高吞吐、可持久化、可水平扩展、支持流数据处理等多种特性而被广泛使用,越来越多的开源
分布式处理
系统如
yeweiouyang
·
2022-06-29 16:48
Apache
Kafka
kafka
scala
java
分布式
中间件
(深度学习)前馈神经网络—全连接网络的一般流程
一、神经网络引言:神经网络是一种大规模的并行
分布式处理
器,天然具有存储并使用经验知识的能力,它从两个方面上模拟大脑:网络获取的知识是通过学习来获取的;内部神经元的连接强度,即突出权重,用于存储获取的知识
清风&
·
2022-06-01 07:04
深度学习
python
人工智能
神经网络
深度学习
计算机网络 概念
是一个将分散的,具有独立功能的计算机系统,通过通信设备和线路,由功能完善的软件实现资源共享和信息传递计算机网络发展过程:因特网三级结构ISP计算机网络是互联的,自治的计算机集合计算机网络的功能:数据通信资源共享
分布式处理
提高可靠性负载均衡计算机网络一
旷工锁
·
2022-05-27 12:03
计算机网络
网络
网络协议
云数据库成为主流,升级企业业务体验
云计算是在
分布式处理
、并行处理和网格计算等技术的基础上发展起来的,是一种新兴的共享基础架构的方法。随着云计算技术的不断升温,它对各个技术领域的影响开始显现,其中影响效果较为突出的就是数据库领域。
·
2022-05-11 09:00
程序员
Linux系统部署Hadoop集群详细教程
Hadoop是大数据中一个能够对大量数据进行
分布式处理
的软件框架。Hadoop以一种可靠、高效、可伸缩的方式进行数据处理,下面将和大家介绍一下hadoop以及Linux系统安装Hadoop得详细步骤。
msbjy
·
2022-05-08 20:29
hadoop
linux
apache
基于机器学习和深度学习,华为高级技术师手写AIoT系统学习小册
基于MLlib和H2O.ai平台,在ApacheSpark框架上实现对IoT数据的
分布式处理
。基于深度学习方法对时间序列数据进行预测。从可穿戴设备和智能设备得到的数据中获取独到的洞察。
Java架构设计
·
2022-04-20 15:55
学习
java
spring
boot
kafka
人工智能
计算机网络基础——NWU_LK
一.计算机网络的概述计算机网络基本概念互连的,自治的计算机集合计算机网络主要功能数据通信资源共享
分布式处理
提高可靠性负载均衡计算机网络组成按照功能可以分为:通信子网、资源子网计算机网络分类按照分布范围:
NWU_LK
·
2022-03-29 14:29
网络
网络
网络通信
计算机网络复习笔记
2.计算机网络的功能:数据通信(连通性),资源共享(硬件软件数据),
分布式处理
(多台计算机承担统一工作的不同部分Hadoop),提高可靠性(替换性),负载均衡3.工作方式:分为边缘和核心部分,边缘部分用户直接使用
tianyunlinger
·
2022-03-20 16:39
笔记
计算机网络
离线数仓(四)离线数仓架构
更详细的架构图:批处理层:使用可处理大量数据的
分布式处理
系统预先计算结果。它通过处理所有的已有历史数据来实现数据的准确性。这意味着它是基于完整的数据集来重新计算的,能
Yuan_CSDF
·
2022-02-28 09:06
#
离线数仓
kafka
big
data
java基础1——基本概念,基本语法
Java2PlatformStandardEdition)标准版J2ME(Java2PlatformMicroEdition)小型版J2EE(Java2PlatformEnterpriseEdition)企业版3.Java语言特性具有简单性、面向对象、
分布式处理
不愿_a354
·
2022-02-18 23:07
Hadoop MapReduce八大步骤以及Yarn工作原理详解
Hadoop是市面上使用最多的大数据分布式文件存储系统和
分布式处理
系统,其中分为两大块分别是hdfs和MapReduce,hdfs是分布式文件存储系统,借鉴了Google的GFS论文.MapReduce
SnailFast
·
2022-02-18 17:51
机器学习-KMeans聚类 K值以及初始类簇中心点的选取
本文主要基于AnandRajaraman和JeffreyDavidUllman合著,王斌翻译的《大数据-互联网大规模数据挖掘与
分布式处理
》一书。
王小胖a
·
2022-02-13 07:19
数据挖掘
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他