数据处理系统

【云计算与大数据概述 】课堂笔记

文章目录第一章云计算与大数据基础1.1云计算基础1.1.1云计算简介1.1.2云计算的特点1.1.3云计算技术分类1.2大数据基础1.2.1大数据简介1.2.2主要的大数据处理系统1.2.3大数据处理的基础流程
小糊^·2023-10-30 05:10

大数据架构设计理论与实践

大数据架构设计理论与实践大数据处理系统概述传统数据处理系统存在的问题大数据处理系统面临的挑战大数据处理系统的属性/特征典型的大数据架构Lambda架构Lambda定义优缺点应用场景Lambda的体系结构
骚戴·2023-10-29 16:20

【优化器框架】Apache Calcite - 一种用于异构数据源查询优化处理的基础框架

概要ApacheCalcite是一支持多种开源数据处理系统，例如：ApacheHive，Storm，Flink，Druid和MapD，为其提供查询处理、优化和查询语言的基础框架。
抡着鼠标扛大旗·2023-10-27 16:16

emg采集精度_美国iWorx生理信号采集分析系统/多导生理记录仪

iWorx生物信号采集系统(多导电生理记录仪)可专业用于动物(大鼠、小鼠、兔子、比格犬、猴子等各种实验动物)多导生理记录，是专为生命学科设计的生物信号记录和数据处理系统，用于对生物信号进行放大，通过模数转换
吴亦渊·2023-10-26 00:01

信息系统容灾备份管理制度

1.4、术语和定义灾难备份即为了灾难恢复而对数据、数据处理系统、网络系统、基础设施、专业技术
奔跑的老人吴·2023-10-25 05:13

前端之nodejs（三）

I/O是输入/输出的简写，是计算机和人活着数据处理系统之间的通信。3.什么是并发？并发之指事情可能同一时间发生并产生交互。
qq_597221342·2023-10-24 20:25

流量回放原理

流量回放是通过日志采集再处理来获取所需要的数据日志采集通过logstash工具从应用容器拉取日志信息，可以根据filter、tags来筛选数据传输通过kafka等消息队列将获取的日志数据传输进行下一步处理数据处理从消息队列中消费日志数据，通过storm数据处理系统从日志信息中获取到想要的数据
尝试热爱这个世界·2023-10-23 06:38

2018年最好的软件开发、云计算、大数据分析和机器学习工具

在这个2019年版的奖项中，你可能会猜出有容器，云原生应用程序栈，分布式数据处理系统和机器学习是主要的主题。
金光闪闪耶·2023-10-22 21:48

到底什么才是大数据开发？

大数据开发其实分两种，第一类是编写一些Hadoop、Spark的应用程序，第二类是对大数据处理系统本身进行开发。第一类工作感觉更适用于dataanalyst这种职位吧，而
金光闪闪耶·2023-10-22 04:47

Hadoop大数据处理

《Hadoop大数据处理》以大数据处理系统的三大关键要素——“存储”、“计算”与“容错”为起点，深入浅出地介绍了如何使用Hadoop这一高性能分布式技术完成大数据处理任务。
题典通·2023-10-19 00:46

maven 按业务拆分模块_Springboot项目maven多模块拆分

多模块拆分的必要性使用Java技术开发的工程项目，无论是数据处理系统还是Web网站，随着项目的不断发展，需求的不断细化与添加，工程项目中的代码越来越多，包结构也越来越复杂这时候工程的进展就会遇到各种问题
薛从豪·2023-10-17 10:06

Maven项目多模块拆分

1.多模块拆分的必要性使用Java技术开发的工程项目，无论是数据处理系统还是Web网站，随着项目的不断发展，需求的不断细化与添加，工程项目中的代码越来越多，包结构也越来越复杂这时候工程的进展就会遇到各种问题
北海飞舞·2023-10-17 10:02

信息安全与网络安全有什么区别？

信息安全定义如下：为数据处理系统建立和采用的技术、管理上的安全保护，为的是保护计算机硬件、软件、数据不因偶然和恶意的原因而遭到破坏、更改和泄露。信息安全包含哪些内容？
Python_chichi·2023-10-15 09:33

Flink 时间和窗口

文章目录Flink时间和窗口一、时间语义1、数据处理系统中的时间语义2、两种时间语义的对比二、水位线1、什么是水位线(1)、有序流中的水位线(2)、乱序流中的水位线(3)、水位线的特性2、如何生成水位线
气质&末雨·2023-10-12 08:25

软考高级架构师下篇-18

目录1.引言2.传统数据处理系统的问题1.传统数据库的数据过载问题2.大数据的特点3.大数据利用过程4.大数据处理系统架构分析3.典型的大数据架构1.Lambda架构2.Kappa架构3.Lambda架构与
拒绝冗余·2023-10-10 21:49

nisp学习-1.1信息安全与网络空间安全

信息与信息安全信息安全信息安全，ISO（国际标准化组织）的定义为：为数据处理系统建立和采用的技术、管理上的安全保护，为的是保护计算机硬件、软件、数据不因偶然和恶意的原因而遭到破坏、更改和泄露。
段嘉喻·2023-10-10 21:54

大数据架构设计（四十五）

（数据易构性主要是不同的数据库种类）大数据处理系统系统特征：鲁棒性和容错性低延迟读取和更新能力横向扩展通用性延展性即席查询能力（及时响应用户查询需求）最少维护能力可调试性Lambda架构设计目的在于提供一个满足大数
后端从入门到精通·2023-10-06 10:20

关于 TDengine 3.0 数据订阅，你需要知道这些

这样在很多场景下，采用TDengine的时序数据处理系统就不需要再集成如Kafka一般的消息队列产品，从而简化系统设计的复杂度，降低运维成本。
·2023-09-26 10:29

关于 TDengine 3.0 数据订阅，你需要知道这些

这样在很多场景下，采用TDengine的时序数据处理系统就不需要再集成如Kafka一般的消息队列产品，从而简化系统设计的复杂度，降低运维成本。
涛思数据（TDengine）·2023-09-26 08:22

Linux 基础 | 命令行的艺术（交互式 Bash）

文章目录前言正文基础日常使用文件及数据处理系统调试单行脚本冷门但有用仅限OSX系统仅限Windows系统在Winodws下获取Unix工具实用Windows命令行工具Cygwin技巧更多资源前言熟练使用命令行是一种常常被忽视
嵌入式RTOS圈·2023-09-24 17:12

CISP—信息安全保障基础

0x00前言CTF加解密合集CTFWeb合集网络安全知识库溯源相关CISP汇总文中工具皆可关注皓月当空w公众号发送关键字工具获取0x01信息安全概念1.信息安全的定义1.1ISO对安全的定义为数据处理系统建立和采取技术
Wcbddd·2023-09-15 10:24

大数据专业毕业能从事什么工作

大数据开发分两类，编写Hadoop、Spark的应用程序和对大数据处理系统本身进行开发。
我想去吃ya·2023-09-02 16:36

Streaming 101

1.为什么要流式计算业务需求：业务需要更及时计算结果，而流数据处理可以获得更低的延时数据特点：海量的无边界数据在现代企业中越来越普遍，而流数据处理系统就是为此而生的硬件资源：流数据处理可以在时间维度上进行负载均衡
Sol__C·2023-08-28 19:42

大数据领域都有什么发展方向

大数据开发分两类，编写Hadoop、Spark的应用程序和对大数据处理系统本身进行开发。大数据开发工程师主要负责公司大数据平台的开发和维护、
我想去吃ya·2023-08-26 12:36

贵阳中心邝松慧8.18号日清

A：海尔智能空调依托最专业的家电数据处理系统——海尔云平台，
Gina__·2023-08-26 05:31

全面解析流式大数据实时处理技术、平台及应用

根据数据处理的时效性，大数据处理系统可分为批式(batch)大数据和流式(streaming)大数据两类。其中，批式大数据又被称为历史大数据，流式大数据又被称为实时大数据。
丨程序之道丨·2023-08-24 22:59

系统架构设计笔记（35）—— 结构化分析与设计

结构化分析与设计方法是一种面向数据流的需求分析和设计方法，它适用于分析和设计大型数据处理系统，是一种简单、实用的方法，曾获得广泛的应用。1结构化分析结构化分析方法的基本思想是自顶向下逐层分解。
deniro·2023-08-20 03:54

【课程笔记】分布式计算系统 徐辰

分布式计算系统笔记课程介绍课程背景大数据处理系统——>分布式计算系统Hadoop，Spark，Flink大数据涵义过于宽泛本课程/教材强调系统设计、原理、编程的集合课程目的培养系统思维应用层：搜索、推荐算法设计层
HERODING77·2023-08-19 23:16

速看！Milvus JavaScript 客户端入门级使用指南

使用Milvusnode.jsSDK，可以轻松搭建灵活且强大的数据处理系统。Milvus支持使用Node.js连接至服务器，完成各种数据库操作。
·2023-08-15 20:05

Golang 程序性能优化利器 PGO 详解（二）：收集样本数据和编译

无论是在Web服务、数据处理系统还是实时通信中，良好的性能都是至关重要的。
路多辛·2023-08-15 09:24

Golang 程序性能优化利器 PGO 详解（三）：常见问题

无论是在Web服务、数据处理系统还是实时通信中，良好的性能都是至关重要的。
路多辛·2023-08-15 08:21

Golang 程序性能优化利器 PGO 详解（一）：简单介绍及使用

无论是在Web服务、数据处理系统还是实时通信中，良好的性能都是至关重要的。
路多辛·2023-08-12 23:14

速看！Milvus JavaScript 客户端入门级使用指南

使用Milvusnode.jsSDK，可以轻松搭建灵活且强大的数据处理系统。Milvus支持使用Node.js连接至服务器，完成各种数据库操作。
Zilliz Planet·2023-08-12 01:13

使用Spring Boot和EasyExcel的导入导出

为了满足复杂的导入导出需求，结合Java编程语言、SpringBoot框架以及EasyExcel库，我们可以轻松地构建出强大而灵活的数据处理系统。
是Smoky呢·2023-08-05 20:58

python三方库Apache Spark，举例介绍基本的使用

ApacheSpark是一个快速、通用、基于内存的大数据处理系统，它可以用来处理大规模数据集。它提供了高级别的API，以便用户可以用Java、Scala、Python和R等语言编写Spark应用程序。
Dream SYC_UCC·2023-08-04 14:06

什么是大数据开发？

大数据开发其实分两种，第一类是编写一些Hadoop、Spark的应用程序，第二类是对大数据处理系统本身进行开发。第一类工作感觉更适用于dataanalyst这种职位吧，而
yoku酱·2023-08-04 13:19

BL110多功能网关支持DL/T645电表传输协议

BL110是一款功能强大的PLC协议支持网关，支持多种工业设备接入云平台和上位机数据处理系统。它具备对OPCUA、MQTT、ModbusRTU、ModbusTCP、BACnetIP等多种协议的支持。
钡铼技术物联网·2023-07-28 06:16

Flink状态的理解

Flink是一个带状态的数据处理系统；系统在处理数据的过程中，各算子所记录的状态会随着数据的处理而不断变化；1.状态所谓状态State，一般指一个具体的Task的状态，即线程处理过程中需要保存的历史数据或历史累计数据
时下握今·2023-07-27 07:45

浅析Lambda架构

这一架构的提出基于马茨在BackType和Twitter上的分布式数据处理系统的经验。Lambda架构使开发人员能够构建大规模分布式数据处理系统。它具有很好的灵活性和可扩展性，也对
满载星辉·2023-07-19 20:50

信息安全概念

1.信息安全定义国际标准化组织(lntemationalOrganizationforStandardization,IS0)息安全的定义为"为数据处理系统建立和采取技术、管理的安全保护，保护计算机硬件
一只雪梨干·2023-07-19 18:09

【新版系统架构】第十九章-大数据架构设计理论与实践

大数据处理系统架构大数据处理系统面临挑战如何利用信息技术等手段处理非结构化和半结构化数据如何探索大数据复杂性、不确定性特征描述的刻画方法及大数据的系统建模数据异构性与决策异构性的关系对大数据知识发现与管理决策的影响大数据处理系统架构特征鲁棒性和容错性低延迟读取和更新能力横向扩容通用性延展性即席查询能力最少维护能力可调式性
阿提说说·2023-07-16 22:40

【数据管理架构】OLAP 与 OLTP：有什么区别？

在数据科学领域，有两种类型的数据处理系统：在线分析处理（OLAP）和在线事务处理（OLTP）。主要区别在于，一种使用
超级架构师·2023-07-15 19:22

数据分析Lambda架构详解

这一架构的提出基于马茨在BackType和Twitter上的分布式数据处理系统的经验。Lambda架构使开发人员能够构建大规模分布式数据处理系统。它具有很好的灵活性和可扩展性，也对
Rocky006·2023-07-14 10:06

Flink 学习八 Flink 容错机制 & checkpoint & savepoint

flink-docs-release-1.14/docs/concepts/stateful-stream-processing/1.容错基础概念上一节讲述状态后端;Flink是一个带状态stateful的数据处理系统
C0oOder·2023-06-21 00:21

揭秘阿里云 Flink 智能诊断利器——Flink Job Advisor

作者：藏红一、引言阿里云实时计算Flink作为一款专业级别的高性能实时大数据处理系统，它在各种业务场景中都发挥了关键的作用。
Apache Flink·2023-06-18 12:08

Apache Storm教程_编程入门自学教程_菜鸟教程-免费教程分享

教程简介ApacheStorm是一个分布式实时大数据处理系统。Storm设计用于在容错和水平可扩展方法中处理大量数据。它是一个流数据框架，具有最高的摄取率。
菜鸟一记·2023-06-16 14:22

数据接入平台(DIP)系列文章之一|功能及架构浅析

导语腾讯云消息队列CKafka推出数据接入平台（DataImportPlatform），旨在构建数据源和数据处理系统间的桥梁。
ikyrxbxfas·2023-06-16 06:37

用RDMA重新思考有状态流处理

摘要远程直接内存访问(RDMA)硬件弥合了网络和主要内存速度之间的差距，从而验证了网络通常是分布式数据处理系统中的瓶颈的常见假设。
随处可见的打字员·2023-06-13 06:52

揭秘阿里云Flink智能诊断利器——Fllink Job Advisor

引言阿里云实时计算Flink作为一款专业级别的高性能实时大数据处理系统，它在各种业务场景中都发挥了关键的作用。丰富而复杂的上下游系统让它能够支撑实时数仓、实时风控、实时机器学习等多样化的应用场景。
阿里云大数据AI技术·2023-06-12 23:22

揭秘阿里云 Flink 智能诊断利器——Flink Job Advisor

作者：藏红一、引言阿里云实时计算Flink作为一款专业级别的高性能实时大数据处理系统，它在各种业务场景中都发挥了关键的作用。
·2023-06-12 17:45
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他