数据平台-基础架构

ES聚合分析原理与代码实例讲解

1.2研究现状目前，ES聚合分析已经成为现代大数据平台的核心组件之一。它支持多种类型的聚
光剑书架上的书·2024-09-16 08:08

淘宝返利微信机器人的消息处理与推送技术

1.微信机器人的基础架构实现一个淘宝返利微信机器人，我们首先需要了解微信机器人的基础架构
微赚淘客系统开发者·2024-09-14 10:33

镜舟科技与西南证券合作，构建极速、高效数据平台

《金融科技发展规划（2022-2025年）》明确了高质量推进金融数字化转型的总体思路，云计算、人工智能等新兴技术开始被广泛应用，提升金融服务的便捷性，但随着日益增长的数据体量，数据的存储和处理能力日渐。数据的金融机构需要加强数据能力建设、完善数据中心建设，并构建健全的数字安全生态。在金融行业的数字化转型浪潮中，西南证券凭借其深厚的行业经验和前瞻性视野，与镜舟科技一起，构建一个高效、稳定且易于维护的
镜舟科技·2024-09-13 14:31

【面试系列】Spark 高频面试题解答

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋》：涵盖了Pytho
野老杂谈·2024-09-12 18:52

嵌入式QT开发：构建高效智能的嵌入式系统

从QT框架的基础架构和核心概念出发，详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式QT的开发环境搭建过程，包括交叉编译工具链的配置等关键步骤。
嵌入式大圣·2024-09-11 04:59

大数据平台（数据中台、数据中枢、数据湖、数据要素）建设方案

大数据平台（数据中台、数据中枢、数据湖、数据要素）建设方案大数据平台（数据中台、数据中枢、数据湖、数据要素）建设方案项目背景和目标项目背景项目目标建设原则与策略数据中台架构设计整体架构设计思路数据采集层数据存储层数据计算层数据服务层数据中枢功能实现数据治理功能数据资产管理功能数据安全管控功能数据服务总线功能数据湖存储与计算方案数据湖存储架构设计数据湖计算框架选择数据湖应用场景分析数据湖安全与合规性
数字化建设方案·2024-09-11 04:26

数据中台建设方案-基于大数据平台(下)

数据中台建设方案-基于大数据平台(下)1数据中台建设方案1.1总体建设方案1.2大数据集成平台1.3大数据计算平台1.3.1数据计算层建设计算层技术含量最高，最为活跃，发展也最为迅速。
FRDATA1550333·2024-09-11 03:49

下一代软件架构——SOA

而在近两年，出现了一种技术架构被誉为下一代Web服务的基础架构，它就是SOA（Service-orientedarchitecture，面向服务架构）。1996年，Gartner最早提出SOA。
CSDN_document·2024-09-10 21:11

大数据平台--调度系统

调度系统是数据仓库的重要组成部分，也是每个银行或公司一个基础软件或服务，需要在全行或全公司层面进行规划，在全行层面统一调度工具和规范，由于数据类系统调度作业较多，交易类系统批量优先级高，调度系统的整体架构如下：调度中心对调度批次和作业进行创建、管理、监控，它负责所有批量作业的调度和编排；在整个作业过程中，作业之间关系分为触发，依赖和互斥。1、触发触发关系表示一个作业完毕后，生成另一个作业的控制文件
小瓶盖的猪猪侠·2024-09-10 20:36

starrocks和clickhouse数据库比较

下面是这两者的一些主要比较点：1.基础架构与设计目标Starrocks:Starrocks是一个专注于实时数据分析的平台，常用于大数据处理和商业智能应用。
CodeMaster_37714848·2024-09-09 16:12

深智城基于超融合数据库MatrixOne的一站式交通大数据平台改造

在智慧交通应用中，数据处理需求极为复杂，涉及人、车辆、道路和环境等多个方面，产生了大量异构数据。交通管理人员需要对这些数据进行实时分析和决策，以应对各种交通事件。然而，在实际生产中会发现数据处理缺陷、管理复杂度高、云原生基础设施兼容性不足等问题。实践证明，MatrixOne可完整、稳定支撑深智城集团的交通数字实时仿真项目，实现秒级的业务及分析实时性，并在技术、管理和成本方面均得到了显著提升，大幅降
MatrixOrigin·2024-09-09 07:42

MySQL数据库运维：深度解析与实践指南

⭐️全流程数据技术实战指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台和数据仓库的核心技术和方法。⭐
野老杂谈·2024-09-09 01:58

大数据技术之Hadoop（一）

Hadoop概述1.1Hadoop是什么Hadoop是什么1）Hadoop是一个由Apache基金会所开发的分布式系统基础架构。2）主要解决，海量数据的存储和海量数据的分析计算问题。
pauls·2024-09-08 16:30

【面试系列】Doris 高频面试题解答

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋》：涵盖了Pytho
野老杂谈·2024-09-08 10:44

【大数据平台】数据处理层：批处理与流处理架构

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋
野老杂谈·2024-09-08 09:07

pyspark kafka mysql_数据平台实践①——Flume+Kafka+SparkStreaming(pyspark)

蜻蜓点水Flume——数据采集如果说，爬虫是采集外部数据的常用手段的话，那么，Flume就是采集内部数据的常用手段之一(logstash也是这方面的佼佼者)。下面介绍一下Flume的基本构造。Agent：包含Source、Channel和Sink的主体，它是这3个组件的载体，是组成Flume的数据节点。Event：Flume数据传输的基本单元。Source：用来接收Event，并将Event批量传
weixin_39793638·2024-09-08 04:34

探索宝可梦的世界：PokeAPI如何让开发者大展拳脚

PokeAPI的魅力所在PokeAPI的魅力在于它提供了一个开放的数据平台，涵盖了宝可梦世界中的所有元素。无论是宝可梦的名字、类型、技能，还是它们的
幂简集成·2024-09-07 14:25

MySQL 子查询与复杂查询的优化

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋
野老杂谈·2024-09-07 09:23

基于Echarts+HTML5可视化数据大屏展示—新能源车联网综合大数据平台_新能源汽车大数据分析网站代码

主要代码实现：主页HTML布局：新能源车联网综合大数据平台实时统计<divclass="info-text
2401_84181070·2024-09-06 21:38

MVVM架构

MVVM是Model-View-ViewModel的简写，是基于数据绑定的基础架构。是在微软的WPF和MVP结合的应用方式发展演变过来的一种新型架构。
努力突破·2024-09-06 13:09

ansible自动化运维项目

下面将深入探讨Ansible在自动化运维项目中的具体应用和优势：Ansible的基础架构与组件核心组件：Ansible的运作依赖于几个关键组件，包括连接插件、主机清单、模块、插件以及剧本。其中，连接插
不会代码的小林·2024-09-06 13:36

使用Ansible进行自动化运维

引言简介自动化运维在现代IT基础架构管理中扮演着重要角色。通过自动化，我们可以提高效率、减少人为错误和加速部署流程。
weixin_58606202·2024-09-06 12:02

Yarn架构原理

一、基础架构YARN主要由ResourceManager、NodeManager、ApplicationMaster和Container等组件构成。
Hub-Link·2024-09-05 21:24

CDC 数据实时同步入湖的技术、架构和方案汇总

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
Laurence　·2024-09-05 18:33

IaC：状态管理的最佳实践

IT基础架构管理是一项复杂的任务。长期以来，业界不断探索并实施多元化策略，提升企业网络环境的管控能力。
网安加社区·2024-09-04 05:59

大数据技术之Flume

1.2Flume基础架构Flume组成架构如下图所示。1.2.1AgentAgent是一个JVM进程，它以事件的形式将数据从源头送至目的。
okbin1991·2024-09-03 00:32

MySQL基础架构

一、MySQL体系架构引用网图：MySQL自上而下可分为网络连接层、服务层、存储引擎层和系统文件层。网络连接层客户连接器：提供MySQL服务器建立的支持。目前几乎支持所有主流的服务端编程技术。比如JAVA通过JDBCAPI连接连接。服务层服务层是MySQLServer的核心，主要包含系统管理和控制工具、连接池、SQL接口、解析器、查询优化器和缓存六个部分。连接池：负责存储和管理客户端与数据库的连接
GrayGo·2024-09-02 23:57

SkyWalking：⼀款用于分布式系统的应用程序性能监视工具

主要功能特性多种监控手段，可以通过语言探针和servicemesh获得监控的数据支持多种语言自动探针，包括Java，.NETCore和Node.JS;轻量高效，无需大数据平台和大量的服务器资源4、模块化
学博成·2024-09-02 23:23

医疗数字化转型数据中台架构方案（一）

为推进医疗数字化转型，我们提出构建数据中台架构方案：通过集成医院内外多个数据源，利用大数据、人工智能等技术对数据进行清洗、整合、标准化处理，形成高质量的数据资产；再基于云原生技术构建湖仓一体化大数据平台
智汇优库·2024-09-02 19:32

数仓分层架构：DWS

**数据仓库服务层（DataWarehouseServices）**：-在一些云服务提供商的数据平台中，DWS可能指的是提供数据仓库功能的一组服务，这些服务可能包括数据存储、管理和分析工具。2.
大连赵哥·2024-09-01 16:11

基于Hadoop的高校教学管理平台设计与实现

文中就高校大数据平台的关键技术和架构进行阐述，结合高校实际情况，设计高校大数据平台架构，通过搭建Hadoop集群环境，以业务系统和平台之间的数据交互验证平台设计的可行性和优势。
这是辰辰啊·2024-09-01 00:38

基于Spark的云南旅游大数据分析平台

智慧旅游大数据平台的建设，能够为旅游业提供更加高效、智能的数据处理和分析能力，帮助旅游企业更好地了解市场需求、优化资源配置。
Sweican·2024-08-31 19:09

爬取MalwareBazaar实现恶意样本数据自由

在网上搜索后发现各个开源的数据集都有各种各样的问题，如这个DikeDataSet:https://github.com/iosifache/DikeDataset优点是有白样本，缺点是黑样本分布不均且主要集中在一个家族里发现有一个比较好用的开源数据平台
梦想闹钟·2024-08-30 18:51

【赵渝强老师】基于大数据组件的平台架构

  在了解了大数据各个生态圈所包含的组件及其功能特性后，就可以利用这些组件来搭建一个大数据平台从而实现数据的存储和数据的计算。下图展示了大数据平台的整体架构。  
赵渝强老师·2024-08-30 16:07

联发科Wi-Fi7基带芯片MT7996AV和收发芯片MT7977AN工艺全景图

芯品快报：亚德诺（ADI）超静音步进电机驱动芯片——TMC2209芯品快报：德州仪器（TI）的高性能、集成式的双全桥电机驱动器——DRV8412IPBrain小组集成电路大数据平台2024年07月11日
Victor-Tian·2024-08-30 10:58

大数据分析与大数据开发两者的区别是怎样的?

大数据主要分为两个就业方向：①大数据开发②大数据分析大数据分析：主要负责现有数据价值提炼与挖掘，包括业务增长点挖掘，产品改进点挖掘，业务分析指标体系构建，业务分析报告出具等大数据开发：主要负责大数据平台与应用开发
泰迪智能科技01·2024-08-29 10:18

550MHz超高主频：揭秘ST公司M7单核性能王MCU（附全系列MCU报告一览表）

550MHz超高主频：揭秘ST公司M7单核性能王MCU（附全系列MCU报告一览表）这周末，除非外面下钞票，否则谁也拦不住我玩《黑神话悟空》（附：两款可以玩转悟空的显卡推荐）原创IPBrain平台君集成电路大数据平台
Victor-Tian·2024-08-28 20:10

大模型企业应用落地系列三》基于大模型的对话式推荐系统》技术架构实现》大数据平台层

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录大模型企业应用落地系列三技术架构实现》大数据平台层大模型底座层具体实现大模型推荐技术发展趋势探讨总结大模型企业应用落地系列三技术架构实现
陈敬雷-充电了么-CEO兼CTO·2024-08-28 03:49

Spring MVC 详细笔记、原理及实例演示

SpringMVC参考：编程帮1.概述1.1简介**SpringMVC**框架是一个开源的Java平台，为开发强大的基于Java的Web应用程序提供全面的基础架构支持非常容易和非常快速。
pox21s·2024-08-28 01:38

2019.10.31感恩日志

1.感恩天地的庇佑，父母的养育之恩2.感恩早晨一起静心，诵读金正宣言3.感恩与国家数据平台和夏国强对接国家上传平台数据传送项，对关键数据再次双方做核对4.感恩对平台续费项事宜做具体统计5.感恩对基金知识的学习
微风_f546·2024-08-27 23:57

初识大数据（二）医疗大数据

此篇文章主要跟大家介绍一下大数据在医疗行业内的应用与和落地，给我们的日常生活带和医疗行业带来什么样的变化、适合初入者了解大数据在行业内的应用落地，增加大数据从业人员的业务能力主要内容为大数据在医疗行业中应用价值、医疗大数据平台
9eb8afdad681·2024-08-27 05:35

DNS、网关、IP、DHCP

DNS、网关、IP、DHCP：深入剖析与理解在计算机网络的世界中，DNS、网关、IP和DHCP是四个至关重要的概念，它们共同构建了互联网的基础架构，确保了数据的准确传输和设备的有效连接。
Covirtue·2024-08-27 05:25

【面试系列】30个常见的初级SQL编程题

⭐️大数据平台建设指南：全面讲解从数据采集到数据可视化的整个过程，掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python：初识、了解与热恋
野老杂谈·2024-08-25 22:31

德州仪器（TI）的高性能、集成式的双全桥电机驱动器——DRV8412

芯品快报：德州仪器（TI）的高性能、集成式的双全桥电机驱动器——DRV8412芯品快报：亚德诺（ADI）超静音步进电机驱动芯片——TMC2209原创IPBrain平台君集成电路大数据平台2024年08月
Victor-Tian·2024-08-25 10:47

windows机器使用spring.config.import配置项与nacos作为配置和注册中心, 提示找不到nacos:xxx.yml配置文件的一次问题及处理

场景：使用springboot+springcloud+springcloudAlibaba为基础架构的微服务项目,使用nacos作为配置中心以及yaml文件作为配置文件格式完成项目配置,公司提供的一台
Grandpa_Rick·2024-08-25 07:03

WEB网页设计期末作业个人主页——基于HTML+CSS制作个人简介网站

获取更多优质源码】web前端期末大作业：【毕设项目精品实战案例(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码：【echarts大屏展示大数据平台可视化
html5网页设计·2024-08-23 20:55

MySQL体系架构图

MySQL基础架构图上图中，连接池为连接层，系统管理和控制工具、SQL接口、解析器、查询优化器、缓存为SQL层，可插拔存储引擎为存储引擎层，系统文件、文件和日志为文件系统层。
BPDU·2024-08-23 10:48

多模态大模型Internvl-1.5-26B微调后部署及测试实录（附代码）

基于Dify的智能分类方案：大模型结合KNN算法（附代码）OpenCompass：大模型测评工具一文读懂多模态大模型基础架构大模型管理平台：one-api使用指南大模型RAG、ROG、RCG概念科普RAGOnMedicalKG
写代码的中青年·2024-08-22 15:59

快速、深入理解设计模式的what、why、how

架构师的职责就是设计一个公司系统的基础架构，并提供关于怎样建立和维护系统的指导方针。，那具备
程序猿KIMI·2024-08-22 15:25

【非结构化数据平台】大型集团企业非结构化数据平台建设方案WORD

非结构化数据平台建设目标统一存储管理电子单据、财务凭证、原始凭证等非结构化数据的全生命周期管理，提供集团知识统一管理，支撑XX集团财务集中管控平台业务开展。
数字化建设方案·2024-03-10 17:47
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他