大数据平台-架构基础

RESTful 架构基础

点击上方“芋道源码”，选择“设为星标”做积极的人，而不是积极废人！源码精品专栏中文详细注释的开源项目消息中间件RocketMQ源码解析数据库中间件Sharding-JDBC和MyCAT源码解析作业调度中间件Elastic-Job源码解析分布式事务中间件TCC-Transaction源码解析Eureka和Hystrix源码解析Java并发源码来源：http://t.cn/EVBQ2Ug1.简介1.1
芋道源码·2023-10-26 23:22

TusharePro 金融大数据快速使用入门

TusharePro金融大数据快速使用入门TusharePro是一个开源的金融数据源，数据内容包含股票、基金、期货、债券、外汇、行业大数据，同时包括了数字货币行情等区块链数据的全数据品类的金融大数据平台
whatispython·2023-10-26 18:32

Games104现代游戏引擎笔记 网络游戏架构基础

挑战1:网络同步挑战2:是网络的可靠性，包括应对网络的延迟，丢包和掉线挑战3:反作弊和安全系统，因为网络游戏的本质是经济系统挑战4:多样性(不同设备，不同服务器)，在不停服的情况下热更新挑战5:大量人数时对高并发，高操作的要求NetworkProtocols网络协议Socket编程，通过接口，确认好相互的协议，就可以快速的建立持续的链接国内是IVP4居多，最好兼容IPV6，这是世界标准通过三次握手
Mhypnos·2023-10-26 16:53

AIoT 时代到来，你的大数据平台准备好了吗？

Kyligence在帮助企业建设大数据平台的过程中，也见证了AIoT技术从概念到实践的演变，亲历了诸多前沿应用。
Kyligence·2023-10-26 16:39

技术解读：实时数仓Hologres如何支持超大规模部署与运维

通过该评测，证明了阿里云实时数仓Hologres能够作为数据仓库和大数据平台的基础设施，可以满足用户建设大规模数据仓库和数据平台的需求，具备支撑关键行业核心业务数据平台的能力。
阿里云云栖号·2023-10-26 12:43

大数据性能测试方案-V1.0

XXX大数据平台性能测试方案[V1-1.0]拟制人：审核人：批准人：[xxxx年xx月xx日]
进击的雷神·2023-10-26 06:34

网络媒体大数据平台项目第一阶段验收心得

首先。本项目开展时长已有20天了，每天非常充实又忙碌的过着，一直忽略了记录一些东西。比如说新学到的知识，新接触的技术，新解决的问题，这些对我而言都是进步的印迹。1.mongodb数据库的使用，具体用法需要在项目中重温。2.jsp直接写action和sevlet，我觉得这方便极了。也容易修改。3.大数据读取问题：（1）本项目数据量极大，二十多亿条，在没有分布式和机械硬盘的情况下，就要尽可能改善读写速
Susy_ca6f·2023-10-26 01:39

架构师必知必会系列：大数据处理与架构

为了解决这一难题，云计算与大数据平台成为行业主要的发展方向。目前，云计算与大数据领域处于蓬勃发展阶段。大数据与云计算技术的广泛应用导致了大数据的“三驾马车”模型
禅与计算机程序设计艺术·2023-10-25 19:04

PostgreSQL学习总结

PostgreSQL一、概述1、架构基础PostgreSQL是一个功能强大的开源对象-关系数据库服务器(ORDBMS)。pgsql使用了客户端/服务器模式。
忘了喝奶茶·2023-10-25 18:32

一张Lambda大数据架构架构图

该系统的大数据架构是基于Lambda架构搭建的大数据平台处理大规模视频网络观看数据。
huaqianzkh·2023-10-25 16:50

对中台的理解

数据中台是搭建大数据平台，
君之书·2023-10-25 02:54

大数据计算模式：批处理&流处理

大数据要实现业务落地的前提，是企业需要搭建起自身的大数据平台，去实现对数据价值的挖掘和应用。根据实际的业务场景需求，不同类型的数据，需要不同的计算处理模式。
成都加米谷大数据·2023-10-25 01:00

酷开科技丨酷开系统让大数据深入家庭生活

酷开系统通过对海量消费者数据的分析和挖掘，建立了自己的大数据平台，通过大数据平台进行人群
京创尤品·2023-10-24 22:57

RT-Thread 中断管理（学习）

中断处理与CPU架构密切相关Cortex-MCPU架构基础不同于老的经典ARM处理器（例如：ARM7,ARM9），ARMCortex-M处理器有一个非常不同的架构，Cortex-M是一个家族
饼干饼干圆又圆·2023-10-24 03:38

阿里经济体大数据平台的建设与思考

本文内容根据演讲视频以及PPT整理而成。双十一！=11.11首先从双11说起，双11已经成为阿里巴巴最大的单日促销活动。双11活动可能对于消费者而言只是一天而已，但是对于阿里巴巴和数百万商家而言，却是一个非常长线的工作。站在阿里巴巴的角度来看双11，其实无论是从业务线还是技术线，背后都存在着很多的思考。从“人、货、场”的角度看待双11。首先，对于“人”而言，双11需要回答什么样的消费者会看什么样的
zhaowei121·2023-10-23 12:25

KubeVela跨地域的多集群管理方案

在公司网络规划上只允许一个区域的一个VPC跟另一个区域的一个VPC打通，同区域不同机房的网络都可以打通的网络架构基础上，由于一个区域可能有多个业务，业务的k8s分布在不同云厂商或机房，要让kubevela
Java艺术·2023-10-23 08:04

sqoop命令简记

长时间没有使用sqoop命令忘记了很多，这里简单记一下，方便以后查找import上传大数据平台数据–username用户名称–password密码–table表名–hive-databasehive上的数据库名
select_where·2023-10-22 22:04

智慧河湖方案：AI赋能水利水务，构建河湖智能可视化监管大数据平台

一、方案背景我国江河湖泊众多，水系发达。伴随着经济社会快速发展，水生态水环境问题成为群众最关注的民生议题之一。一些河流开发利用已接近甚至超出水环境承载能力，一些地区废污水排放量居高不下，一些地方侵占河道、围垦湖泊等现象时有发生。二、方案概述旭帆科技依托智能高清摄像头、5G无人船、5G无人机等前端设备的数据与信息采集技术、视频监控与流媒体处理技术、人工智能识别技术、云计算、大数据、网络传输与通信等技
Black蜡笔小新·2023-10-21 19:01

大数据测试

一.大数据平台测试简述大数据平台测试包括2部分：基础能力测试和性能测试Ⅰ).基础能力测试大数据平台的基本功能和数据的导入导出对SQL任务、NoSQL任务、机器学习、批处理任务的支持大数据平台是否能够通过界面的形式方便用户进行非运行维护
是酱酱呀·2023-10-21 10:19

一.大数据平台：记账系统测试用例bug的软工测试

在软工测试方面，我们会设计多条测试用例，同时也会有许多bug产生，同时还有回归测试中修复的bug，但是怎么给设计人员清晰的展示测试用例的分布情况和修改案例呢，这里我们用finebi对软工测试结果最后评估实现数据分析。以下是测试的思路和流程。1.测试思路收到测试任务后：•第一步是去找测试的有关方法，之前学习到测试分为黑盒测试和白盒测试。实验里面也实现过白盒测试，但是白盒测试是对代码的测试，面对一个工
玻璃水的客观性·2023-10-21 10:11

认识大数据

大数据开发需要了解的几种语言HadoopSparkStorm大数据平台应用六大知识点一、大数据中的数据仓库和Mpp数据库如何选型?
三思而后行，慎承诺·2023-10-21 07:42

大数据平台开发经验

如果我是一个有着10年大数据平台开发经验的开发者，面试时可能需要准备以下知识大数据生态系统：**熟悉大数据技术栈，如Hadoop、Spark、Flink等，了解它们的原理、用途和优劣势。
三思而后行，慎承诺·2023-10-21 07:04

与领航者共话湖仓， StarRocks Summit 2023 技术专场分论坛剧透来了！

过去一年里，越来越多的企业开始为自有大数据平台引入湖仓一体数据架构方案，来解决实际的业务问题：微信实现多个平台数据需求统一，将平均数据查询速度提升3倍。
StarRocks_labs·2023-10-20 22:25

腾讯大数据平台质量保障之道

引言大数据时代，业界各巨头都在投入重兵打造自己的大数据平台，分析挖掘蕴藏在数据金矿中的价值。在腾讯，数平承建了公司级大数据平台，我们的测试团队也有幸一起搭上了大数据的航母。这是一种机遇，更是一种挑战。
test_soy·2023-10-20 20:42

游戏网页制作 仿英雄联盟网页设计作业 HTML CSS游戏官网网页模板 大学生游戏介绍网站毕业设计 DW游戏主题网页模板下载 游戏娱乐网页成品代码 英雄联盟网页作品下载

获取更多优质源码】web前端期末大作业：【毕设项目精品实战案例(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码：【echarts大屏展示大数据平台可视化
STU网页优选·2023-10-20 18:33

智慧水务大数据平台建设介绍

平升电子智慧水务/智慧水务大数据平台，综合水务公司对管网地理信息在线、供水调度SCADA、各环节数据互联互通、工单执行过程监督、运营情况分析等管理需求，建立了一套面向基层执行者、中层管理者、高层决策者等各层级管理人员的全面科学的解决方案
平升电子DATA86·2023-10-20 16:57

盘点哪些我拥有的课程（一）【文末分享

服务端+MVP架构+封装思想+主流框架3.Typescript+React高仿Antd从零到一打造自己的组件库设计，开发，测试，发布再到CI/CD，从0到1造轮子4.玩转热门框架用企业级思维开发通用够硬的大数据平台一次大厂开发流
weixin_51361104·2023-10-20 09:48

数仓系列 | Flink 窗口的应用与实现

整理|祝尚（Flink社区志愿者）校对|邹志业（Flink社区志愿者）摘要：本文根据ApacheFlink系列直播整理而成，由ApacheFlinkContributor、OPPO大数据平台研发负责人张俊老师分享
Apache Flink·2023-10-20 00:33

聊聊企业大数据平台在企业运营中的作用

伴随着大数据时代的悄然来临，数据的价值得到人们的广泛认同，对数据的重视提到了前所未有的高度。移动互联网、社交媒体和其他来源的数据爆炸式增长，产生了海量的数据，企业会仔细收集这些数据，并将其存储起来，以便重复使用。数据已经作为企业重要资产被广泛应用于盈利分析与预测、客户关系管理、合规性监管、运营风险关理等业务当中。那么大数据在企业经营中有什么作用，下面我们对大数据在企业经营中的作用进行简要介绍。1.
garyond·2023-10-19 09:04

大数据平台的优势与基本能力

大数据平台的独特优势和核心能力随着信息技术的迅猛发展，大数据平台在各行各业中扮演着至关重要的角色。大数据平台是一种集成了多种技术和工具的系统，用于收集、处理、存储和分析海量的结构化和非结构化数据。
抱紧大佬大腿不松开·2023-10-19 02:57

大数据架构和模式，第 2 部分

如何知道一个大数据解决方案是否适合您的组织简介在确定投资大数据解决方案之前，评估可用于分析的数据；通过分析这些数据而获得的洞察；以及可用于定义、设计、创建和部署大数据平台的资源。
断水流大湿兄·2023-10-18 13:54

用户之声 | 初探国产数据库之光——南大通用GBase

文|邢书恒「参加认证培训的原因」山东移动经营分析系统和大数据专题分析平台，从2012年开始引入国产数据库逐步替换原有数据库，分阶段建设、升级扩容大数据平台，采用GBase集群作为底层数据支撑。
GBASE数据库·2023-10-18 08:54

数仓建设（一）

想了想，我们的数仓的建设是基于大数据平台进行的，中间也经历了比较曲折的过程。每个行业都有自身的业务区别，不过很多还是比较相通的。
未来在这儿·2023-10-18 06:39

【软考系统架构设计师】复盘架构设计师真题知识点第六章---架构基础概念

【软考系统架构设计师】复盘架构设计师真题知识点第六章—架构基础概念复盘架构设计师真题知识点第六章---架构基础概念【软考系统架构设计师】复盘架构设计师真题知识点第六章---架构基础概念前言部分历年真题考点分析第一部分综合知识历年真题
进击的横打·2023-10-17 22:11

【kafka】Kafka 可视化工具Kafka Eagle安装和使用

因此，大数据平台上需要一套Kafka的管理监控系统，Kafka-Eagle。KafkaEagle是一个用于监控和管理kafka的开源组件，可以同时监控多个kafka集群。
Bogon·2023-10-17 11:56

大数据入门：Hadoop Yarn组件基础解析

在Hadoop框架当中，Yarn组件是在Hadoop2.0之后的版本开始引入，主要是为了解决资源管理和调度的相关问题，是在大数据平台的实际运用当中，根据实际需求而引入的解决方案。
成都加米谷大数据·2023-10-16 19:10

web课程设计——健身俱乐部健身器材网站模板(24页)HTML+CSS+JavaScript

获取更多优质源码】web前端期末大作业：【毕设项目精品实战案例(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码：【echarts大屏展示大数据平台可视化
IT黑马程序员·2023-10-16 11:38

web前端期末大作业：基于HTML+CSS+JavaScript制作鲜花礼品在线购物网站设计(19页)

获取更多优质源码】web前端期末大作业：【毕设项目精品实战案例(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】超炫酷的Echarts大屏可视化源码：【Echarts大屏展示大数据平台可视化
STU网页优选·2023-10-16 11:08

大数据产品深度与广度并举，腾讯云为数据价值释放带来最优解

云原生正在重新定义大数据平台？目前看的确如此。
大数据在线·2023-10-15 08:41

百度智能云千帆大模型平台 2.0 产品技术解析

本文整理自2023年9月5日百度云智大会-智能计算&大模型技术分论坛，百度智能云AI&大数据平台总经理忻舟的主题演讲《百度智能云千帆大模型平台2.0产品技术解析》。
百度Geek说·2023-10-15 02:27

向量数据库与传统数据库向量检索插件的区别？

这些插件仅可在现有的架构基础上用作优化方案，使用场景十分有
LCHub低代码社区·2023-10-14 19:38

大数据入门：Hadoop Yarn组件基础解析

在Hadoop框架当中，Yarn组件是在Hadoop2.0之后的版本开始引入，主要是为了解决资源管理和调度的相关问题，是在大数据平台的实际运用当中，根据实际需求而引入的解决方案。
加米谷大数据张老师·2023-10-14 16:26

hive on spark僵死问题分析

背景：最近大数据平台为租户经分系统提供运算及存储能力，经分的资源需求如下Memory:6TCPU:1600c存储：600T文件系统：HDFS运算组件:hiveonspark权限管理：sentry问题描述
baker_dai·2023-10-14 14:59

识时务

空降因为某个项目需要搭建一个大数据平台，我们都比较没有经验，老总就决定从外面招一个比较有经验的人，然后从部门中选出一两个和他做大数据。
西城丶·2023-10-14 09:22

docker的启动脚本也许是个坑

最近项目需要为大数据平台配备监控告警系统，虽说之前折腾过很长时间的nagios，对其中的原理比较了解，但是最终还是决定选择zabbix，原因有两点：1、nagios的开源的UI实在是惨不忍睹，而客户特别是不懂技术的门外汉对产品的要求往往都集中在
蚂蚁都督·2023-10-14 04:39

Apache Doris系列：大数据平台安装与部署详细步骤

ApacheDoris系列：大数据平台安装与部署详细步骤ApacheDoris（前身为Palo）是一个适用于大数据分析的开源列式存储数据库。
我的小星星·2023-10-14 04:15

Mysql sql 拼接Sqoop和Phoenix语句

需求描述：需要从myslq导入数据到大数据平台hbase，但是由于有100多张表，如果一个表一个表导入的话，工作量大。如果写代码的话，需要的时间也比较多。
suolemen·2023-10-13 17:31

调研了10家公司的技术架构，我总结出了一套大数据平台的套路

近年来，随着IT技术与大数据、机器学习、算法方向的不断发展，越来越多的企业都意识到了数据存在的价值，将数据作为自身宝贵的资产进行管理，利用大数据和机器学习能力去挖掘、识别、利用数据资产。近年来，随着IT技术与大数据、机器学习、算法方向的不断发展，越来越多的企业都意识到了数据存在的价值，将数据作为自身宝贵的资产进行管理，利用大数据和机器学习能力去挖掘、识别、利用数据资产。如果缺乏有效的数据整体架构设
即将秃头的Java程序员·2023-10-13 06:11

Spark大数据平台

  ApacheSpark是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UCBerkeleyAMPlab(加州大学伯克利分校的AMP实验室)所开源的类HadoopMapReduce的通用并行框架，Spark，拥有HadoopMapReduce所具有的优点；但不同于MapReduce的是——Job中间输出结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖
Hi~晴天大圣·2023-10-13 05:16

运维大数据平台的建设与实践探索

随着企业数字化转型的推进，运维管理面临着前所未有的挑战和机遇。为应对日益复杂且严峻的挑战，数字免疫系统和智能运维等概念应运而生。数字免疫系统和智能运维作为新兴技术，正引领着运维管理的新趋势。数字免疫系统和智能运维都借助大数据运维平台，实现数据驱动的运维策略，实时监控分析系统状态，自动识别异常行为、威胁和攻击，提供智能决策和预防性维护建议，实现自我保护和自我修复等，从根本上提高了系统安全性、稳定性和
H3C-Navigator·2023-10-12 22:40
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他