台架

大数据中台架构以及建设全流程一（Paas层设计）

目录设计背景问题点中台目标复用，赋能，降本增效中台整体架构Pass层技术选型实时存储平台----------->KAFKA（未来pulsar也不错）离线存储平台（Hadoop系列）Hadoop选型机架感知硬件选型(PB级)内存配置资源计算关键参数存储平台常见故障调度系统（Yarn）管理平台AmbariClouderaManagerCloud自研+开源组件日志采集调度平台实时数据Sql查询平台设计背
只会写demo的程序猿·2023-06-13 01:29

千万级车联网 MQTT 消息平台架构设计

新一代的车联网系统对于底层消息采集、传输和处理的平台架构提出了更高的要求。本系列专题的上篇文章《车联网场景中的MQTT协议》中我们已经提到，MQTT协议是目前最适合车联网场景数据平台搭建的通信协议。
科技猿族·2023-06-12 20:43

腾讯安全SOC+荣获“鑫智奖”，助力金融业数智化转型

腾讯安全申报的“SOC+基于新一代安全日志大数据平台架构的高级威胁安全治理解决方案”获评“鑫智奖·网络信息安全创新优秀解决方案”。
·2023-06-12 15:34

快手 Flink 的稳定性和功能性扩展

本篇内容主要分为四个部分：快手Flink平台稳定性保障和智能运维复杂场景下的功能扩展批处理的定制优化点击查看原文视频&演讲PPT一、快手Flink平台1.1计算平台架构如上图所示，Flink主要运行在Yarn
Apache Flink·2023-06-12 12:47

顺丰数据治理总体框架与实践PPT(附下载)

【中台实践】华为大数据中台架构分享.pdf华为的数字化转型方法论华为如何实施数字化转型（附PPT）超详细280页Dock
公众号:肉眼品世界·2023-06-12 06:50

后端服务架构高性能设计之道

本序列文章旨在探讨和总结后台架构设计中常用的技术和方法，并归纳成一套方法论。
Young丶·2023-06-12 06:38

移动端android平台架构实战

Listitem本文主要针对移动端基础平台架构做详细分析与详解,并教大家一步一步实战来实现一个大作坊的基础架构平台：github.com写本文的目的:由于本人在移动端滚爬摸打已有数年之久,经历了大团队几十人开发到一个人独立开发的过程
白首偕老·2023-06-11 21:44

阿里云服务器vCPU和CPU有区别吗？

阿里云服务器ECS的超线程的实现基于x86平台架构HT技
gla2018·2023-06-11 18:02

NDK JNI so 库崩溃分析

首先要根据不同的平台架构来找到对应的工具arm、x86_64、或者aarch64、i686先大概看看各个工具功能：as是汇编编译器、ar用于创建和修改档案文件（.a就是一种档案文件）、ld链接器、nm列出程序文件的符号和符号在内存中的地址
AlexeyElijah·2023-06-11 15:26

浅谈数据中台架构设计

中台这个词在互联网行业现在越来越火了，从以前对中台一词的争议，到现在演变成各种中台产品林立，加上阿里百度等中台架构的成功，可以看到中台产品在未来一段时间都会是互联网行业非常火爆的赛道，尤其是数据中台更会是很多企业采纳的数据治理方案
何处生才·2023-06-11 07:20

第一章 数据中台架构总体设计

1、架构设计&业务关系业务关注点：在于DA层技术难点：在于PaaS层1.1、PaaS层：基础设施层数据采集：flume、sqoop、datax、flinkcdc、canel数据计算：MR、Spark、flink数据存储：HDFS、Hbase、TIDB、Mysql…1.2、DaaS层：数仓层主要包括DW、DM层1.3、DA层：BI可视化&数据应用主要是BI可视化、AI应用、用户画像、推荐系统方面的应
随缘清风殇·2023-06-11 07:17

简单的数据平台笔记

首先是网易的产品矩阵，很典型的大数据平台架构比较有亮点的是指标中台指标中台定义的核心要点：1、一次定义多次复用2、自动计算3、集中管理4、指标服务主要解决的问题就是：指标口径不一致（业务口径or数据源不统一
小菜菜1223·2023-06-10 21:32

我所经历的大数据平台发展史（四）：互联网时代 • 下篇

在互联网时代被弱化的数据模型谈起数据模型就不得不提传统数据平台架构发展，我相信很多朋友都晓得传统数据平台的知识，其架构演进简单一句话说“基本上可以分
松子无核·2023-06-10 20:10

金融平台系统软件整体架构

每个功能模块就能够形成单个独立小系统，再加上底层平台架构，再增加了很多的子类系统。从业务考虑CRM：营销获客，意向客户的信息收集，其中包含了各个渠
jiuhuayuese·2023-06-10 00:45

metersphere平台架构解析及二次开发

1、github地址：https://github.com/metersphere，系统架构：后端springboot，前端vue.js，数据库MySQL（我是5.7.33），如果需要使用性能模块，就要安装zookeeper、kafka、promethus和node-exporter（监控服务器资源），以及平台对应的node-controller（加压节点）、date-streaming（消费处理
Bright Lau·2023-06-09 21:16

Java生鲜电商平台-商城后台架构与原型图实战

Java生鲜电商平台-商城后台架构与原型图实战说明：生鲜电商平台的运营平台，其中需要很多的功能进行管理。目前把架构与原型图实战分享给大家，希望对大家有用.仪表盘/首页，简单统计，报表页，运营快捷口。
weixin_30493401·2023-06-09 14:51

基于Html5的在线资料库的设计与实现(asp.NET,SQLServer)

MicrosoftVisualStudio2010集成开发环境，后台编程语言采用C#编程语言来进行编程开发，数据库我们采用当下流行的SQLServer2008数据库管理系统来存放平台中的数据信息，整个系统采用B/S架构进行开发，这样能把平台架构到一个服务上面给互联网上的用户提供完整的服务
QQ242219979·2023-06-06 23:36

数据中台架构体系浅析

中台出现的背景从技术上来看，随着业务的发展，很多企业在前期搭建了很多的IT系统，系统间像烟囱一样相互独立。在面对着越来越复杂的业务，越来越多的数据，企业IT在扩展旧系统上出现了一定的局限，从而产生不断的重复建设的问题，企业需要制定数字转型改革的战略，来解决复杂业务系统之间的解耦问题，从而降低产品各个模块的依赖，提高复用程度。从管理架构上来看，随着公司业务的不断壮大，每个团队都需要技术，产品，市场等
独星·2023-06-06 23:38

快手 Flink 的稳定性和功能性扩展

本篇内容主要分为四个部分：快手Flink平台稳定性保障和智能运维复杂场景下的功能扩展批处理的定制优化点击查看原文视频&演讲PPT一、快手Flink平台1.1计算平台架构如上图所示，Flink主要运行在Yarn
·2023-06-06 22:06

搭建中台架构的几个误区

虽然数据中台越来越被市场认同，但参与主体仍对其缺少系统的了解，对一些核心问题的处理仍不得要领。01、仅搭建平台数据中台建设仅仅是企业IT变革的起点，建设一个项目或者搭建一个平台并不能解决企业数字化转型中遇到的所有问题。数据中台是企业数字化变革的关键，企业在决定进行数字化转型时便要根据数据规模和应用需求制定全套的战略规划，将建设中台作为一项涉及公司全部业务流程、自上而下进行变革的工程来执行。02、中
马晓东国云数据CEO·2023-04-21 22:00

详解大数据平台架构

目录：什么是大数据Hadoop介绍-HDFS、MR、Hbase大数据平台应用举例-腾讯公司的大数据平台架构“就像望远镜让我们能够感受宇宙，显微镜让我们能够观测微生物一样，大数据正在改变我们的生活以及理解世界的方式
yoku酱·2023-04-21 17:46

基于领域驱动设计的业务中台架构设计

如何识别与隔离业务中的变与不变，保持复杂度总体可控，并使业务中台架构如实地
whfeng·2023-04-21 15:42

spark提交命令中的jars设置方式

此方法是在大数据平台架构与原型实现：数据中台建设实战这本书上看到的之前我们使用的方式是将所有jar的名字加入到配置文件中，提取为jars参数1.脚本目录下创建lib文件夹2.将依赖jar包存放至lib下
春_·2023-04-21 12:15

微服务平台架构，分布式应用场景管理

微服务平台架构是一项在云中部署应用和服务的新技术。大部分围绕微服务的争论都集中在容器或其他技术是否能很好的实施微服务。
数商云运营·2023-04-21 10:08

linux驱动开发 - 07_pinctrl 和 gpio 子系统实战

3.1修改设备树文件3.2添加LED设备节点3.3LED灯驱动程序编写3.4编写测试APP4编译驱动程序和测试APP4.1编译驱动程序4.2编译测试APP5运行测试链接:C/C++Linux服务器开发/后台架构师
kaka的卡·2023-04-21 09:23

人社LEAF平台架构及其主要技术架构特点

人社LEAF平台架构及其主要技术架构特点https://wheart.cn/so/home?
无极低码·2023-04-21 02:02

一种面向后端的微服务低代码平台架构设计

作者：京东科技常姜洲一、背景近期参加公司组织的极客中餐厅训练营，我们所在的小组接到的课题是微服务的低代码平台架构设计。
·2023-04-20 11:04

独居日记64：白日焰火

是安吉丽娜(我们的实验台架)连着炸了四次管子，一次比一次响亮，用实力证明她比烟花更绚丽。俗话说没炸过管子读研生涯是不完整的，阿铎都快毕业了，最近两周内连着炸了四次。
MMMax_手手·2023-04-20 04:53

大咖直播专场 | 当人工智能遇到数据库

线上沙龙技术流第28期—大咖专场04月11日（周二）19:30“当人工智能AI遇到数据库DB”KaiwuDB-B站直播间本期大咖KaiwuDB高级架构师刘伟刘老师毕业于北京大学，曾任IBM主机机器学习平台架构师
KaiwuDB·2023-04-20 00:43

调度系统: Quartz

最近在做数据中台架构设计，整体架构设计完后发现数据中台最重要的就是元数据和调度系统。元数据设计参考了atlas、metcat、datahus，模型设计、数据架构、技术架构基本完成。
wandy0211·2023-04-19 14:58

六大主流大数据采集平台架构分析

日志收集的场景DT时代，数以亿万计的服务器、移动终端、网络设备每天产生海量的日志。中心化的日志处理方案有效地解决了在完整生命周期内对日志的消费需求，而日志从设备采集上云是始于足下的第一步。随着大数据越来越被重视，数据采集的挑战变的尤为突出。今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任
带着希望活下去·2023-04-19 06:27

大数据分析平台架构有哪些

大数据分析平台的建设是十分必要了，一方面它可以汇通企业的各个业务系统，从源头打通数据资源，另一方面也可以实现从数据提取、集成到数据清洗、加工、可视化的一站式分析，帮助企业真正从数据中提取价值，提高企业的经营能力。在搭建数据分析平台之前，要先明确业务需求场景以及用户的需求，通过大数据分析平台，想要得到哪些有价值的信息，需要接入的数据有哪些，明确基于场景业务需求的数据平台要具备的基本的功能，从下至上可
中琛源科技·2023-04-19 06:57

安卓平台架构

文章目录一、安卓平台架构1、Linux内核2、硬件抽象层3、安卓运行时4、原生C/C++库5、JavaAPI框架6、系统应用二、安卓设备文件浏览1、启动设备文件浏览器2、查看内存目录3、查看外置存储卡三
Yll.000·2023-04-19 04:23

未来社会学习科研工作网络平台架构倡议

应赋予基层更多科研机会，推动工研，文研，科研等社会各阶层问题的破题公关。打破阶层学习，学术，研发应用等各方面层级壁垒。促进社会人才架构扁平化，薪酬架构扁平化，学习研究晋升无层级研究发展化。实现大学等各大研究所资源充分利用，并推动建设全民共享共建的网络科研实验应用创新平台。建立国际间全民学习交流各学科文化与科研平台与国际间科研创新平台促进衔接共享共创。
WorldFuture·2023-04-19 00:13

华为OD前端面试题

1、写题：全排列（有重复的元素）；2、介绍项目经历（技术栈、框架、实现了什么功能）；3、登录、鉴权、权限控制前台架构（用什么存了用户的信息，怎么去拦截的，怎么进行权限校验的）；4、路由守卫；5、通过axios
一米阳光MM·2023-04-18 22:52

从 ClickHouse 到 Apache Doris，腾讯音乐内容库数据平台架构演进实践

导读：腾讯音乐内容库数据平台旨在为应用层提供库存盘点、分群画像、指标分析、标签圈选等内容分析服务，高效为业务赋能。目前，内容库数据平台的数据架构已经从1.0演进到了4.0，经历了分析引擎从ClickHouse到ApacheDoris的替换、经历了数据架构语义层的初步引入到深度应用，有效提高了数据时效性、降低了运维成本、解决了数据管理割裂等问题，收益显著。本文将为大家分享腾讯音乐内容库数据平台的数据
·2023-04-18 22:06

仿真平台架构设计

背景：1.业务背景：我司对仿真系统的需求日渐增加，比如道路交通的仿真、船舶港口仿真、车联网（adhoc）仿真、以及运营商承载网的仿真等；2.回顾“什么是仿真时钟”：用于描述仿真时间的变化。在连续系统中，仿真时间的变化基于仿真时钟步长的确定，比如CPU按固定的步长持续推进时间。在离散事件系统中，引起系统状态变化的事件是随机发生的，因而仿真时钟的步长也是随机的，从一个事件发生时刻推进到另一个事件发生时
liuqiker·2023-04-17 14:34

云原生AI开发平台架构及核心优势

云原生AI开发平台架构以云原生的敏捷高效赋能人工智能应用开发与部署云原生AI开发平台以云计算为
互联互通社区·2023-04-16 21:25

AI平台、AI中台架构

选择什么方式接入AI开放平台1）公有云形式：在开放平台注册账户，申请权限，调用对应AI能力的API服务缺点：数据出公司域，存在数据安全优点：价格相对低2）私有化形式：将AI能力以产品包的形式部署到客户的服务器上缺点：需要后续运维支持、价格昂贵优点：数据安全AI中台是用来构建大规模智能服务的基础设施，是一套完整的人工智能模型全生命周期管理平台和服务体系，提供模型设计训练、模型/算法库、复用标注管理、
秋水 墨色·2023-04-16 21:54

java 中台架构设计

中台的定义：“中台是企业级能力复用平台”阿里对前台、中台、后台职责的定位，前台主要面向客户以及终端销售者，实现营销推广以及交易转换。中台主要面向运营人员，完成运营支撑。后台主要面向后台管理人员，实现流程审核、内部管理、后勤支撑，比如采购、人力、财务、OA等系统。DDD包括战略设计和战术设计两部分，它们分别从不同的视角出发，完成领域建模和微服务的拆分和设计。战略设计是从业务视角出发，划分业务的领域边
工作QQ感冒的石头·2023-04-16 16:52

工作三年的Java程序员该如何规划后续的职业发展？

平台架构无压力？看着这些问号都心累。相同三年，不同程序员却走在了不同的路线，有些能在三年成为架构师，有些却还是程序员，不是工作年限加长而已，那么，三年你迷惘了吗？又走到了那个十字路口？
ryu7769·2023-04-16 14:49

记一次中台架构研讨会议

上周六，公司内部召集所有产品线的骨干员工，对公司未来的中台架构搭建展开剧烈的研讨，我也有幸参与其中。在得知要参加这次中台架构的讨论会议之后，我也在网上找了一些资料，对中台架构有了一定的认识。
枫_7654·2023-04-16 12:37

Android 平台架构

Android是一种基于Linux的开放源代码软件栈，为广泛的设备和机型而创建。下图所示为Android平台的主要组件。架构图Android架构图自下而上介绍：Linux内核Android平台的基础是Linux内核。例如，AndroidRuntime(ART)依靠Linux内核来执行底层功能，例如线程和低层内存管理。使用Linux内核可让Android利用主要安全功能，并且允许设备制造商为著名的内
zoustin·2023-04-16 08:58

来之不易的产品入云

平台架构：客户端使用.net,中间件用tuxedo，数据库用DB2，数据库与中间件是独立的机器。第一天：数据库安装，数据导入。第二天：tuxedo中间件安装部署。
Touch未来·2023-04-15 12:50

爱油科技基于SpringCloud的微服务实践

主要负责业务平台架构设计，DevOps实施和研发过程持续改进等，关注领域驱动设计与微服务、建设高效团队和工程师文化培养。
showgood119·2023-04-15 11:04

[部署中心-1]构建与部署中心基本概念

平台架构系统分为两个主要部分:配置中心配置将服务运行所需要的所有配置项入库,负责生成运行所需的配置文件(一般为yml),并指示agent进行系统的发布/回滚等.agent-client(以下简称agent
StruggleYang·2023-04-14 22:10

硬核干货 | 基于Impala的网易有数BI查询优化总结

01有数BI+Impala遇上慢查询在网易有数大数据平台架构中，有数商业智能（BI）产品提供了数据大屏、有数报告和自助取数
浪尖聊大数据-浪尖·2023-04-14 15:49

分享大数据建模工具-大数据挖掘建模平台

改平台具有多方面的特点包括：平台架构、平台功能、平台优势、特色服务等多方面大数据挖掘建模平台平台架构大数据挖掘建模平台丰富底层架构技术支撑，多行业数据展示大数据挖掘建模平台平台功
泰迪智能科技·2023-04-14 15:00

抽奖平台架构设计

1、需求背景：随着抽奖项目的增多，提取抽奖功能核心部分服务化变得越来越重要，使各个项目都能统一使用，并且在容易出问题的点，比如安全性，并发等问题上进行统一管理，提供通用的抽奖接口，数据统计接口，并且实现不同的抽奖算法。2、数据表设计CREATETABLEuser(idint(11)unsignedNOTNULLAUTO_INCREMENTCOMMENT‘主键’,set_idint(11)NOTNU
Hunter_first·2023-04-14 12:24

乐刻大数据平台架构实践

乐刻大数据平台架构实践来源：简书乐刻运动大数据是基于hadoop体系搭建的，主要满足运营的日常报表，以及公司核心指标为主。
huangshulang1234·2023-04-14 12:54
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他