云原生数据仓库

Kubernetes operator（七） controller-runtime 篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第七篇，本节会对编写Operator非常重要的controller-runtime库进行学习基于kubernetesv1.24.0
格桑阿sir·2024-02-04 00:08

Kubernetes operator（五）api 和 apimachinery 篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第五篇，主要对k8s.io/api和k8s.io/apimachinery两个项目进行学习基于kubernetesv1.24.0
格桑阿sir·2024-02-04 00:37

Kubernetes operator（六）CRD控制器 开发实战篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第六篇，前面5篇的学习，我们已经清楚CRD开发的各个环节，本节就实际设计一个CRD，并为之编写控制器基于kubernetesv1.24.0
格桑阿sir·2024-02-04 00:37

TiDB内核解密：揭秘其底层KV存储引擎如何玩转键值对

一、简介TiDB是开源的分布式数据库，是一款同时支持在线事务处理与在线分析处理的融合型分布式数据库产品，具备水平扩容或缩容、金融级高可用、实时HTAP、云原生分布式数据库、兼容MySQL5.7协议和MySQL
超越不平凡·2024-02-04 00:27

下一代软件架构，如何构建微服务核心能力

随着数字化进程的加速，各种架构设计思想风起云涌，进入百家争鸣时代，微服务架构，云原生架构，Serverless架构，事件驱动架构，中台架构，容灾架构，到底哪种思潮代表未来呢？
阿里巴巴中间件·2024-02-03 23:04

【读书笔记】数据仓库- Apache Kylin权威指南

ApacheKylin权威指南（第2版）◆1.2.1为什么要使用ApacheKylin它们的主要技术是“大规模并行处理”（MassivelyParallelProcessing，MPP）和“列式存储”（ColumnarStorage）◆1.2.2ApacheKylin怎样解决关键问题基于以上两点，我们得到一个新的思路——“预计算”。应尽量多地预先计算聚合结果，在查询时刻也尽量使用预计算的结果得出查
KevinBrain·2024-02-03 19:16

[Python] 如何使用scikit-learn的preprocessing和impute模块进行数据预处理（数据无量纲化，缺失值填充，对分类型特征编码与哑变量，对连续型特征进行二值化与分段）

数据挖掘的五大流程获取数据从各种来源收集数据，包括但不限于数据库、数据仓库、互联网、传感器、社交媒体等。获取数据的方式可以通过数据抓取、数据爬取、数据采集工具等方法进行。
老狼IT工作室·2024-02-03 18:16

FluxMQ：新一代的高性能MQTT代理服务器

FluxMQ：新一代的高性能MQTT代理服务器前言FLuxMQ是一款基于java开发，支持无限设备连接的云原生分布式物联网接入平台。
程序媛之Lemon·2024-02-03 17:59

数仓建模&维度建模理论知识

0.思维导图第1章数据仓库概述1.1数据仓库概述  数据仓库是一个为数据分析而设计的企业级数据管理系统。
韩顺平的小迷弟·2024-02-03 16:02

微服务框架go-zero集成swagger在线接口文档

go-zero（收录于CNCF云原生技术全景图：CNCFLandscape）是一个集成了各种工程实践的web和rpc框架。通过弹性设计保障了大并发服务端的稳定性，经受了充分的实战检验。
0X码上链·2024-02-03 13:26

离线数仓-数据治理

目录一、前言1.1数据治理概念1.2数据治理目标1.3数据治理要解决的问题1.3.1合规性元数据合规性数据质量合规性数据安全合规性1.3.2成本存储资源成本计算资源成本二、数据仓库发展阶段2.1初始期2.2
爱吃辣条byte·2024-02-03 13:51

深入数仓离线数据同步：问题分析与优化措施

一、前言在数据仓库领域，离线数仓和实时数仓是常见的两种架构类型。离线数仓一般通过定时任务在特定时间点（通常是凌晨）将业务数据同步到数据仓库中。
Light Gao·2024-02-03 10:14

数仓日常维护：剖析每日增量同步的内部机制

而数据的实时性和准确性对于确保数据仓库的有效性至关重要。而离线数仓中常见的数据同步方式是T+1，其中同步方式主要分为两种：全量同步和增量同步。本文聚焦于探讨增量同步的原理，解析其工作机制和实
Light Gao·2024-02-03 10:14

云计算时代操作系统Kubernetes之配置管理（上）

容器化部署其实是云原生设计理念的体现，在云原生模式下应用架构和传统应用的架构有很大的不同。
攀师傅·2024-02-03 10:46

KubeBlocks 参展首届 PolarDB 开发者大会，双方发布深度合作

来自全国各地的数据库领域专家和技术开发者相聚一堂，共同交流云原生、分布式技术、一站式数据管理、开源生态等话题。KubeBlocks有幸受邀参展。
小猿姐·2024-02-03 10:21

KubeBlocks 研发轶事之 addon 抽象

目前作者就职于云猿生数据，主要负责云原生数据控制面KubeBlocks和ServerlessMySQL产品。欢迎云计算或数据库行业从业者加微信交流。
小猿姐·2024-02-03 10:21

25.云原生之ArgoCD-app of apps模式

文章目录appofapps模式介绍app如何管理apphelm方式管理kustomize方式管理appofapps模式介绍通过一个app来管理其他app，当有多个项目要发布创建多个app比较麻烦，此时可以创建一个管理app，管理app创建后会创建其他app。比较适合项目环境迁移的场景。AppofApps模式优点：统一管理：通过一个主要的应用程序，你可以统一管理多个应用程序的生命周期。这样可以简化管
野心与梦·2024-02-03 08:36

24.云原生之ArgoCD钩子

云原生专栏大纲文章目录ArgoCD钩子如何定义钩子钩子删除策略ArgoCD钩子ArgoCD是一个用于部署和管理Kubernetes应用程序的工具，它提供了一种声明式的方式来定义和自动化应用程序的部署过程
野心与梦·2024-02-03 08:06

灵伴科技（Rokid）借助 Knative 实现 AI 应用云原生 Serverless 化

作者：朱炜栋、元毅、子白公司介绍Rokid创立于2014年，是一家专注于人机交互技术的产品平台公司，2018年即被评为国家高新技术企业。Rokid作为行业的探索者、领跑者，目前致力于AR眼镜等软硬件产品的研发及以YodaOS操作系统为载体的生态构建。公司通过语音识别、自然语言处理、计算机视觉、光学显示、芯片平台、硬件设计等多领域研究，将前沿的Al和AR技术与行业应用相结合，为不同垂直领域的客户提供
阿里云云原生·2024-02-03 07:29

云原生业务全流程DevOps配置预研与实践

我本人是在21年开始正式接触云原生。我们当时的CTO是一个比较有超前意识（相对而言），且是一个敢于尝试的领导。当时公司的平台系统，平时虽然运行的挺好，但每年的那几个关键集中业务期，因并发量大，总会崩
丰耳·2024-02-03 07:58

ManageEngine推出云原生身份平台以解决劳动力IAM挑战

ManageEngine推出云原生身份平台以解决企业员工身份与访问管理（IAM）面临的挑战。该公司还为其本地身份治理和管理（IGA）解决方案添加了先进的安全功能。
运维有小邓@·2024-02-03 07:27

【云原生之kubernetes系列】--HPA自动伸缩

HPA自动伸缩HorizontalPodAutoscaler（简称HPA）自动更新工作负载资源（例如Deployment或者Statefulset)，目的是让pod可以自动扩缩工作负载以满足业务需求。水平扩缩意味着对增加的负载的响应是部署更多的Pod。这与“垂直（Vertical)”扩缩不同，对于Kubernetes，垂直扩缩意味着将更多资源（例如：内存或CPU）分配给已经为工作负载运行的Pod。
优质&青年·2024-02-03 07:27

2023还有所谓的“金三银四”，行业梦魇35岁是否提前了呢

后端不仅要会写代码，云原生，大数据，算法也是一些厂商的基本要求。2.求职壁垒
南宫文凯·2024-02-03 07:45

一线大厂面试真题——5分钟带你快速了解什么是Kubernetes

作为最火的容器编排工具之一，它的很多思想设计都契合了微服务和云原生应用的设计法则。也正因如此，越来越多的公司开始使用起k8s。那么，称霸容器界的k8s，究竟有什么魔力呢？
似来·2024-02-03 00:45

数据湖系列之一 | 你一定爱读的极简数据平台史，从数据仓库、数据湖到湖仓一体

从数据仓库、数据湖，到现在的湖仓一体，业界建设数据平台的新方法和新技术层出不穷。理解这些方法和技术背后隐藏的演进脉路、关键问题、核心技术原理，可以帮助企业更好地建设数据平台。
百度智能云技术站·2024-02-02 23:04

TiDB 简介

是一款同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing,HTAP)的融合型分布式数据库产品，具备水平扩容或者缩容、金融级高可用、实时HTAP、云原生的分布式数据库
福海鑫森·2024-02-02 18:06

Hive和Hbase的各自适用场景

Hive：Hive是Hadoop数据仓库，严格来说，不是
yoku酱·2024-02-02 17:36

【云原生技术】在Kubernetes (K8s) 环境中，查看打包的镜像里面的Label

在Kubernetes(K8s)环境中，查看刚才打包的镜像里面的Label通常需要通过与Docker或容器运行时直接交互的方式来完成。Kubernetes自身并不直接提供查看镜像Label的命令，因为Kubernetes主要关注的是容器和服务的部署与管理，而不是镜像内部的元数据。以下是一些步骤和方法来查看镜像Label：1.使用Docker命令（如果你的节点上安装了Docker）如果你的Kuber
阿寻寻·2024-02-02 17:33

【云原生技术】将一个标签（Label）自动生成并添加到Dockerfile，在镜像中插入label

将一个标签（Label）自动生成并添加到Dockerfile中一、方式一步骤1:准备原始Dockerfile步骤2:创建一个脚本来动态添加标签步骤3:在CI/CD流程中运行脚本二、方式二1.使用Docker标签（Label）2.在镜像中包含版本文件3.使用构建参数4.使用CI/CD工具的集成5.使用镜像仓库的功能6.使用命名规范一、方式一为了将一个标签（Label）自动生成并添加到Dockerfi
阿寻寻·2024-02-02 17:33

【云原生技术】Kubernetes 发布方式-灰度发布

Kubernetes发布方式-灰度发布一、Kubernetes发布方式有哪些二、灰度发布1、灰度发布工作原理1.小规模开始2.监控和评估3.扩展或回滚4.完全部署实现机制2、灰度发布操作步骤示例1（使用Istio）步骤1:准备两个版本的DeploymentDeploymentforv1Deploymentforv2步骤2:创建一个Service来路由流量步骤3:
阿寻寻·2024-02-02 17:03

【云原生技术】K8S报错 “0/1 nodes are available: 1 node(s) didn‘t match pod anti-affinity rules. preemption:

要解决“0/1nodesareavailable:1node(s)didn’tmatchpodanti-affinityrules.preemption:0/1nodesareavailable:1Nopreemptionvictimsfoundforincomingpod.”的问题，需要对Kubernetes集群进行一些检查和可能的调整。下面是操作步骤的详细指南：1.检查Pod反亲和性规则首先，
阿寻寻·2024-02-02 17:29

超详细【入门精讲】数据仓库原理&实战 一步一步搭建数据仓库 内附相应实验代码和镜像数据和脚本

文章对应的博客园链接：点击这里文章目录0.B站相关课程链接和搭建数据仓库资源及脚本下载食用指南：建议先把博客整体看一遍之后再进行操作文章最后有常见问题及解决方法1.项目介绍及整体流程1.1项目介绍1.2
Oraer_·2024-02-02 16:29

云原生 API 网关链路追踪能力重磅上线

云原生API网关介绍云原生API网关是腾讯云基于开源网关推出的一款高性能高可用的云原生API网关产品，作为云上流量入口，集成请求分发、API管理、流量监控、访问限制等功能，是微服务架构和容器架构中的重要组件
腾讯云中间件·2024-02-02 13:12

银行数据仓库体系实践（18）--数据应用之信用风险建模

信用风险银行的经营风险的机构，那在第15节也提到了巴塞尔新资本协议对于银行风险的计量和监管要求，其中信用风险是银行经营的主要风险之一，它的管理好坏直接影响到银行的经营利润和稳定经营。信用风险是指交易对手未能履行约定契约中的义务而给银行造成经济损失的风险。典型的表现形式包括借款人发生违约或信用等级下降。借款人因各种原因未能及时、足额偿还债务/银行贷款、未能履行合同义务而发生违约时，债权人或银行必将因
南极找南·2024-02-02 13:10

银行数据仓库体系实践（15）--数据应用之巴塞尔新资本协议

巴塞尔新资本协议介绍在银行管理中经常会听到巴3、新资本协议等专用词，那这都是指《巴塞尔资本协议》，全称《关于统一国际银行资本衡量和资本标准的协议》。新资本协议的五大目标是：促进金融体系的安全性和稳健性（保持总体资本水平不变）；继续促进公平竞争；更全面地反映风险；更敏感地反映银行头寸及其业务的风险程度；重点放在国际活跃银行，基本原则适用于所有银行。最新的《巴塞尔协议III》（第3版）于2010年9月
南极找南·2024-02-02 13:40

银行数据仓库体系实践（16）--数据应用之财务分析

总账系统在所有公司中，财务分析的基础都是核算，那在银行的系统体系中，核算功能在业务发生时由业务系统如核心、贷款、理财中实现登记，各业务系统会在每天切日后统计当天各机构的核算科目的发生额与余额，并统一送到总账系统，总账系统进行全行会计核算的汇总、调整并每天统计出全银行的资产负债表、利润表和现金流表，使银行的经营情况一目了然。后续的许多财务应用以及监管报送中，总账数据是必不可少的一部分。而且数据质量校
南极找南·2024-02-02 13:40

精准对接企业云原生需求 “云原生技术实践大会“筹备进入冲刺期

“2018云原生技术实践峰会”，将为中国云原生领域顶尖用户和顶尖厂商搭建对话平台，以全球化的技术视角、标杆企业的云原生实践，帮助您掌握云原生先机，助力企业顺利实现数字化蝶变。
weixin_33862041·2024-02-02 13:09

银行数据仓库体系实践（10）--汇总指标层和集市模型设计

建立多层次的数据访问服务体系，有力提升数据仓库的价值。基于指标汇总层、集市层、可以提供面向业务人员的即席数据查询、以及面向应用开发者的数据接口、应用访问接口，满足不同类型应用的需要。
acumen_leo·2024-02-02 13:38

银行数据仓库体系实践（17）--数据应用之营销分析

营销是每个银行业务部门重要的工作任务，银行产品市场竞争激烈，没有好的营销体系是不可能有立足之地，特别是随着互联网金融发展,金融脱媒”已越来越普遍，数字化营销方兴未艾，银行的营销体系近些年也不断发展，从客户经理为主逐步转变为客户经理+互联网营销的模式。在客户经理阶段，银行主要通过CRM系统进行产品销售管理。对产品、客户经理、团队的绩效进行统计。那随着互联网营销的发展和数据量的增加，单个CRM系统已经
南极找南·2024-02-02 13:06

云原生与低代码：加速提效，为行业拓荒期构建生态

本文讨论了云原生和低代码技术在当前技术行业中的重要性和应用，分析了它们如何协同作用来提高效率并推动行业发展。虽然面临高成本和生态建设方面的挑战，但云原生和低代码仍然被视为行业的重要驱动力。
工业甲酰苯胺·2024-02-02 13:36

【奇思妙想】不妨大胆一点 自己做一个Nacos（用JAVA实现）

什么是NacosNacos是DynamicNamingandConfigurationService的首字母简称，一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。
乐乐家的乐乐·2024-02-02 12:43

云原生--数据库第二次作业

完成MySQL主从复制。主库设置1.设置server-id值并开启binlog参数[root@server~]#vim/etc/my.cnf.d/mysql-server.cnf[mysqld]log_bin=mysql-binserver_id=120重启数据库2.建立同步账号（1）创建用户并给予权限mysql>createuserhjjidentifiedwithmysql_native_pa
小朋友呀（sy）·2024-02-02 10:11

多云和多集群环境下的云原生应用交付实践

张海宁介绍了应用交付的模型，面临的主要问题，以及如何使用云原生的方法实现应用的定义和交付。裴明明则通过网易轻舟云原生应用交付平台的设计与实践，分享了多云和跨集群环境下的应用
亨利笔记·2024-02-02 10:06

字节跳动新一代云原生消息队列实践

作者：火山引擎云原生计算研发工程师｜雷丽媛上文我们了解了在字节跳动内部业务快速增长的推动下，经典消息队列Kafka的劣势开始逐渐暴露，在弹性、规模、成本及运维方面都无法满足业务需求。
字节跳动云原生计算·2024-02-02 09:53

【云原生kubernetes系列】---亲和与反亲和

1、亲和和反亲和node的亲和性和反亲和性pod的亲和性和反亲和性1.1node的亲和和反亲和1.1.1ndoeSelector（node标签亲和）#查看node的标签root@k8s-master1:~#kubectlgetnodes--show-labels#给node节点添加标签root@k8s-master1:~#kubectllabelnodes172.17.1.107disktype=
优质&青年·2024-02-02 09:53

《云原生安全攻防》-- 云原生安全概述

从本节课程开始，我们将正式踏上云原生安全的学习之旅。在深入探讨云原生安全的相关概念之前，让我们先对云原生有一个全面的认识。什么是云原生呢?
Bypass--·2024-02-02 09:44

【云原生之kubernetes系列】--污点与容忍

污点与容忍污点（taints)：用于node节点排斥Pod调度，与亲和效果相反，即taint的node排斥Pod的创建容忍（toleration)：用于Pod容忍Node节点的污点信息，即node节点有污点，也将新的pod创建到改node上1.1污点配置NoSchedule:硬限制,不将新创建的Pod调度到具有该污点的Node上.PreferNoSchedule:软限制.避免k8s将尽量避免将Po
优质&青年·2024-02-02 07:32

Methodot低代码实战教程（一）——熟悉可视化Echart组件

一、产品介绍：Methodot是行云创新旗下一款面向研发使用的一站式云原生开发及应用托管平台，产品内有大量开箱即用的服务和开发工具，例如：支持开发团队进行微服务架构设计（例如一个袜子商店管理系统），服务参数以模块的形式传递配置微服务参数支持绑定
Methodot·2024-02-02 04:03

数据仓库表级血缘应用

表血缘热度文章目录数仓血缘应用（一）：表血缘热度前言一、价值衡量指标——应用层二、血缘节点应用——热度1、指标透传（应用层——>数仓）2、指标应用（热度）2.1、数仓血缘节点关系2.2、热度2.3、热度应用总结前言在数据仓库的建设过程中
零壹Ture·2024-02-02 02:24

华为云容器和微服务是什么？

华为云全栈容器与微服务，业务创新快人一步敏捷、高效、智能是Cloud2.0时代企业数字化转型核心诉求，华为云全栈容器和微服务全面拥抱云原生，提供全栈云原生应用开发与管理，包括容器、微服务框架、云中间件、
舒意从生·2024-02-01 23:02
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他