云原生大数据云计算数据仓库

云原生存储解决方案

云原生存储解决方案使用Rook、Ceph等工具进行云原生存储管理云原生存储简介什么是云原生存储云原生存储是指设计用于云原生环境中的存储解决方案，通常在容器化平台如Kubernetes上运行。
爱技术的小伙子·2024-08-26 13:38

【 云原生应用的监控与日志管理】使用Prometheus、ELK Stack等工具进行云原生应用的监控与日志管理

云原生应用的监控与日志管理使用Prometheus、ELKStack等工具进行云原生应用的监控与日志管理引言随着云原生技术的普及，应用的复杂性和规模不断增加，传统的监控与日志管理手段已无法满足需求。
爱技术的小伙子·2024-08-26 13:04

第三章 可视化ETL平台——Kettle

课程目标能够理解Kettle的主要用途能够搭建Kettle开发环境能够掌握Kettle输入组件的使用能够掌握Kettle输出组件的使用能够掌握Kettle转换组件的使用1.Kettle介绍1.1数据仓库数据仓库是一个很大的数据存储集合
okbin1991·2024-08-26 12:30

微服务与云原生有何关联？

正是在这样的时代背景和业务诉求下，微服务架构成为了解决复杂问题的灵丹妙药。微服务架构在应对需求的变化、容错处理、服务复用及扩展、提升开发效率、简化交互等方面都有明显的优势。同时，敏捷、DevOps、持续集成/持续交付、容器技术、SpringCloud框架、轻量级服务、领域驱动设计等的涌现也为微服务架构的发展奠定了基础。综上所述，持续快速响应市场、高度动态化、应对复杂场景的能力已经成为企业的核心竞争
2401_84023683·2024-08-25 22:04

数据仓库系列总结

一、数据仓库架构1、数据仓库的概念数据仓库（DataWarehouse）是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。
大数据00·2024-08-25 10:17

SpringBoot 笔记

时代背景：微服务分布式云原生：docker、kubernetes自动配置原理依赖管理父项目负责依赖管理导入starter场景启动器无需关注版本号，自动版本仲裁自动配置自动配好Tomcat自动配好SpringMVC
duanmy0687·2024-08-25 09:17

数据仓库中的表设计模式：全量表、增量表与拉链表

在现代数据仓库中，管理和分析海量数据需要高效且灵活的数据存储策略。全量表、增量表和拉链表是三种常见的数据存储模式，各自针对不同的数据管理需求提供了解决方案。
isNotNullX·2024-08-25 09:45

PolarDB for PostgreSQL 内核解读 ：HTAP架构介绍

作者：北侠，阿里云高级技术专家，阿里云PolarDBPostgreSQL云原生数据库HTAP业务和技术负责人。在PolarDB存储计算
阿里云云栖号·2024-08-24 20:56

Apache Doris + Iceberg 快速搭建指南｜Lakehouse 使用手册（三）

湖仓一体（DataLakehouse）融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势，能够更加便捷地满足各种数据处理分析的需求。
SelectDB技术团队·2024-08-24 10:25

Kubernetes中如何对etcd进行备份和还原

Kubernetes最初由Google开发，后来成为云原生计算基金会（CloudNativeComputingFoundation）的一部分。
丁爸·2024-08-24 07:32

云原生周刊：Score 成为 CNCF 沙箱项目|2024.08.12

开源项目推荐KubeOneKubermaticKubeOne自动化管理您所有云环境、本地环境、边缘计算和物联网环境中的集群操作。KubeOne可以安装高可用（HA）的主集群，也可以安装单主集群。MayflyMayfly是一个Kubernetesoperator，使您可以使用基于时间的资源。它会在指定时间创建或删除资源。kanikokaniko是一个工具，用于在容器或Kubernetes集群中从Do
KubeSphere 云原生·2024-08-24 04:12

云原生周刊：Kubernetes Grafana 看板更新 ｜ 2024.5.13

开源项目推荐ChartTestingChartTesting是用于测试Helm图表的工具。它旨在用于对拉取请求进行lint和测试。它会自动检测针对目标分支更改的图表。ClusterpediaClusterpedia是一个多集群的百科全书，用于同步、搜索和简单控制多集群资源。Clusterpedia可以与多个集群同步资源，并在与KubernetesOpenAPI兼容的基础上提供更强大的搜索功能，以帮
KubeSphere 云原生·2024-08-24 04:41

云原生周刊：Kubernetes v1.31 发布

开源项目推荐KardinalKardinal是一个用于在共享Kubernetes集群中创建超轻量级临时开发环境的框架。AnteonAnteon（以前称为Ddosify）是一个开源的、基于eBPF的Kubernetes监控和性能测试平台。KubetuiKubetui是一个用于监控Kubernetes资源的终端用户界面(TUI)工具。它为开发人员和运维人员提供了一个易于使用的界面，可访问有关其应用程序
KubeSphere 云原生·2024-08-24 03:36

【数据库和数据仓库】

数据仓库和数据库主要有以下区别：一、用途不同数据库：就像一个日常的储物间，主要用于存储和管理日常业务操作中的各种数据，比如电商网站中用户的下单信息、银行系统中客户的交易记录等。
W Y·2024-08-23 22:03

【微服务】Nacos配置中心和客户端数据同步模式

一、Nacos概述Nacos是一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。它提供了一组简单易用的特性集，帮助用户快速实现动态服务发现、服务配置、服务元数据及流量管理。
泡芙冰淇淋ya·2024-08-23 14:43

【python】Python操作Redis数据库的详细教程与应用实战

《博客》：Python全栈，PyQt5和Tkinter桌面开发，小程序开发，人工智能，js逆向，App逆向，网络系统安全，数据分析，Django，fastapi，flask等框架，云原生K
景天科技苑·2024-08-22 23:11

Nacos是如何实现数据同步的？

Nacos是构建以“服务”为中心的现代应用架构(例如微服务范式、云原生范式)的服务基础设施。Nacos是一个分布式系统，为了确保集群间数据一致，不仅仅依赖于数据发生改变时的实时同步，后台有定时任务做
如沐暖阳~·2024-08-22 19:23

探索云原生数据中心网络：一个深度实践之旅

探索云原生数据中心网络：一个深度实践之旅cloud-native-data-center-networkingCoderepositoryfortheO'Reillybook'CloudNativeDataCenterNetworking
黎杉娜Torrent·2024-08-22 15:24

数字（智）化采购系统优点_亮点_应用场景

郑州信源数字化采购系统研发商，系统融合云原生、微服务、大数据、人工智能、物联网等先进技术，构建业务中台、数据中台、AI中台三大核心基座，以采购为切入点，结合供应链管理理念，为招采供应链提供交易、监管、数据
xinyuan_123456·2024-08-22 02:38

什么是湖仓一体

在数据湖的基础之上引入事务层，把数据湖和数据仓库的优点有机结合在一起，形成了一个可以同时支持数据分析、数据科
修破立生·2024-08-21 21:03

Kubernetes静态Pod：深入解析与应用实践

引言Kubernetes（简称K8s）作为云原生时代的基石，以其强大的容器编排能力赢得了广泛的认可和应用。在K8s的众多特性中，静态Pod（StaticPod）是一个独特而重要的存在。
CloudJourney·2024-08-21 21:31

2024-07-12 - 基于 sealos 部署高可用 K8S 管理系统

它以云原生的方式，抛弃了传统的云计算架构，转向以Kubernetes为云内核的新架构，使企业能够像使用个人电脑一样简单地使用云。
流雨声·2024-08-21 21:30

【python】Python中采集Prometheus数据，进行数据分析和可视化展示

《博客》：Python全栈，PyQt5和Tkinter桌面开发，小程序开发，人工智能，js逆向，App逆向，网络系统安全，数据分析，Django，fastapi，flask等框架，云原生K
景天科技苑·2024-08-21 18:17

数据仓库——事务、快照和累积快照事实表

事务、快照和累积快照事务事实表跟踪定义业务过程的个体行为，并且支持几种描述这种行为事实。可以提供丰富的分析型能力，时常充当原子数据的粒度化仓库快照事实表周期性地采样状态度量，这些度量与一系列事务的累积效果相当，但是这些事务的格式不易进行研累积快照事实表用来跟踪通过一系列处理步骤的个体项的进展情况，用于研究多数过程中里程碑或者事件的经过时间。这种事实表在单一行中关联多个不同的行为。事务事实表事务事实
墨染丶eye·2024-03-28 23:58

服务器虚拟化和云平台,云平台和服务器虚拟化区别

云平台和服务器虚拟化区别内容精选换一换云硬盘(ElasticVolumeService,EVS)可以为云服务器提供高可靠、高性能、规格丰富并且可弹性扩展的块存储服务，可满足不同场景的业务需求，适用于分布式文件系统、开发测试、数据仓库以及高性能计算等场景
木子Hui·2024-03-20 05:14

大数据开发（Hive面试真题-卷二）

跟数据仓库区别？3、Hive架构？4、Hive数据倾斜以及解决方案？5、Hive如果不用参数调优，在map和reduce端应该做什么？6、Hive的三种自定义函数是什么？实现步骤与流程？
Key-Key·2024-03-20 05:14

云原生周刊：Istio 加入 Phippy 家族 ｜ 2024.3.18

开源项目推荐ko"ko"是一个用于构建和部署Go应用程序的简单、快速的容器镜像构建工具。它适用于那些镜像中只包含单个Go应用程序且没有或很少依赖于操作系统基础镜像的情况（例如没有cgo，没有操作系统软件包依赖）。"ko"在本地机器上通过执行"gobuild"的方式构建镜像，因此不需要安装Docker。这使得它非常适合轻量级的CI/CD场景。"ko"支持简单的YAML模板化，并且支持跨平台构建，还默
KubeSphere 云原生·2024-03-19 12:23

云原生部署手册01：构建k8s集群并配置持久化存储

写在前面：k8s弃用docker的影响其实没那么大k8s通过dockershim对docker的支持从1.20版本后就已经移除，仅支持符合ContainerRuntimeInterface(CRI)的容器运行环境，比如containerd。containerd本身就是docker底层的容器运行环境，只不过docker在containerd的基础上增加了符合人类操作的接口。docker构建的镜像并不
吴智深·2024-03-19 10:51

数据挖掘-数据预处理的必要性及主要任务

(2)数据集成：将数据由多个数据源合并成一个一致的数据存储，如数据仓库。(3)数据归约：可以通过如狙击、删除冗余特征或聚类来降低数据的规模。(4)数据变换：
嘣嘣嚓·2024-03-17 10:16

MySQL建表以及excel内容导入

一个数据库从逻辑上来说是由一个或多个表空间所组成，表空间是数据库中物理编组的数据仓库。每一个表空间是由段所组成，一个表空间存放一个或多个数据库的物理文件。一个数据库中的
jameszjd·2024-03-17 00:03

数据仓库的设计开发应用（三）

目录五、数据仓库的实施（一）数据仓库的创建（二）数据抽取转换加载六、数据仓库系统的开发（一）开发任务（二）开发方法（三）系统测试七、数据仓库系统的应用（一）用户培训（二）决策支持（三）维护评估 五、数据仓库的实施
Francek Chen·2024-03-16 14:22

让数据在业务间高效流转，镜舟科技与NineData完成产品兼容互认

在经过联合测试后，镜舟科技旗下产品与NineData云原生智能数据管理平台完全兼容，整体运行高效稳定。
镜舟科技·2024-03-15 16:18

03hive数仓安装与基础使用

hiveHive概述Hive是基于Hadoop的一个数据仓库工具。
daydayup9527·2024-03-14 13:39

云原生周刊：Helm Charts 深入探究 ｜ 2024.3.11

开源项目推荐GlasskubeGlasskube提供了一个用于Kubernetes的缺失的包管理器。它具有图形用户界面(GUI)和命令行界面(CLI)。Glasskube包是具备依赖感知、GitOps准备和可以通过中央公共包仓库自动更新的特性。imgpkgimgpkg（发音为："imagepackage"）是一个工具，允许用户将一组任意文件存储为OCI镜像。其中一个主要用例是将Kubernetes
KubeSphere 云原生·2024-03-12 16:05

Spark从入门到精通29:Spark SQL：工作原理剖析以及性能优化

SparkSQL工作原理剖析1.编写SQL语句只要是在数据库类型的技术里面，例如MySQL、Oracle等，包括现在大数据领域的数据仓库，例如Hive。
勇于自信·2024-03-11 00:20

ETL策略

数据仓库平台，ETL是很重要一环，看ETL的发展史，最初使用表格，人工从系统下载，在excel匹配，然后加载到数据仓库平台，到后来开始出现ETL工具，大概分为两个派别，以ETL架构的datastage，
朱先生_hfm·2024-03-10 13:11

【数据仓库作业】第1章 绪论

三、简述数据仓库的定义。四、简述数据仓库的特征。五、简述主题的定义。六、简述元数据的概念。七、简述数据挖掘的主要任务。八、简述数据挖掘的主要步骤。九、下列活动是否属于数据挖掘任务，并简述其理由。
Francek Chen·2024-03-06 06:28

云原生周刊：CNCF 宣布 Falco 毕业｜2024.3.4

开源项目推荐ldap-operator用于部署和管理LDAP目录的KubernetesOperator。UpdatecliUpdatecli是一个用于应用文件更新策略的工具。每个应用程序“运行”时都设计为可在任何地方使用，它会检测是否需要使用自定义策略更新值，然后根据该策略应用更改。AlazAlaz是一个开源DdosifyeBPF代理，可以检查和收集Kubernetes(K8s)服务流量，无需代码
·2024-03-04 18:58

3、云原生安全之falco的部署

文章目录1、helm安装2、拉去镜像失败与解决3、安装faclo4、安装nfs服务器，配置k8s的持久卷4.1、创建nfs服务器，4.2、部署master节点（nsf服务的客户端）4.3、pv与pvc4.4、假设pv和pvc的配置文件出错了5、安装falcosidekick可视化（建议跳过，直接使用6）6、安装faclo与falcosidekick7、创建自定义检测规则7.1、检测定时任务的查询与
划水的小白白·2024-03-04 07:28

让数据用起来：数据中台建设的评估与选择（第4章）

开始构建企业级数据仓库，使用BI工具、大屏等。第三个阶段：数据驱动。加强业务与数据融合，利用大数据、机器学习、深度学习等技术进行精准营销、信用风险控制等。第四个阶段：运营优化。
小阳阳兄·2024-03-03 02:20

Hive数据仓库行转列

查了很多资料发现网上很多文章都是转发和抄袭，有些问题。这里分享一个自己项目中使用的行转列例子，供大家参考。代码如下：SELECTmy_id,nm_cd_map['A']ASmy_cd_a,nm_cd_map['B']ASmy_cd_b,nm_cd_map['C']ASmy_cd_c,nm_num_map['A']ASmy_num_a,nm_num_map['B']ASmy_num_b,nm_num
XueminXu·2024-02-28 07:47

数据仓库和数据湖的区别

数据仓库和数据湖是两种不同的数据存储和管理架构，它们有以下区别：1.数据结构：数据仓库采用结构化的数据模型，通常是规范化的关系型数据库，其中数据以表格形式组织，使用预定义的模式和架构。
图灵追慕者·2024-02-28 02:10

CNCF之毕业Projects简介

CNCF组织管理着大量的云原生基础设施软件系统，如著名的k8s，不同的系统解决不同的技术点，也有一些系统是解决同一个问题的，形成一个自由竞争的关系，互相促进彼此创新进步，同时也给我们做技术选型带来了多样性和小小选择难点
鬓戈·2024-02-25 19:31

【云学院干货】数据仓库服务：在冗余海量数据中找到正确决策

数据仓库服务：在冗余海量数据中找到正确决策目前数据仓库分析解决方案在金融，电信，零售等多个行业发展迅速，很多企业在关键决策中需要对自身海量数据进行多样化，深层次的分析。
舒意从生·2024-02-24 07:21

每天一个数据分析题（一百六十四）

关于OLAP系统，下列选项不正确的是（）A.是基于数据仓库的信息进行分析处理过程B.用户数量相对较少，其用户主要是业务决策人员与管理人员C.对响应时间要求非常高。
紫色沙·2024-02-22 22:43

大数据计算技术秘史（上篇）

其实在大数据技术兴起之前，对于用户来讲并没有存储和计算的区分，都是用一套数据库或数据仓库的产品来解决问题。而在数据量爆炸性增长后，情况就变得不一样了。
·2024-02-22 20:33

什么是云原生

一、开篇浅谈云原生的概念一直以来都很模糊，虽然云原生计算基金会（CNCF）给出了所谓的定义，但是并不能让大家很好的理解云原生的理念，为什么说是理念呢，因为云原生是一种思想，是一种解决方案，很抽象。
步尔斯特·2024-02-20 23:03

【云原生之Docker实战】使用docker部署yesplaymusic个人音乐播放器

【云原生之Docker实战】使用docker部署yesplaymusic个人音乐播放器一、yesplaymusic介绍1.yesplaymusic简介2.yesplaymusic的特性二、检查本地docker
江湖有缘·2024-02-20 20:18

开源ETL工具

ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗，最终按照预先定义好的数据仓库模型，将
SkTj·2024-02-20 20:15

清华架构师整理分布式系统文档：从实现原理到系统实现，收藏吧

微服务、云原生、Kubernetes、ServiceMesh是分布式领域的热点技术，它们并不是凭空出现的，一定继承了某些“前辈”的优点。
java架构师联盟·2024-02-20 20:40
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他