云原生数据湖

云原生数据库 GaiaDB 的核心技术演进和解析

导读在越来越强调云原生的环境下，存算分离作为一种新的架构理念，已经是大势所趋。
大数据和云计算技术·2024-02-05 06:23

Skywalking 应用笔记

概念Skywalking是一款分布式的系统性能监视工具，专为微服务、云原生架构和基于容器(Docker、K8s、Mesos)架构而设计。
KEEPMA·2024-02-05 05:29

Solo 开发者周刊 （第2期）：一站式解决各类办公绘图问题

好文推荐重新思考云原生应用的开发模式当前云原生应用的开发模式在FaaS环境下存在挑战，本文提出一种开发模式构想：“单体式编程，编译时拆分，分布式执行”，旨在简化云应用开发，提升开发效率和应用性能。
Solo 社区·2024-02-05 05:23

Solo开发者社区-重新思考云原生应用的开发模式

当前云原生应用的开发模式在FaaS环境下存在挑战，本文提出一种开发模式构想：“单体式编程，编译时拆分，分布式执行”，旨在简化云应用开发，提升开发效率和应用性能。
Solo 社区·2024-02-05 05:53

云原生-Quarkus上下文依赖注入参考

QuarkusDI方案是基于Java上下文依赖注入2.0标准.但是它不是一个符合TCK的完整CDI实现只实现了CDI一部分功能(可以查看支持及限制列表支持功能清单and限制清单）现有的CDI代码大多能正常工作，但是由于Quarkus架构及目标会有一些小差异。1.Bean发现CDI中的Bean发现是一个复杂的过程，涉及传统的部署结构和底层模块体系结构的可访问性要求。但是，Quarkus使用的是简化的
假程序员樱木·2024-02-05 01:08

【读红宝书（一）】背景知识

最近，HDFS领域出现了另一个值得讨论的重点，即“数据湖”。HDFS集群（目前大多数企业已经投资并希望找到对他们有用的东西）的合理使用是作为已摄取的数据文件队列。
三半俊秀·2024-02-04 23:41

观察复杂系统内部情况的秘密武器-可观测性详解

在数字化转型和云原生应用的时代，实现系统的高可观测性对于运维和开发团队来说至关重要，有助于快速识别问题、优化性能并确保服务的稳定性和可靠性。什么是可观测性？在软件系统中，可观测性通常是指系统内部
路多辛·2024-02-04 23:34

26.云原生ArgoCD高级之ApplicationSet

云原生专栏大纲文章目录ApplicationSet介绍ApplicationSet特性ApplicationSet安装ApplicationSet工作原理ApplicationSet生成器列表类型生成器集群生成器基础使用方法
野心与梦·2024-02-04 20:42

【云原生运维问题记录】kubesphere登录不跳转问题

文章目录现象问题排查结论先行：kubesphere-system名称空间下reids宕机重启，会判断是否通过registry-proxy重新拉取镜像，该镜像原本是通过阿里云上拉取，代理上没有出现超时情况，导致失败。解决方案：删除registry-proxy或修改registry-proxy配置现象kubesphere控制台点击登录不跳转问题排查查看kubesphere-system空间情况kube
野心与梦·2024-02-04 20:42

云原生流量治理之kubesphere灰度发布

云原生专栏大纲文章目录灰度发布介绍灰度发布策略KubeSphere中恢复发布策略蓝绿部署金丝雀发布流量镜像灰度发布实战部署自制应用金丝雀发布创建金丝雀发布任务测试金丝雀发布情况蓝绿部署创建蓝绿部署测试蓝绿部署情况流量镜像创建流量进行任务测试流量镜像情况灰度发布真实案例分析灰度发布介绍灰度发布
野心与梦·2024-02-04 20:42

云原生工具集 · 彩色输出kubectl内容

背景kubectl命令是k8s的CLI工具，如果你是维护K8s集群的管理员或者是开发可在Kubernetes上运行的应用程序的开发人员，那几乎每天都会使用kubectl，但是尽管kubectl已经很好，它依旧有些地方让人十分的头疼。比如缺少颜色，kubectl的输出有时不容易阅读，由于kubectl有时会输出很长的内容，因此很难找到所需的内容。因此如果有个能高亮颜色显示输出的工具，看起来就相对的更
云原生生态圈·2024-02-04 18:57

Fink CDC数据同步（六）数据入湖Hudi

数据入湖HudiApacheHudi(简称：Hudi)使得您能在hadoop兼容的存储之上存储大量数据，同时它还提供两种原语，使得除了经典的批处理之外，还可以在数据湖上进行流处理。
大数据_苡~·2024-02-04 16:21

《云原生安全攻防》-- 容器安全风险分析

在本节课程中，我们将提供一个全面的视角，来深入探讨容器环境下的安全风险，帮忙大家建立起容器环境下安全风险的整体认知。在这个课程中，我们将学习以下内容：容器技术概述：什么是容器技术以及它解决了什么问题。探索容器架构：深入了解容器、镜像、镜像仓库等核心概念。安全风险分析：逐层分析容器架构，识别各层面可能存在的安全风险。容器将集装箱思想引入到软件交付中，通过这种方式，来解决本地运行环境与生产运行环境不一
Bypass--·2024-02-04 11:32

【Oracle云】OCI DevOps Services 教程 (2) - 创建自动化构建流水线【CI流水线】

OCIDevOpsServices作为Oracle云原生CI/CD服务，为开发者提供了标准的CI/CD平台，支持构建自动化的流水线，从代码提交到部署全程实现自动化。
炸鸡物料库·2024-02-04 09:38

Kubernetes operator（一）client-go篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第一篇，主要对client-go进行学习，从源码阅读角度，学习client-go各个组件的实现原理、如何协同工作等参考视频
格桑阿sir·2024-02-04 00:08

Kubernetes operator（七） controller-runtime 篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第七篇，本节会对编写Operator非常重要的controller-runtime库进行学习基于kubernetesv1.24.0
格桑阿sir·2024-02-04 00:08

Kubernetes operator（五）api 和 apimachinery 篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第五篇，主要对k8s.io/api和k8s.io/apimachinery两个项目进行学习基于kubernetesv1.24.0
格桑阿sir·2024-02-04 00:37

Kubernetes operator（六）CRD控制器 开发实战篇

云原生学习路线导航页（持续更新中）本文是Kubernetesoperator学习系列第六篇，前面5篇的学习，我们已经清楚CRD开发的各个环节，本节就实际设计一个CRD，并为之编写控制器基于kubernetesv1.24.0
格桑阿sir·2024-02-04 00:37

TiDB内核解密：揭秘其底层KV存储引擎如何玩转键值对

一、简介TiDB是开源的分布式数据库，是一款同时支持在线事务处理与在线分析处理的融合型分布式数据库产品，具备水平扩容或缩容、金融级高可用、实时HTAP、云原生分布式数据库、兼容MySQL5.7协议和MySQL
超越不平凡·2024-02-04 00:27

下一代软件架构，如何构建微服务核心能力

随着数字化进程的加速，各种架构设计思想风起云涌，进入百家争鸣时代，微服务架构，云原生架构，Serverless架构，事件驱动架构，中台架构，容灾架构，到底哪种思潮代表未来呢？
阿里巴巴中间件·2024-02-03 23:04

FluxMQ：新一代的高性能MQTT代理服务器

FluxMQ：新一代的高性能MQTT代理服务器前言FLuxMQ是一款基于java开发，支持无限设备连接的云原生分布式物联网接入平台。
程序媛之Lemon·2024-02-03 17:59

微服务框架go-zero集成swagger在线接口文档

go-zero（收录于CNCF云原生技术全景图：CNCFLandscape）是一个集成了各种工程实践的web和rpc框架。通过弹性设计保障了大并发服务端的稳定性，经受了充分的实战检验。
0X码上链·2024-02-03 13:26

初识Apache Paimon

第0章前言0.1主流数据湖工具Delta：由Spark背后商业公司Databricks出品，因此很多功能强兼容Spark，对其他计算引擎不是很友好。
Racin_01·2024-02-03 12:30

云计算时代操作系统Kubernetes之配置管理（上）

容器化部署其实是云原生设计理念的体现，在云原生模式下应用架构和传统应用的架构有很大的不同。
攀师傅·2024-02-03 10:46

KubeBlocks 参展首届 PolarDB 开发者大会，双方发布深度合作

来自全国各地的数据库领域专家和技术开发者相聚一堂，共同交流云原生、分布式技术、一站式数据管理、开源生态等话题。KubeBlocks有幸受邀参展。
小猿姐·2024-02-03 10:21

KubeBlocks 研发轶事之 addon 抽象

目前作者就职于云猿生数据，主要负责云原生数据控制面KubeBlocks和ServerlessMySQL产品。欢迎云计算或数据库行业从业者加微信交流。
小猿姐·2024-02-03 10:21

25.云原生之ArgoCD-app of apps模式

文章目录appofapps模式介绍app如何管理apphelm方式管理kustomize方式管理appofapps模式介绍通过一个app来管理其他app，当有多个项目要发布创建多个app比较麻烦，此时可以创建一个管理app，管理app创建后会创建其他app。比较适合项目环境迁移的场景。AppofApps模式优点：统一管理：通过一个主要的应用程序，你可以统一管理多个应用程序的生命周期。这样可以简化管
野心与梦·2024-02-03 08:36

24.云原生之ArgoCD钩子

云原生专栏大纲文章目录ArgoCD钩子如何定义钩子钩子删除策略ArgoCD钩子ArgoCD是一个用于部署和管理Kubernetes应用程序的工具，它提供了一种声明式的方式来定义和自动化应用程序的部署过程
野心与梦·2024-02-03 08:06

灵伴科技（Rokid）借助 Knative 实现 AI 应用云原生 Serverless 化

作者：朱炜栋、元毅、子白公司介绍Rokid创立于2014年，是一家专注于人机交互技术的产品平台公司，2018年即被评为国家高新技术企业。Rokid作为行业的探索者、领跑者，目前致力于AR眼镜等软硬件产品的研发及以YodaOS操作系统为载体的生态构建。公司通过语音识别、自然语言处理、计算机视觉、光学显示、芯片平台、硬件设计等多领域研究，将前沿的Al和AR技术与行业应用相结合，为不同垂直领域的客户提供
阿里云云原生·2024-02-03 07:29

云原生业务全流程DevOps配置预研与实践

我本人是在21年开始正式接触云原生。我们当时的CTO是一个比较有超前意识（相对而言），且是一个敢于尝试的领导。当时公司的平台系统，平时虽然运行的挺好，但每年的那几个关键集中业务期，因并发量大，总会崩
丰耳·2024-02-03 07:58

ManageEngine推出云原生身份平台以解决劳动力IAM挑战

ManageEngine推出云原生身份平台以解决企业员工身份与访问管理（IAM）面临的挑战。该公司还为其本地身份治理和管理（IGA）解决方案添加了先进的安全功能。
运维有小邓@·2024-02-03 07:27

【云原生之kubernetes系列】--HPA自动伸缩

HPA自动伸缩HorizontalPodAutoscaler（简称HPA）自动更新工作负载资源（例如Deployment或者Statefulset)，目的是让pod可以自动扩缩工作负载以满足业务需求。水平扩缩意味着对增加的负载的响应是部署更多的Pod。这与“垂直（Vertical)”扩缩不同，对于Kubernetes，垂直扩缩意味着将更多资源（例如：内存或CPU）分配给已经为工作负载运行的Pod。
优质&青年·2024-02-03 07:27

2023还有所谓的“金三银四”，行业梦魇35岁是否提前了呢

后端不仅要会写代码，云原生，大数据，算法也是一些厂商的基本要求。2.求职壁垒
南宫文凯·2024-02-03 07:45

一线大厂面试真题——5分钟带你快速了解什么是Kubernetes

作为最火的容器编排工具之一，它的很多思想设计都契合了微服务和云原生应用的设计法则。也正因如此，越来越多的公司开始使用起k8s。那么，称霸容器界的k8s，究竟有什么魔力呢？
似来·2024-02-03 00:45

数据湖系列之一 | 你一定爱读的极简数据平台史，从数据仓库、数据湖到湖仓一体

从数据仓库、数据湖，到现在的湖仓一体，业界建设数据平台的新方法和新技术层出不穷。理解这些方法和技术背后隐藏的演进脉路、关键问题、核心技术原理，可以帮助企业更好地建设数据平台。
百度智能云技术站·2024-02-02 23:04

TiDB 简介

是一款同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing,HTAP)的融合型分布式数据库产品，具备水平扩容或者缩容、金融级高可用、实时HTAP、云原生的分布式数据库
福海鑫森·2024-02-02 18:06

【云原生技术】在Kubernetes (K8s) 环境中，查看打包的镜像里面的Label

在Kubernetes(K8s)环境中，查看刚才打包的镜像里面的Label通常需要通过与Docker或容器运行时直接交互的方式来完成。Kubernetes自身并不直接提供查看镜像Label的命令，因为Kubernetes主要关注的是容器和服务的部署与管理，而不是镜像内部的元数据。以下是一些步骤和方法来查看镜像Label：1.使用Docker命令（如果你的节点上安装了Docker）如果你的Kuber
阿寻寻·2024-02-02 17:33

【云原生技术】将一个标签（Label）自动生成并添加到Dockerfile，在镜像中插入label

将一个标签（Label）自动生成并添加到Dockerfile中一、方式一步骤1:准备原始Dockerfile步骤2:创建一个脚本来动态添加标签步骤3:在CI/CD流程中运行脚本二、方式二1.使用Docker标签（Label）2.在镜像中包含版本文件3.使用构建参数4.使用CI/CD工具的集成5.使用镜像仓库的功能6.使用命名规范一、方式一为了将一个标签（Label）自动生成并添加到Dockerfi
阿寻寻·2024-02-02 17:33

【云原生技术】Kubernetes 发布方式-灰度发布

Kubernetes发布方式-灰度发布一、Kubernetes发布方式有哪些二、灰度发布1、灰度发布工作原理1.小规模开始2.监控和评估3.扩展或回滚4.完全部署实现机制2、灰度发布操作步骤示例1（使用Istio）步骤1:准备两个版本的DeploymentDeploymentforv1Deploymentforv2步骤2:创建一个Service来路由流量步骤3:
阿寻寻·2024-02-02 17:03

【云原生技术】K8S报错 “0/1 nodes are available: 1 node(s) didn‘t match pod anti-affinity rules. preemption:

要解决“0/1nodesareavailable:1node(s)didn’tmatchpodanti-affinityrules.preemption:0/1nodesareavailable:1Nopreemptionvictimsfoundforincomingpod.”的问题，需要对Kubernetes集群进行一些检查和可能的调整。下面是操作步骤的详细指南：1.检查Pod反亲和性规则首先，
阿寻寻·2024-02-02 17:29

云原生 API 网关链路追踪能力重磅上线

云原生API网关介绍云原生API网关是腾讯云基于开源网关推出的一款高性能高可用的云原生API网关产品，作为云上流量入口，集成请求分发、API管理、流量监控、访问限制等功能，是微服务架构和容器架构中的重要组件
腾讯云中间件·2024-02-02 13:12

精准对接企业云原生需求 “云原生技术实践大会“筹备进入冲刺期

“2018云原生技术实践峰会”，将为中国云原生领域顶尖用户和顶尖厂商搭建对话平台，以全球化的技术视角、标杆企业的云原生实践，帮助您掌握云原生先机，助力企业顺利实现数字化蝶变。
weixin_33862041·2024-02-02 13:09

云原生与低代码：加速提效，为行业拓荒期构建生态

本文讨论了云原生和低代码技术在当前技术行业中的重要性和应用，分析了它们如何协同作用来提高效率并推动行业发展。虽然面临高成本和生态建设方面的挑战，但云原生和低代码仍然被视为行业的重要驱动力。
工业甲酰苯胺·2024-02-02 13:36

【奇思妙想】不妨大胆一点 自己做一个Nacos（用JAVA实现）

什么是NacosNacos是DynamicNamingandConfigurationService的首字母简称，一个更易于构建云原生应用的动态服务发现、配置管理和服务管理平台。
乐乐家的乐乐·2024-02-02 12:43

实时数据湖：Flink CDC流式写入Hudi

点击上方蓝色字体，选择“设为星标”回复"面试"获取更多惊喜1.环境准备•Flink1.12.2_2.11•Hudi0.9.0-SNAPSHOT(master分支)•Spark2.4.5、Hadoop3.1.3、Hive3.1.22.FlinkCDC写入HudiMySQL建表语句如下createtableusers(idbigintauto_incrementprimarykey,namevarch
王知无(import_bigdata)·2024-02-02 12:01

Flink CDC 详述实时数据湖

在构建实时数仓的过程中，如何快速、正确的同步业务数据是最先面临的问题，本文主要讨论一下如何使用实时处理引擎Flink和数据湖ApacheIceberg两种技术，来解决业务数据实时入湖相关的问题。
000X000·2024-02-02 12:01

使用 Flink Hudi 构建流式数据湖

摘要：本文介绍了FlinkHudi通过流计算对原有基于mini-batch的增量计算模型不断优化演进。用户可以通过FlinkSQL将CDC数据实时写入Hudi存储，且在即将发布的0.9版本Hudi原生支持CDCformat。主要内容为：背景增量ETL演示一、背景近实时从2016年开始，ApacheHudi社区就开始通过Hudi的UPSERT能力探索近实时场景的使用案例[1]。通过MR/Spark的
浪尖聊大数据-浪尖·2024-02-02 12:30

云原生--数据库第二次作业

完成MySQL主从复制。主库设置1.设置server-id值并开启binlog参数[root@server~]#vim/etc/my.cnf.d/mysql-server.cnf[mysqld]log_bin=mysql-binserver_id=120重启数据库2.建立同步账号（1）创建用户并给予权限mysql>createuserhjjidentifiedwithmysql_native_pa
小朋友呀（sy）·2024-02-02 10:11

多云和多集群环境下的云原生应用交付实践

张海宁介绍了应用交付的模型，面临的主要问题，以及如何使用云原生的方法实现应用的定义和交付。裴明明则通过网易轻舟云原生应用交付平台的设计与实践，分享了多云和跨集群环境下的应用
亨利笔记·2024-02-02 10:06

字节跳动新一代云原生消息队列实践

作者：火山引擎云原生计算研发工程师｜雷丽媛上文我们了解了在字节跳动内部业务快速增长的推动下，经典消息队列Kafka的劣势开始逐渐暴露，在弹性、规模、成本及运维方面都无法满足业务需求。
字节跳动云原生计算·2024-02-02 09:53
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他