云原生阿里云spark云计算

华为云数据库GaussDB(for Cassandra)揭秘：内存异常增长的排查经历

内存异常增长的排查经历背景介绍华为云数据库GaussDB(forCassandra)是一款基于计算存储分离架构，兼容Cassandra生态的云原生NoSQL数据库；它依靠共享存储池实现了强一致，保证数据的安全可靠
科技说·2025-03-05 18:57

云原生✖️ AI 时代的微服务架构最佳实践—— CloudWeGo 技术沙龙·北京站报名开启

同时，随着云原生技术和AI技术的持续蓬勃发展，我们发现企业用户也面临着越来越多性能、成本和稳定性方面的挑战，系统需要支持弹性伸缩和潮汐流量下的稳定性，因而也越发需要一套高性能、易扩展、功能丰富的微服务架构
·2025-03-05 16:16

云服务：企业未来的超能引擎，数字化转型的绝对武器

在这个竞争激烈、技术不断推陈出新的时代，云计算已经不再是企业的一项选择，而是发展的必然趋势。今天，我们将深入挖掘云服务的巨大潜力，并揭示如何通过云服务，快速将你的企业推向数字化转型的巅峰。
¥KT·2025-03-05 16:28

AI生成的web框架 包含前后端 k8s管理等

用户提到的技术包括前端、后端、算法，GitLab、Jenkins，阿里云ACK和ECS，MongoDB、Redis，Docker、K8s、Nginx。
LCY133·2025-03-05 15:20

云计算中的“按需扩展”和“自动扩展”有何不同？

在云计算中，“按需扩展”（On-DemandScaling）和“自动扩展”（AutoScaling）都是提升系统灵活性的重要机制，但它们在触发方式、控制方式和应用场景上有所不同。
云上的阿七·2025-03-05 13:04

我们为什么需要服务发现？服务发现的基本概念和流程，并通过实践案例说明如何利用服务发现构建微服务架构 Why Do We Need Service Discovery?

作者：禅与计算机程序设计艺术1.简介在现代分布式系统架构中，服务发现（ServiceDiscovery）在微服务架构、云计算和容器化架构等方面扮演着至关重要的角色。
AI天才研究院·2025-03-05 13:33

OpenELB原理及最佳实践

一、OpenELB介绍网址：openelb.ioOpenELB是一个开源的云原生负载均衡器实现，可以在基于裸金属服务器、边缘以及虚拟化的Kubernetes环境中使用LoadBalancer类型的Service
唐唐爱吃糖111·2025-03-05 13:03

云计算中的“服务降级”是什么？

云计算中的**“服务降级”（ServiceDegradation）是一种应对系统压力、故障或资源紧张的策略，旨在在不可避免的情况下，通过降低部分服务质量或功能，确保核心业务的稳定运行**，从而避免系统整体崩溃
云上的阿七·2025-03-05 12:56

Linux云计算SRE-第十七周

1.做三个节点的redis集群。1、编辑redis节点node0(10.0.0.100)、node1(10.0.0.110)、node2(10.0.0.120)的安装脚本[root@node0~]#viminstall_redis.sh#!/bin/bash#指定脚本解释器为bashREDIS_VERSION=redis-7.2.7#定义Redis的版本号PASSWORD=123456#设置Red
晨曦启明711·2025-03-05 12:24

分布式系统的核心挑战与解决方案

1、分布式系统的引入在移动互联网、云计算和物联网的推动下，现代软件系统需要处理亿级用户请求、PB级数据存储和毫秒级响应需求。传统的单体架构受限于单机性能瓶颈和容灾能力，逐渐被分布式系统取代。
小马不敲代码·2025-03-05 12:51

（一）spark是什么？

1.spark是什么？spark是一个用来实现快速，通用的集群计算平台spark适用于各种各样原先需要多种不同的分布式平台的场景，包括批处理，迭代算法，交互式查询，流处理。
一智哇·2025-03-05 11:21

spark hdfs 常用命令

目录lsrmgettext以下按照使用频率和使用先后顺序排序（纯个人习惯）ls列出hdfs文件系统路径下的目录和文件hdfsdfs-ls列出hdfs文件系统路径下所有的目录和文件hdfsdfs-ls-Rrmhadoopfs-rm...hadoopfs-rm-r...每次可以删除多个文件或目录getlocalfile不能和hdfsfile名字不能相同，否则会提示文件已存在，没有重名的文件会复制到本地
毛球饲养员·2025-03-05 11:19

常用spark命令

--spark启动localhost$spark-sql--masteryarn启动主节点yarn模式--查看hdfs文件hdfsdfs-ls/spark/myDatabase.db查看我们建的表其实是是建立在
会拉小提琴的左脚·2025-03-05 11:19

若依框架集成阿里云OSS

OSS集成若依代码仓库1.问题分析在若依框架目前的实现中，是把图片存储到了服务器本地的目录，通过服务进行访问，这样做存储的是比较省事，但是缺点也有很多：硬件与网络要求：服务器通常需要高性能的硬件和稳定的网络环境，以保证文件传输的效率和稳定性。这可能会增加硬件和网络资源的成本和维护难度。管理难度：服务器目录需要管理员进行配置和管理，包括权限设置、备份策略等。如果管理不善或配置不当，可能会引发一些安全
Code额·2025-03-05 11:45

Spark详解二

八、Spark部署模式1、Local本地模式：运行于本地spark-shell--masterlocal[2]（local[2]是说，执行Application需要用到CPU的2个核）2、Standalone
卢子墨·2025-03-05 11:13

Spark基本命令

一、spark所在目录cdusr/local/spark二、启动spark/usr/local/spark/sbin/start-all.sh启动Hadoop以及Spark：bash.
chenworeng5605·2025-03-05 10:42

spark vi基本使用

打开文件与创建文件是Linux的内置命令，以命令的方式来运行。命令格式：vi/路径/文件名注意以下两种情况：1.如果这个文件不存在，此时就是新建文件，编辑器的左下角会提示：newfile2.如果文件已存在，此时就打开这个文件，进入命令模式。把文本内容添加到一个全新的文件的快捷方式：echo1>>1.txt三种模式vi编辑器有三种工作模式，分别为：命令模式，输入模式，底线模式。命令模式：所敲按键编辑
忧伤火锅麻辣烫·2025-03-05 10:09

Spark是什么？可以用来做什么？

ApacheSpark是一个开源的分布式计算框架，专为处理大规模数据而设计。它最初由加州大学伯克利分校开发，现已成为大数据处理领域的核心工具之一。
Bugkillers·2025-03-05 10:37

spark 常见操作命令

配置虚拟机配置即让自己的虚拟机可以联网，和别的虚拟机通讯一、配置vm虚拟机网段。具体设置为：虚拟机左上角点击编辑→虚拟网络编辑器选择VMnet8，要改动两个地方（注意：它会需要管理员权限）：1.子网IP改成192.168.10.02.NAT设置→192.168.10.2让所有的VM配置的虚拟机使用NAT时，它们的网段都是一致的。注意:这里的第三个部分的10并不是固定的，我们自己可以约定，但是
小冻梨！！！·2025-03-05 10:07

PySpark实现获取S3上Parquet文件的数据结构，并自动在Snowflake里建表和生成对应的建表和导入数据的SQL

PySpark实现S3上解析存储Parquet文件的多个路径，获取其中的数据Schema，再根据这些Schema，参考以下文本，得到创建S3路径Stage的SQL语句和上传数据到Snowflake数据库的
weixin_30777913·2025-03-05 08:25

Rust编程基础教程：Web开发入门

同时，Rust也越来越受欢迎，成为云计算、区块链、高性能计算等领域的主流编程语言。因此，对于新手而言，理解Rust编程语言的基本概念及特性，掌握
AI天才研究院·2025-03-05 05:33

AWS Amazon Aurora MySQL 性能监控与安全治理实战指南

引言AmazonAuroraMySQL凭借其云原生架构和高性能特性，已成为企业核心数据库的首选。然而，缺乏体系化的监控与安全治理可能导致资源浪费、性能瓶颈甚至数据泄露。
ivwdcwso·2025-03-05 04:59

【朝夕教育】《鸿蒙原生应用开发从零基础到多实战》004-TypeScript 中的泛型

标题详情作者简介愚公搬代码头衔华为云特约编辑，华为云云享专家，华为开发者专家，华为产品云测专家，CSDN博客专家，CSDN商业化专家，阿里云专家博主，阿里云签约作者，腾讯云优秀博主，腾讯云内容共创官，掘金优秀博主
微软MVP Eleven·2025-03-05 03:47

15.凤凰架构：构建可靠的大型分布式系统 --- 服务网格

服务网格：是一种用于管理服务间通信的基础设施，职责是支持现代云原生应用网络请求在复杂拓扑环境中的可靠传递。
enlyhua·2025-03-05 02:09

【愚公系列】《鸿蒙原生应用开发从零基础到多实战》006-TypeScript 中的元组

标题详情作者简介愚公搬代码头衔华为云特约编辑，华为云云享专家，华为开发者专家，华为产品云测专家，CSDN博客专家，CSDN商业化专家，阿里云专家博主，阿里云签约作者，腾讯云优秀博主，腾讯云内容共创官，掘金优秀博主
愚公搬代码·2025-03-05 02:33

java面试题-微服务相关组件

Nacos是一个开源项目，由阿里巴巴推出，旨在为构建云原生应用提供动态服务发现、配置管理和服务管理平台。
Builder 王·2025-03-04 23:43

37.索引生命周期管理—kibana 索引配置

37.1背景引入索引生命周期管理的一个最重要的目的就是对大量时序数据在es读写操作的性能优化如通过sparkstreaming读取Kafka中的日志实时写入es，这些日志高峰期每天10亿+，每分钟接近100w
大勇任卷舒·2025-03-04 23:42

手机号码归属地的实现

手机号码归属地查询一般可以通过以下几种方式实现：1.使用公开的号码归属地数据库可以使用国内的手机号码归属地数据库，如：百度号码归属地开放API阿里云号码归属地API腾讯号码归属地API你可以在本地存储一个
dev.null·2025-03-04 23:12

AI 芯片全解析：定义、市场趋势与主流芯片对比

随着人工智能（AI）的快速发展，AI计算的需求不断增长，从云计算到边缘计算，AI芯片成为推动智能化时代的核心动力。那么，什么样的芯片才算AI芯片？
嵌入式Jerry·2025-03-04 22:39

2024年运维最新linux 使用docker安装 postgres 教程，踩坑实践，2024年最新GitHub已标星16k

这次整理的面试题，小到shell、MySQL，大到K8s等云原生技术栈，不仅适合运维新人入行面试需要，还适用于想提升进阶跳槽加薪的运维朋友。
2401_84139624·2025-03-04 22:38

通过spark-redshift工具包读取redshift上的表

spark数据源API在spark1.2以后，开始提供插件诗的机制，并与各种结构化数据源整合。
stark_summer·2025-03-04 22:02

大数据面试临阵磨枪不知看什么？看这份心理就有底了-大数据常用技术栈常见面试100道题

4Spark和HadoopMapReduce的区别是什么？5如何在Spark中实现数据的持久化？6SparkStreaming的工作原理是什么？7如何优化Spark作业的性能？
大模型大数据攻城狮·2025-03-04 21:59

大模型推理速度测评的实战代码

曾获得阿里云天池比赛第一名，CCF比赛第二名，科大讯飞比赛第三名。拥有多项发明专利。对机器学习和深度学习拥有自己独到的见解。曾经辅导过若干个非计算机专业的学生进入到算法行业就业。
herosunly·2025-03-04 21:59

Spark复习八：简述Spark运行流程以及Spark分区以及简述SparkContext

1.简述Spark运行流程：1.构建SparkApplication的运行环境,启动SparkContext2.SparkContext向资源管理器(可以是Standalone,Mesos,Yarm)申请运行
IT change the world·2025-03-04 21:28

Spark使用Parqute存储方式有什么好处

列式存储：压缩效率和查询效率谓词下推存储层：查询数据块生态兼容性高：Spark，hadoop等都兼容
冰火同学·2025-03-04 21:27

VMware Fusion 虚拟机Mac版 安装CentOS 8 系统

Linux发行版领头羊RedHatEnterpriseLinux的再编译版本（是一个再发行版本），而且在RHEL的基础上修正了不少已知的Bug，相对于其他Linux发行版，其稳定性值得信赖,广泛用于服务器、云计算
甜于酸·2025-03-04 21:56

2023年上海市浦东新区网络安全管理员决赛理论题样题

正确（1）保护对象改变等保1.0保护的对象是信息系统，等保2.0增加为网络和信息系统，增加了云计算、大数据、工业控制系统、物联网、移动物联技术、网络基础设施等保护对象，实现了全方面的覆盖。
afei00123·2025-03-04 20:50

基于springboot+vue在线小说阅读平台系统(源码+lw+部署文档+讲解等)

前言博主介绍：✌全网粉丝10W+,CSDN特邀作者、博客专家、CSDN新星计划导师、全栈领域优质创作者，博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战
QQ3295391197·2025-03-04 20:16

【朝夕教育】《鸿蒙原生应用开发从零基础到多实战》005-TypeScript 中的枚举

标题详情作者简介愚公搬代码头衔华为云特约编辑，华为云云享专家，华为开发者专家，华为产品云测专家，CSDN博客专家，CSDN商业化专家，阿里云专家博主，阿里云签约作者，腾讯云优秀博主，腾讯云内容共创官，掘金优秀博主
微软MVP Eleven·2025-03-04 19:42

阿里云k8s配置节点亲和性/Session会话保持

1.路由页面：配置路由的注解；2.配置：注解名称描述可选值nginx.ingress.kubernetes.io/affinity关联的类型，将此设置为cookie以启用会话关联cookienginx.ingress.kubernetes.io/session-cookie-name
吾乃南华老仙·2025-03-04 19:10

【K8S】K8S架构及相关组件

文章目录1K8S总体架构2相关组件2.1控制面板组件2.2节点组件2.3附加组件写在最后1K8S总体架构K8S，全称Kubernetes，是一个开源的容器部署和管理平台，由Google开发，后捐献给云原生计算基金会
m0_74823892·2025-03-04 18:08

主流的第三方直播SDK对比（腾讯云、即构、阿里云、声网、网易云信、网宿）

直播业务概述大家所熟知的直播平台虎牙、斗鱼、快手、抖音、B站，直播功能看似普遍，但从零到一开发却不简单。直播中运用到的技术难点非常之多，音频视频处理/编解码，前后处理，直播分发，即时通讯等技术，学好任何一项都需要比较高的成本，将它们融合到直播功能上更是难上加难。由于公司新项目计划做直播产品，开发周期比较紧。经过调研：最快搭建一个直播功能的方案就是运用第三方直播SDK，低成本、效率高、风险低。本文将
·2025-03-04 18:36

GreptimeDB v0.12 发布，开源 Rust 时序数据库

GreptimeDB是由格睿科技开发的开源时序数据库，基于Rust语言构建，以云原生、高性能、低成本为核心优势。
自不量力的A同学·2025-03-04 18:33

Spring AI Alibaba：Java 开发者的 AI 应用开发新利器

阿里云开源的SpringAIAlibaba框架，正是为了满足这一需求而生。本文将详细介绍SpringAIAlibaba的起源、核心特性，并通过一个示例展示其在AI应用开发中的便利性。
ZnSoft〔100-1=0〕·2025-03-04 17:57

初学者如何用 Python 写第一个爬虫？

大数据技术：涵盖Hadoop（HDFS）、Hive、Spark
ADFVBM·2025-03-04 16:19

云原生存储架构：构建数据永续的新一代存储基础设施

Gartner预测到2025年70%企业将采用云原生存储方案，数据自动分层技术可将冷数据存储成本压缩至0.001美元/GB/月。一、存储架构演进路线1.1数据存储范式对比技术维度D
桂月二二·2025-03-04 15:14

服务网格架构深度解析：构建智能的云原生网络平面

引言：重新定义微服务通信范式Lyft实施Envoy服务网格后，跨集群请求延迟下降60%，全局超时失败率从8%降至0.1%。Booking.com在20,000+微服务中部署Istio，配置下发速度提升300倍，跨语言流量管理统一率100%。CNCF报告显示，2023年全球服务网格部署规模突破500万节点，流量可观测性水平提升至纳米级粒度。一、服务网格演进全景图1.1微服务通信模式对比技术维度传统S
桂月二二·2025-03-04 14:05

开源的向量数据库Milvus

官网地址：https://milvus.io/以下是关于Milvus的详细介绍：一、基本概念向量数据库：Milvus是一款云原生向量数据库，它支持多种类型的向量，如浮点向量、二进制向量等，并且可以处理大规模的向量数据
研创通之逍遥峰·2025-03-04 13:27

最节省成本的架构方案：无服务器架构

无服务器架构（ServerlessArchitecture）是一种颠覆性的云计算执行模型，它允许开发者专注于编写和部署代码，而无需担心底层服务器基础设施的管理。
fxrz12·2025-03-04 11:40

Spark架构都有那些组件

Spark组件架构主要采用主从结构，分别是driver驱动器，Excutor执行器,和clusterManager集群管理器这个三个架构组件其中driver驱动器主要负责spark执行Excutor的任务分配
冰火同学·2025-03-04 11:37
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他