大数据-云计算

SpringBoot中使用redis事务

事务的相关介绍可以参考：0、起因在一次线上事故中，我们定位到redis的使用存在大value，超过了dubbo的最大数据量限制，于是紧急将这个大的对象value拆分成单个的stringvalue。
wrr-cat·2024-02-19 20:16

马士兵 day4_Yarn和Map/Reduce配置启动和原理讲解

day4_Yarn和Map/Reduce配置启动和原理讲解云计算：分布式计算，分布在多台机器上同时运行的运算。
PC_Repair·2024-02-19 20:28

如何设计出一个高效的埋点管理系统？

作者介绍@九果入行大数据8年；某大厂数据产品经理；专注于数据产品，并持续学习中；“数据人创作者联盟”成员。01为什么要做埋点管理系统？
一个数据人的自留地·2024-02-19 20:27

好消息！茗创系列课程年度会员，众多课程可免费畅学！

茗创年度会员加入茗创年度会员以下课程可免费畅学不仅享有会员专属服务、优惠购课还有课程上新提醒哦脑影像组学培训班直播时间：2023.7.4~7.7随着大数据、人工智能的深入融合发展，一项新的研究方法开始用于临床研究
茗创科技·2024-02-19 20:23

主流开发语言和开发环境?

Java被广泛应用于企业级应用开发、移动应用（特别是Android应用）、游戏开发、大数据处理（如Hadoop生态系统）、云计算服务端开发等场景。C++简介：C+
dami_king·2024-02-19 20:50

[Flink04] Flink部署实践

但Flink是大数据计算框架，不是资源调度框架，这并不是它的强项；所以还是应该让专业的框架做专业的事，和其他资源调度框架集成更靠谱。FlinkonYarn模式，把资源管理交给Ya
YoungerChina·2024-02-19 20:49

Redis 集群(Cluster)

虽然硬件价格在不断降低，一些中大厂的服务器内存已经可以达到TB级别了，但是1TB在当前这个“大数据”时代，俨然不算什么，有的时候我们确实需要更大
ikun66666·2024-02-19 20:19

扩展学习|大数据，新的认识论和范式转变

文献来源：[1]KitchinR.BigData,NewEpistemologiesandParadigmShift[J].BigData&Society,2014,1(1):1-12.DOI:10.1177/2053951714528481.下载链接：https://pan.baidu.com/s/1RdnIo5VeL-CERk2sxyILiQ提取码：0ih2一、科学研究的范式转变正如库恩(19
封印师请假去地球钓鱼·2024-02-19 20:32

GlusterFS：开源分布式文件系统的深度解析与应用场景实践

引言在当今大数据时代背景下，企业对存储系统的容量、性能和可靠性提出了前所未有的挑战。
超逮虾户·2024-02-19 19:20

阿里巴巴的云原生应用开源探索与实践

戳蓝字“CSDN云计算”关注我们哦！
CSDN云计算·2024-02-19 19:44

Linux系统中HTTP隧道技术的未来发展趋势与挑战：穿越网络的“时光隧道”

随着云计算、大数据和人工智能等技术的迅猛发展，HTTP隧道技术也将迎来巨大的变革。想象一下，未来的HTT
华科℡云·2024-02-19 19:21

ETL数据集成工具DataX、Kettle、ETLCloud特点对比

ETL数据集成工具对于数据仓库，大数据集成类应用，通常会采用ETL工具辅助完成。
·2024-02-19 19:52

云计算基础-网络虚拟化

虚拟交换机什么是虚拟交换机虚拟交换机是一种运行在虚拟化环境中的网络设备，其运行在宿主机的内存中，通过软件方式在宿主机内部实现了部分物理交换机的功能，如VLAN划分、流量控制、QoS支持和安全功能等网络管理特性虚拟交换机在云平台上的应用比如有两台服务器，他们之间想要通信，需要一台物理交换机，那现在在服务器上创建了两台虚拟机，现在想让这两台虚机之间通讯，这时就需要一台虚拟交换机，虚拟交换机和物理交换机
比特微联·2024-02-19 19:05

互联网加竞赛 大数据分析：基于时间序列的股票预测于分析

1简介Hi，大家好，这里是丹成学长，今天向大家介绍一个大数据项目大数据分析：基于时间序列的股票预测于分析2时间序列的由来提到时间序列分析技术，就不得不说到其中的AR/MA/ARMA/ARIMA分析模型。
Mr.D学长·2024-02-19 19:00

云计算、大数据、人工智能、物联网、虚拟现实技术、区块链技术（新一代信息技术）学习这一篇够了！

目录云计算一、云计算的基本概念二、云计算的分类(一)IaaS(二)SaaS(三)PaaS三、云环境的分类、云计算的四种部署模式(一)公有云(二)私有云(三)社区云(四)混合云四、云计算的特点(一)虚拟化技术
IT小庄同学·2024-02-19 18:19

遂人心愿真难

不管什么定理，都是人的习惯造成的，利用大数据大概率去推理得出的结论。所有的顺心都是天时地利人和共同组合在一起形成的一种规律，具体到人就各有差距不一而衷。
岁月抚痕·2024-02-19 18:49

BIG DATA —— 大数据时代

大数据时代[英]维克托·迈尔—舍恩伯格肯尼斯·库克耶◎著盛杨燕周涛◎译《大数据时代》是国外大数据研究的先河之作，本书作者维克托·迈尔·舍恩伯格被誉为“大数据商业应用第一人”，他在书中前瞻性地指出，大数据带来的信息风暴正在变革我们的生活
EthanWYC601·2024-02-19 18:12

挑战杯 地铁大数据客流分析系统 设计与实现

文章目录1前言1.1实现目的2数据集2.2数据集概况2.3数据字段3实现效果3.1地铁数据整体概况3.2平均指标3.3地铁2018年9月开通运营的线路3.4客流量相关统计3.4.1线路客流量排行3.4.2站点客流量排行3.4.3入站客流排行3.4.4整体客流随时间变化趋势3.4.5不同线路客流随时间变化3.4.6不同线路的客流组成3.5收入消费指标统计3.5.1线路收入排行3.5.2各个站点对线路
laafeer·2024-02-19 16:41

中文语音标注工具FunASR（语音识别）

FunASR作用:能【准确】识别语音，并转成【文字、标出声调】他的原理，就不讲了，俺是搞大数据的，python这东西就勉强能写个爬虫和接口，机
我要用代码向我喜欢的女孩表白·2024-02-19 16:52

见世面的成本有多低？这几个技术公众号告诉你答案

大数据分析挖掘和Python机器学习商业智能BI、数据分析、数据挖掘、大数据、Python、机器学习、深度学习、算法等技术分享
傅一平·2024-02-19 16:19

Apache DolphinScheduler数仓任务管理规范

前言：大数据领域对多种任务都有调度需求，以离线数仓的任务应用最多，许多团队在调研开源产品后，选择ApacheDolphinScheduler（以下简称DS）作为调度场景的技术选型。
DolphinScheduler社区·2024-02-19 16:16

学习笔记：使用 Amazon Bedrock 进行图像生成

AmazonBedrock全新发布在2023年的亚马逊云科技re:Invent全球云计算大会上，最令人瞩目的一项更新莫过于AmazonBedrock的全新升级。
·2024-02-19 16:07

Amazon Web Services -- 全球云计算领导者

AmazonWebServices--全球云计算领导者AmazonWebServices--全球云计算领导者、云基础设施与平台服务（Iaas&PaaS）领导者；计算、存储和数据库等基础设施技术，到机器学习
·2024-02-19 16:06

低代码配置式组态软件-BY组态

随着物联网、大数据等技术高速发展，我们逐步向数字化、可视化的人工智能（AI）时代的方向不断迈进。智能时代是工业4.0时代，我国工业领域正努力从“制造”迈向“智造”的新跨越。什么是组态软件？
·2024-02-19 16:04

Apache DolphinScheduler数仓任务管理规范

前言：大数据领域对多种任务都有调度需求，以离线数仓的任务应用最多，许多团队在调研开源产品后，选择ApacheDolphinScheduler（以下简称DS）作为调度场景的技术选型。
·2024-02-19 16:01

营销系统黑名单优化：位图的应用解析 | 京东云技术团队

营销系统一般是通过大数据分析建模，在CDP（客户数据平台，以客户为核心，围绕数据融合、人群圈选、用户洞察等提供产品能力）创建营销目标客户群体，黑名单同样也是通过CDP维护。
·2024-02-19 16:59

基于Spring Cloud创建弹性微服务

1引言在当今云计算和容器化时代，开发人员越来越需要创建可靠、弹性的应用程序，以应对系统的高度复杂性和需求量。采用微服务架构是一种实现方法，将应用程序结构化为松散耦合的服务集合。
虚无火星车·2024-02-19 16:01

作物模型狂奔：Apsim、Wofost、Dssat

大数据量必须要脚本去跑，目前Apsim和Wofost出了点成果，跟大家分享一下。欢迎各位道友留言、私聊、交流病情最好到B站上去留言啦，CSDN平很少登录需要指导的话，那就得让我挣点零花咯，嘿嘿。
F_Dregs·2024-02-19 15:47

Pytorch-SGD算法解析

的个人空间-肆十二-个人主页-哔哩哔哩视频(bilibili.com)SGD，即随机梯度下降（StochasticGradientDescent），是机器学习中用于优化目标函数的迭代方法，特别是在处理大数据集和在线学习场景中
肆十二·2024-02-19 14:10

奇葩说第五季之你会去见大数据为你筛选出的最合适的人吗？

欧阳Sir被淘汰，如晶战队又输了。其实这期辩题反方是理想，正方是现实。所以奇葩说的观众那么有梦想，心里存着诗和远方，一定会选择反方。我也会的，但是我会经过正方的步骤再从心里走到反方去。虽然我选择反方，但我希望正方可以赢，我希望如晶赢，她在我心里就是无冕之王。而且，非常喜欢欧Sir，就像高晓松说的，他身上有种特别好的现代的荒诞感，一见他就高兴。他走了，真得舍不得。他不是个好辩手，可能都不太适合这个舞
昆仑君的猫·2024-02-19 14:18

redis学习笔记

Redis学习笔记文章目录Redis学习笔记一、NoSQL数据库简介1、解决问题2、NoSQL数据库二、Redis6概述和安装1、安装2、注意事项3、Redis使用4、其他介绍三、常用五大数据类型1、Redis
果然君·2024-02-19 14:19

p11 结构体：统计大数据

结构体定义（Struct）是一种用户定义的数据类型，用于组合不同数据类型的元素。它们允许将多个相关的变量组合在一起，形成一个逻辑上的单元。可以通过定义结构体来描述一个实际问题中的对象或概念，从而更好地组织和管理代码。输入一个正整数n(3voidmain(){structem{charname[10];floatjbg;floatfdg;floatzc;};structememp[100];inti
Mzylq·2024-02-19 14:16

《隐私计算简易速速上手小册》第2章：关键技术介绍（2024 最新版）

文章目录2.1同态加密2.1.1基础知识2.1.2主要案例：云计算数据分析2.1.3拓展案例1：医疗数据分析2.1.4拓展案例2：金融风险评估2.2安全多方计算（SMC）2.2.1基础知识2.2.2主要案例
江帅帅·2024-02-19 14:12

2024年阿里云服务器租用价格表（2核2G-4核16G）

在云计算的时代，一个稳定、高效的服务器是企业或个人发展的必备之选。阿里云，作为国内领先的云服务提供商，一直以其出色的性能和稳定的服务赢得了用户的青睐。
腾讯云优惠活动及教程·2024-02-19 14:14

Flink系列-1、流式计算简介

大数据系列文章目录官方网址：https://flink.apache.org/学习资料：https://flink-learning.org.cn/目录数据的时效性流式计算和批量计算流式计算流程和特性分布式计算引擎什么是
技术武器库·2024-02-19 13:10

Flink 细粒度滑动窗口性能优化

大数据技术AIFlink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料118篇原创内容公众号1、概述1.1细粒度滑动的影响当使用细粒度的滑动窗口（窗口长度远远大于滑动步长）时，
hyunbar·2024-02-19 13:39

【大数据面试题】009 Flink 有哪些机制实现故障恢复

一步一个脚印，一天一道面试题（重点）容错检查点（Checkpoint）：Flink使用容错检查点来定期记录应用程序的状态。检查点包含了所有正在进行中的任务的状态信息。当发生故障时，Flink可以使用最近的检查点来恢复应用程序的状态。#从检查点恢复$bin/flinkrun-s:savepointPath容错恢复策略：Flink提供了多种容错恢复策略，可以根据具体的需求进行配置。例如，可以设置重启策
Jiweilai1·2024-02-19 13:05

【大数据面试题】007 谈一谈 Flink 背压

一步一个脚印，一天一道面试题（有些难点的面试题不一定每天都能发，但每天都会写）什么是背压Backpressure在流式处理框架中，如果下游的处理速度，比上游的输入数据小，就会导致程序处理慢，不稳定，甚至出现崩溃等问题。出现背压的原因上游数据突然增大比如数据源突然数据量增大多倍，下游处理速度跟不上。就像平时的小饭店能处理的很轻松，突然到了过年人多了很多，就会需要客人排队。网络，机器异常等这个也好理解
Jiweilai1·2024-02-19 13:35

菜鸟也崩了 分析分析原因+聊聊降本增笑

2.盈利降低淘宝没参与双十二活动3.业务线的缩减或重心偏移技术创新：近年来，人工智能、大数据、物联网等技术在物流行业得到了广泛应用，有效提高了物流效率，降低了运营成本。例如，一些物流公司利用大数据进行
我才是真的封不觉·2024-02-19 13:34

【大数据面试题】006介绍一下Parquet存储格式的优势

一步一个脚印，一天一道面试题列式存储同一列的数据是同一种数据类型，所以压缩比例可以更高。同时一般查询使用时不会使用所有列，而是只用到几列，所以查询速度会更快压缩比例高因为是列式存储，所以可以对同一类型的一段做压缩，压缩比例高支持的平台和框架多在Hadoop,Spark,Presto,Python等都支持，所以Parquet文件可以在不同系统和语言通用。这是我觉得比较实在的优势
Jiweilai1·2024-02-19 13:34

【大数据面试题】008 谈一谈 Flink Slot 与 并行度

【大数据面试题】008谈一谈FlinkSlot与并行度配置并行度Parallelism概念作用Slot概念作用如何设置TaskManager任务管理器Flinksubmit脚本一步一个脚印，一天一道面试题该文章有较多引用文章
Jiweilai1·2024-02-19 13:01

云计算实训室建设方案2024

云计算课程体系云计算实训课程体系设计依据一、培养目标唯众公司提供创新技术教育和服务的目标，旨在提高人才培养质量，扩大就业创业，推动经济转型升级，以及培育新的经济发展动能。
武汉唯众智创·2024-02-19 13:00

云计算基础-华为存储实验

存储配置流程创建硬盘域（CK，包括热备CK）创建存储池（CKG、Extent）创建LUN、LUN组、将LUN加入LUN组创建主机、主机组、将主机加入主机组创建映射视图（LUN组和主机组的映射）1.创建CK创建硬盘域就是创建CK，CK可以包含各种不同类型的硬盘一个硬盘域可以创建多个存储池热备策略：预留多少空间当热备空间硬盘域创建成功后可以看到该CK的状态等信息2.创建CKG及extent(图片为视频
比特微联·2024-02-19 13:28

云计算基础-大页内存

大页内存功能概述什么是大页内存简单来说，就是通过增大操作系统页的大小来减小页表，从而避免快表缺失主要应用场景主要运用于内存密集型业务的虚拟机，比如对于运行数据库系统的虚拟机，采用HugePages(大页)后，可以提升数据库的整体性能(越20%)，并有效减小性能抖动内存基本概念CPU访问内存时，是去通过寻址去访问内存的，寻址最终寻的是内存的物理地址，物理地址是通过虚拟地址映射出去的，在这里引入了一个
比特微联·2024-02-19 13:58

云计算基础-快照与克隆

快照及克隆什么是快照快照是数据存储的某一时刻的状态记录，也就是把虚拟机当前的状态保存下来(快照不是备份，快照保存的是状态，备份保存的是副本)快照优点速度快，占用空间小快照工作原理在了解快照原理前，首先需要知道两个概念：索引/数据和差分盘索引和数据（indexnode/datablock）首先要了解，每一个文件系统都是有两部分组成的：索引和数据（indexnode/datablock）,索引有时候也
比特微联·2024-02-19 13:28

云计算基础-虚拟机迁移原理

什么是虚拟机迁移虚拟机迁移是指将正在运行的虚拟机实例从一个物理服务器（或主机）迁移到另一个物理服务器（或主机）的过程，而不会中断虚拟机的运行。虚拟机拟机迁移分类虚热迁移：开机状态下迁移冷迁移：关机状态下迁移虚拟机可以迁移哪些东西？1.虚拟机的配置文件2.虚拟机的内存呢3.虚拟机的磁盘文件虚拟机配置文件迁移虚拟机配置文件迁移就是从主机A将虚拟机的配置文件移动至主机B的过程首先看配置文件，在执行迁移前
比特微联·2024-02-19 13:28

云计算基础-备份和容灾

什么是备份？什么是容灾？备份：备份是容灾的基础，通常指在数据中新内，将全部或部分数据集合从应用主机的硬盘或阵列复制到其他存储介质的过程。备份的本质就是存储数据的“复制”，目的是以外发生后的数据恢复备份本质是把一份数据复制到另一份数据上，比如把生产存储的数据复制到其他地方(备份存储等)，当生产存储故障了，可以用备份的存储数据恢复或使用备份存储顶替生产存储容灾：容灾系统是指在相隔较远的异地，建立两套或
比特微联·2024-02-19 13:28

云计算基础-计算虚拟化-CPU虚拟化

CPU指令系统在CPU的工作原理中，CPU有不同的指令集，如下图，CPU有4各指令集：Ring0-3，指令集是在服务器上运行的所有命令，最终都会在CPU上执行，但是CPU并不是说所有的命令都是一视同仁的，它会把命令分为不同的指令集Ring0指令集称之为内核态指令集，改啊指令集里面啊运行的主要是操作系统访问硬件、关键数据结构，运行中断等。Ring1-2指令集主要运行的是设备驱动的命令Ring3指令集
比特微联·2024-02-19 13:58

云计算基础 -NUMA

UMAUMA中文翻译叫：一致性内存访问多个CPU通过同一根前端总线（FSB）来访问内存（所有的内存访问都需要通过北桥芯片来完成），若多个CPU访问内存的不同内存单元还是相同内存单元，同一时刻，只有一个CPU能够访问内存随着CPU内核越来越多，性能越来越强，现在已经有双路、四路的服务器，若是UMA架构的话，前端总线很容易造成瓶颈NUMANUMA中文翻译：非一致性内存访问NUMA解决了UMA架构所有C
比特微联·2024-02-19 13:58

云计算基础-虚拟化概述

虚拟化概述虚拟化是一种资源管理技术，能够将计算机的各种实体资源（如CPU、内存、磁盘空间、网络适配器等）予以抽象、转换后呈现出来并可供分割、组合为一个或多个逻辑上的资源。这种技术通过在计算机硬件上创建一个抽象层，将单台计算机的硬件元素（处理器、内存、存储等）分成多个虚拟计算机（通常称为虚拟机(VM)）。每个虚拟机都会运行自己的操作系统(OS)，其行为就像一台独立的计算机，即使它只在一部分实际底层计
比特微联·2024-02-19 13:28
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他