E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
redis后端大数据
分布式离线计算—Spark—基础介绍
Spark各种概念之间的关系Executor的优点Spark运行基本流程Spark运行架构的特点Spark的部署模式Spark三种部署方式Hadoop和Spark的统一部署摘要:Spark是基于内存计算的
大数据
并行计算框架
测试开发abbey
·
2024-09-13 11:11
人工智能—大数据
第十章 【
后端
】环境准备(10.6)——
Redis
10.6
Redis
Redis
尚未在Windows上得到正式支持,推荐Docker安装
Redis
。
yu玉米mi
·
2024-09-13 11:10
redis
数据库
缓存
【
大数据
】如何读取多个Excel文件并计算列数据的最大求和值
导语:在数据分析和处理中,我们经常需要从多个Excel文件中提取数据并进行计算。本文将带您通过一个实用的Python教程,学习如何读取D盘目录下特定文件夹内的多个Excel文件,并计算特定列数据的最大求和值。文章目录一、准备工作二、教程步骤1.导入必要的库2.设置文件路径3.获取Excel文件列表4.选择文件5.初始化最大求和值6.指定求和的列索引7.读取Excel文件并计算列求和8.输出结果三、
熬夜的王
·
2024-09-13 10:04
大数据
excel
python
开发语言
big
data
大数据
领域的深度分析——AI是在帮助开发者还是取代他们?
在
大数据
领域,生成式人工智能(AIGC)的应用正在迅速扩展,改变了数据科学家和开发者的工作方式。本文将从
大数据
的专业视角,探讨AI工具在这一领域的作用,以及它们是如何帮助开发者而非取代他们的。
阳爱铭
·
2024-09-13 09:32
大数据与数据中台技术沉淀
大数据
人工智能
后端
数据库架构
数据库开发
etl工程师
chatgpt
用户登陆网址都发生了什么?
用户从网址登录到查询
后端
服务,中间涉及多个步骤,每个步骤都有特定的功能和设计考量。以下是一个详细的描述,涵盖了从用户请求到
后端
服务响应的全过程。1.用户请求步骤:用户在浏览器中输入URL并按下回车。
阳爱铭
·
2024-09-13 09:32
java
学习
机器学习
人工智能
github
程序人生
改行学it
python实现模糊逻辑_基于Python的
大数据
集模糊逻辑
我的团队一直致力于在两个
大数据
集上运行模糊逻辑算法。第一个(子集)大约是180K行,包含我们需要在第二个(超集)中匹配的人的姓名、地址和电子邮件。超集包含250万条记录。
takeiiii
·
2024-09-13 09:00
python实现模糊逻辑
Redis
-1 缓存穿透、缓存击穿、缓存雪崩
缓存穿透一.数据查询的流程程序根据请求查询数据时,会先到
redis
中查询,如果
redis
中查到了目标数据,则直接返回;如果
redis
中没有目标数据,则到mysql中查找,找到目标数据后返回,同时将该数据写入到
七折困
·
2024-09-13 09:26
面试
缓存
redis
数据库
大数据
新视界 --
大数据
大厂之 Spark 性能优化秘籍:从配置到代码实践
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:Ja
青云交
·
2024-09-13 08:25
大数据新视界
Spark
性能优化
内存分配
并行度
存储级别
shuffle
减少
算法优化
代码实践
数据读取
广播变量
数据倾斜
Spark
数据库
大数据
新视界--
大数据
大厂之MySQL数据库课程设计:MySQL集群架构负载均衡方法选择全攻略(2-2)
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:Ja
青云交
·
2024-09-13 08:25
大数据新视界
Java技术栈
Java性能优化
数据库
高可用性架构
负载均衡
业务规模
预算限制
可扩展性
技术团队能力
数据安全性
系统复杂性
行业特点
硬件负载均衡器
Nginx
HAProxy
大数据
新视界 --
大数据
大厂之Flink强势崛起:
大数据
新视界的璀璨明珠
亲爱的朋友们,热烈欢迎你们来到青云交的博客!能与你们在此邂逅,我满心欢喜,深感无比荣幸。在这个瞬息万变的时代,我们每个人都在苦苦追寻一处能让心灵安然栖息的港湾。而我的博客,正是这样一个温暖美好的所在。在这里,你们不仅能够收获既富有趣味又极为实用的内容知识,还可以毫无拘束地畅所欲言,尽情分享自己独特的见解。我真诚地期待着你们的到来,愿我们能在这片小小的天地里共同成长,共同进步。本博客的精华专栏:Ja
青云交
·
2024-09-13 08:50
大数据新视界
Flink
大数据
数据类型
实时处理
流处理
框架对比
应用场景
数据处理
大数据新视界
数据库
【深入剖析】Kylin架构全景及其组件详解
标题:【深入剖析】Kylin架构全景及其组件详解ApacheKylin是一个开源的分布式分析引擎,提供
大数据
集上的即时分析能力。它通过预计算技术,将数据以多维立方体的形式存储,从而加快查询速度。
2401_85763639
·
2024-09-13 08:50
kylin
架构
大数据
Java面试题真题·技术面试题部分总结
Java面试题真题·融资管理系统项目介绍文章目录系列文章目录前言技术问题Java的跨平台原理String常用方法分布式的优点对cookie有什么了解,Cookie和Session的区别最熟悉jdk哪个版本
redis
攸攸太上
·
2024-09-13 06:43
Java面试题总结--攸攸太上
java
学习
Spring项目:文字花园(三)
一.实现博客详情1.
后端
逻辑代码controller层添加方法(根据博客id查看博客详情)@RequestMapping("/getBlogDetail")publicResultgetBlogDetail
小李同学_LHY
·
2024-09-13 06:41
java
前端
开发语言
spring
sql
服务器
规划大二上期
11月之前将ssm
redis
学完,过年之前mysql学完,MQ消息队列,ES学完。期末不挂科。问题争取自己解决,如何导入api,如何训练自己的ai,如何人脸识别之类的技术问题争取独立解决。
白色的风扇
·
2024-09-13 06:40
学习
推荐:ASP.NET Core Web API 模板 —— 强大的启动项目!
aspnetcore-webapi-templateThisprojectisanWebAPIOpen-SourceBoilerplateTemplatethatincludesASP.NETCore5,WebAPIstandards,cleann-tierarchitecture,GraphQLservice,
Redis
戴洵珠Gerald
·
2024-09-13 05:29
Java学习之路:实践项目与进阶学习--创建一个图书管理系统
项目结构
后端
:使用Java和SpringBoot实现RESTfulAPI。数据库:使用H2数据库进行书籍信息存储。(也可使用mysql数据库设计,详情可参考:《MySQL数据库课程设计
Dreams°123
·
2024-09-13 04:54
java
数据库
开发语言
spring
spring
boot
intellij
idea
intellij-idea
Redis
高可用
appendfsyncalwaysappendfsyncnoappendfsynceverysecond文件重写文件重写流程载入对比nginx、tomcat、mysql等服务都具有预防单点故障、提高整体性能和安全性的功能,当然,
Redis
確定饿的猫
·
2024-09-13 04:20
redis
数据库
linux
使用Spring Boot来开发一个准妈妈交流平台
-**
后端
服务**:处理业务逻辑。-**数
MAMA6681
·
2024-09-13 03:16
spring
boot
编程常用命令总结
编程命令大全1.软件环境变量的配置JavaScalaSparkHadoopHive2.
大数据
软件常用命令Spark基本命令Spark-SQL命令Hive命令HDFS命令YARN命令Zookeeper命令
Yellow0523
·
2024-09-13 02:42
Linux
BigData
大数据
Redis
与MySQL双写一致性如何保证?
一致性就是数据保持一致,在分布式系统中,可以理解为多个节点中数据的值是一致的。强一致性:这种一致性级别是最符合用户直觉的,它要求系统写入什么,读出来的也会是什么,用户体验好,但实现起来往往对系统的性能影响大弱一致性:这种一致性级别约束了系统在写入成功后,不承诺立即可以读到写入的值,也不承诺多久之后数据能够达到一致,但会尽可能地保证到某个时间级别(比如秒级别)后,数据能够达到一致状态最终一致性:最终
陈二狗想吃肉
·
2024-09-13 02:22
从底层原理上理解ClickHouse 中的稀疏索引
这种索引的核心思想是通过减少需要扫描的数据范围来加速查询,特别适用于
大数据
量场景。1.基本概念:数据存储与索引在理解稀疏索引之前,首先需要理解ClickHouse的列式存储
goTsHgo
·
2024-09-13 02:09
大数据
分布式
Clickhouse
数据库
clickhouse
Redis
基础知识学习笔记(三)
文章目录
Redis
命令一.
Redis
命令1.启动
redis
服务器2.本地启动
redis
客户端3.远程启动
redis
客户端4.测试是否建立连接二.
Redis
键(key)
Redis
Key相关命令三.
Redis
晚睡早起₍˄·͈༝·͈˄*₎◞ ̑̑
·
2024-09-13 01:34
redis
redis
学习
笔记
Redis
基于Geo的地理位置操作
packagecom.example.
redis
;importorg.junit.jupiter.api.Test;importorg.springframework.beans.factory.annotation.Autowired
当归. z Z
·
2024-09-13 01:03
Redis
redis
数据库
缓存
Redis
7_16 高阶篇 第七章
Redis
中的缓存预热/缓存雪崩/缓存击穿/缓存穿透问题详解
实现缓存雪崩定义引起缓存雪崩的原因规避/解决方案1.
Redis
中key设置为永不过期或过期时间错开2.
Redis
缓存集群实现高可用3.多缓存结合预防雪崩4.服务降级5.使用云服务缓存击穿定义引起缓存击穿的原因规避
孤尘Java
·
2024-09-13 01:32
Redis从小白到精通
缓存
深入理解
Redis
原理:缓存雪崩/击穿/穿透/预热/降级
目录1、缓存雪崩1.1、什么是缓存雪崩1.2、解决缓存雪崩2、缓存击穿2.1、什么是缓存击穿2.2、解决缓存击穿3、缓存穿透3.1、什么是缓存穿透3.2、解决缓存穿透3.3、基于
Redis
Bloom实现布隆过滤器
Hey 锡瑞
·
2024-09-13 01:30
Redis
缓存
缓存预热/雪崩/穿透/击穿
1.缓存预热预先将MySQL中的数据同步至
Redis
的过程2.缓存雪崩
Redis
主机出现故障,或有大量的key同时过期大面积失效导致
Redis
不可用
Redis
中key设置为永不过期,或者过期时间错开
Redis
当归. z Z
·
2024-09-13 00:29
Redis
缓存
2024Mysql And
Redis
基础与进阶操作系列(4)作者——LJS[含MySQL FOREIGN KEY、CHECK 、DEFAULT 约束举例说明等详解步骤及常见报错问题所对应的解决方法]
接上集1.FOREIGNKEY约束1.1作用限定某个表的某个字段的引用完整性。例如:员工表的员工所在部门的选择,必须在部门表能找到对应的部分。1.2关键字FOREIGNKEY1.3主表和从表/父表和子表主表(父表):被引用的表,被参考的表从表(子表):引用别人的表,参考别人的表例如:员工表的员工所在部门这个字段的值要参考部门表:部门表是主表,员工表是从表。例如:学生表、课程表、选课表:选课表的学生
肾透侧视攻城狮
·
2024-09-13 00:28
MYSQL
REDIS
Advance
operation
redis
mysql
数据库
linux
sql
bash
database
Springboot2 thymeleaf 静态资源加版本号控制缓存更新
最近写了一个前
后端
不分离的项目了,用的Springboot2thymeleaf用的js原生,没有用到webpack,所以不能在每次js变更以后打包自动给静态文件加上hash后缀关于静态资源缓存不更新的问题
VIAE
·
2024-09-12 22:46
ECharts地图-自定义26(
大数据
量散点图、地图飞线效果)
代码视频讲解:ECharts地图-自定义26_哔哩哔哩_bilibiliECharts地图-自定义26
图表制作解说
·
2024-09-12 20:03
echarts地图
echarts地图
大数据量散点图
涟漪散点图
飞线图
统计分析
数据可视化
大屏可视化
Python爬虫入门实战:抓取CSDN博客文章
一、前言在
大数据
时代,网络上充斥着海量的信息,而爬虫技术就是解锁这些信息宝库的钥匙。Python,以其简洁易读的语法和强大的库支持,成为编写爬虫的首选语言。
A Bug's Code Journey
·
2024-09-12 20:03
爬虫
python
【Azure
Redis
缓存】
Redis
的指标显示CPU为70%,而Service Load却达到了100%。这两个指标意义的解释及如何缓解呢?
问题描述为什么
Redis
的指标显示CPU为70%,而ServiceLoad却达到了100%,如何来解释这两个指标,以及如何来缓解这样的情况呢?
云中路灯
·
2024-09-12 20:37
Redis
事务揭秘:如何确保数据一致性
Redis
事务揭秘:如何确保数据一致性一.认识
Redis
事务二.事务相关的命令三.watch的实现原理Hello,大家好,这个专栏给大家带来的是
Redis
系列!
加勒比海涛
·
2024-09-12 20:00
Redis
入门实践
redis
数据库
缓存
Redis
的内存淘汰算法与原理详解
引言
Redis
是一款基于内存的高性能键值存储数据库,能够在多种场景下提供高效的数据存储与查询。然而,作为内存数据库,
Redis
的一个关键问题是内存的限制。
CopyLower
·
2024-09-12 20:29
Java
学习
Redis
redis
算法
数据库
分布式中间件-几个常用的消息中间件
文章目录常见消息中间件1.RabbitMQ2.ApacheKafka3.
Redis
Pub/Sub4.ActiveMQ5.AmazonSimpleNotificationService(SNS)和SimpleQueueService
问道飞鱼
·
2024-09-12 19:24
分布式技术
分布式
中间件
阿里SMS短信接口使用
用户注册—使用阿里短信接口和
Redis
文章目录用户注册—使用阿里短信接口和
Redis
步骤1.导入依赖2.
redis
属性配置文件3.spring集成
redis
配置文件4.短信接口属性配置文件5.短信接口核心配置类
陌殇殇
·
2024-09-12 19:24
常用技术
阿里云
【面试系列】Spark 高频面试题解答
⭐️
大数据
平台建设指南:全面讲解从数据采集到数据可视化的整个过程,掌握构建现代化数据平台的核心技术和方法。⭐️《遇见Python:初识、了解与热恋》:涵盖了Pytho
野老杂谈
·
2024-09-12 18:52
全网最全IT公司面试宝典
面试
spark
职场和发展
大数据
Peewee的基本使用
背景:刚接触
大数据
工作,要核对大量的接口返回数据的准确性验证工作,由于数据字典在编写sql的时候查看很不方便,而且对现有数据接口不是很清楚且表、字段数据量多且短时间内无法烂熟于心,给予此背景,简单的整理了一下
不曾驻足
·
2024-09-12 18:20
工具指北
数据库
database
微信公众平台扫码登录与后台处理详解
本文将介绍如何实现一个微信公众平台的扫码登录系统,并结合
Redis
和MySQL来处理登录状态与用户信息。
吃面不喝汤66
·
2024-09-12 18:50
后端开发
微信公众平台
vue进阶——整合富文本编辑器wangEditor
wangEditor1.React2.Vue23.Vue34.CDN三、基本使用1.vue22.vue3四、文件上传问题1、前端重点在于editorConfig中fileName及server的配置2、
后端
重点在于返回类型及文件大小配置五
秋书一叶
·
2024-09-12 16:39
Vue
vue.js
javascript
前端
wangEditor
富文本
Redis
多线程模型详解
引言
Redis
作为一款高性能的内存数据库,以其简单的设计和单线程模型广受欢迎。然而,随着用户需求和数据规模的增长,单线程的架构逐渐成为
Redis
性能的瓶颈。
CopyLower
·
2024-09-12 16:08
Java
学习
Redis
redis
数据库
缓存
收藏!打造高质量技术文章的 8 个技巧
今天给大家分享打造高质量技术文章的8个技巧,由零售技术
后端
开发工程师孟冬同学所总结。帮助大家提升文章的质量,激发大家的写作热情,共同推动技术交流与知识传播的进程。
京东零售技术
·
2024-09-12 15:03
写作
2022-04-17
NatBiotech|组织中单细胞转录组的空间图谱原创图灵基因图灵基因2022-04-1707:03收录于话题#前沿生物
大数据
分析单细胞RNA测序(scRNA-seq)已经彻底改变了单细胞水平上的基因表达研究
图灵基因
·
2024-09-12 15:12
在 Vue 2 中使用 Axios 发起 POST 和 GET 请求
在Vue2应用中,Axios可以帮助我们轻松地与
后端
API进行通信。本文将介绍如何在Vue2项目中引入Axios,并使用它来发起POST和GET请求。
Jarvis Downey
·
2024-09-12 15:30
JavaScript
vue
vue.js
前端
javascript
Gateway Timeout504: 网关超时的完美解决方法
这个状态码表示前端服务器(如负载均衡器或代理服务器)作为网关工作时,在尝试访问
后端
服务器处理请求时未能及时得到响应。本文将探讨导致504错误的原因以及如何有效地诊断和解决这类问题。
潘多编程
·
2024-09-12 14:27
gateway
机器学习和深度学习的区别
深度学习在21世纪初开始兴起,特别是随着
大数据
的普及和计算能力的显著提升
不会代码的小林
·
2024-09-12 14:22
机器学习
基于java+ssm+vue毕业设计源码合集(1-100)源码+文档+调试+讲解
以下是详细的技術列表:1.
后端
技术:-Spring:一个开源的Java平台,提供了用于构建企业级应用程序的全面解决方案。
小程序设计
·
2024-09-12 13:19
java
java
课程设计
vue.js
带你直击小程序毕设答辩现场(三)
问题七答辩老师:你在
后端
使用了MyBatis框架,那可以说说除了正常的增删改查注解,还有什么是你常用的注解?同学可回答:1、@ResultMap注解引用已经定义好的结果映射。
计算机毕设定制辅导-无忧学长
·
2024-09-12 13:48
小程序
课程设计
大数据
行业发展进步的原动力是什么?
大数据
时代,数据源是
大数据
行业发展进步的原动力,是行业内获得竞争力的核心资本。数据源的保有量叠加开发应用能力,将奠定
大数据
公司的市场地位。
丨程序之道丨
·
2024-09-12 13:04
一些机器学习不错的书籍
最近,在学习一些机器学习的相关知识,在Github上居然找到了一个可以下载一些不错的介绍机器学习和
大数据
挖掘和分析的书籍。
jimmyleeee
·
2024-09-12 13:46
机器学习
人工智能
flink增量检查点降低状态依赖实现的详细步骤
使用外部状态存储服务,减少Flink状态
后端
的负担。拆分状态和将状态外部化到其他服务可以帮助减少作业的状态依赖,从而降低恢复时间和复杂度。以下是详
goTsHgo
·
2024-09-12 13:15
Flink
大数据
分布式
flink
大数据
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他