高并发大数据量第18页

如何实现支持数亿用户的长连消息系统 | Golang高并发案例

360消息系统介绍360消息系统更确切的说是长连接push系统，目前服务于360内部多个产品，开发平台数千款app，也支持部分聊天业务场景，单通道多app复用，支持上行数据，提供接入方不同粒度的上行数据和用户状态回调服务。目前整个系统按不同业务分成9个功能完整的集群，部署在多个idc上（每个集群覆盖不同的idc），实时在线数亿量级。通常情况下，pc，手机，甚至是智能硬件上的360产品的push消息

蚯蚓也自由·2024-01-21 12:41

Redis缓存问题解决方案

Redis缓存问题解决方案为什么使用Redis缓存：1.在高并发的情况下，大量查询进入数据库，会大量占用数据库的连接（默认数据库连接数151）,数据库压力过大就会出现connectionrefuse(数据库连接拒绝

HaoLong.Zhang·2024-01-21 11:49

使用 Nginx的Lua 扩展功能

其流行度越来越高，应用也越来越广泛，常见的应用有：网页服务器、反向代理服务器以及电子邮件（IMAP/POP3）代理服务器，高并发大流量站点常用来做接

不负韶光·2024-01-21 10:15

面试官再问高并发，求你把这篇发给他！

高并发，几乎是每个程序员都想拥有的经验。

JavaP8工程师·2024-01-21 09:17

Java实现百万级数据从Excel导入到数据库

作者简介：大家好，我是小徐☁️博客首页：CSDN主页小徐很努力每日一句：好学而不勤非真好学者前言在一个后台管理功能中，Exce导入数据是不可缺少的，但是当处理大数据量的Excel文件导入时候就可能带来一些列的问题

小徐很努力·2024-01-21 09:06

Apache和Nginx的优缺点及各自使用的场景

缺点：高并发

小白的成长路程·2024-01-21 06:32

django邮件通知功能-

给用户信息表添加2个字段第一个字段为：是否开通邮件通知的布尔值第二个字段为:用户接收通知的邮箱账号2：发送通知时携带服务器中的时间，因为考虑到139服务器的接收时间可能会不一致3：django自带邮件插件高并发

LuiChun·2024-01-21 06:05

精通innodb引擎_Innodb 存储引擎的那些“锁事儿”【MySQL 篇】

前言MySQL的各种锁为高效并发处理做了各种优化，防止了高并发下产生脏数据和数据不一致的问题，MySQL支持不同的锁粒度，根据锁范围的不同分为表锁、页锁、行数，行锁又分为记录锁、间隙锁、临键锁，根据读写功能的不同又分为共享锁和排他锁等等

weixin_39831104·2024-01-21 06:18

Netty-Netty源码分析

Netty线程模型图Netty线程模型源码剖析图Netty高并发高性能架构设计精髓主从Reactor线程模型NIO多路复用非阻塞无锁串行化设计思想支持高性能序列化协议零拷贝(直接内存的使用)ByteBuf

长情知热爱·2024-01-21 04:19

竞赛保研机器学习股票大数据量化分析与预测系统 - python 竞赛保研

文章目录0前言1课题背景2实现效果UI界面设计web预测界面RSRS选股界面3软件架构4工具介绍Flask框架MySQL数据库LSTM5最后0前言优质竞赛项目系列，今天要分享的是机器学习股票大数据量化分析与预测系统该项目较为新颖

iuerfee·2024-01-21 04:44

OWASP漏洞原理＜最基础的数据库第二课＞

性能优化：MySQL具有高效的性能，可以处理大规模的数据和高并发访问。它采用了多种优化

人生的方向随自己而走·2024-01-21 03:56

从0到1搭建企业分布式系统-13-elasticsearch安装

开头elasticsearch是一个重要的全文检索框架，对于大数据量的表如日志，或者需要性能较好的业务要求，使用es是不二之选搭建流程1.https://www.elastic.co/cn/downloads

Coding626·2024-01-21 02:47

java多线程只读访问map_Java多线程相关知识点汇总

1.ThreadLocal2.如何保证高并发场景下的线程安全？

徐慕汐·2024-01-21 00:06

Kubernetes API 和流量控制：管理请求数量和排队进程

高并发搞崩KubernetesAPI一个非常普通的早晨，我们开始了对KubernetesAPI的漫长研究，并确定了对它的请求的优先级。

yule.yang·2024-01-20 19:36

【MySQL】存储引擎

可以确保事务的完整提交和回滚在有更新和删除操作时，优先选择InnoDBInnoDB是为处理巨大数据量的最大性能设计的。

Rockict_z·2024-01-20 18:33

Java多线程&并发篇----第二十一篇

系列文章目录文章目录系列文章目录前言一、Java中的阻塞队列二、ArrayBlockingQueue（公平、非公平）三、LinkedBlockingQueue（两个独立锁提高并发）四、PriorityBlockingQueue

数据大魔王·2024-01-20 13:46

数据库常见的锁

优点：粒度较小，可以提高并发性能。其他事务可以并发地读取和修改其他记录。缺点：可能引发死锁问题，特别是在复杂的事务操作中。对大量记录进行锁定时，会增加锁竞争，影响系统性能。

mhz2977170·2024-01-20 11:52

Go语言高并发系列一：基础理论

Go语言的一个核心优势就是它的并发能力。但是在实际工作中，有很多小伙伴还不能纯熟的掌握Go语言的并发和goroutine的控制，导致有时候会出现一些性能问题和严重的bug。所以我准备写四篇文章来系统的整理一下Go语言并发相关的知识，自己复习的同时，也可以给公司的其他小伙伴巩固一下，顺便介绍一下我封装的一些并发控制器，方便其他小伙伴使用。闲话不多说了，下面进入正题。我打算写总共四篇文章来梳理Go语言

阿白大概不会飞·2024-01-20 11:20

使用nginx代理ws为

它具有低内存消耗和高并发处理能力，因此被广泛用于大型网站和应用程序的部署。

[奸笑]这个不是斜眼笑[奸笑]·2024-01-20 11:11

移动端 h5-table react版本支持虚拟列表

github.com/duKD/react-h5-table有帮助的话给个小星星有两种表格组件常规的：支持左侧固定滑动每行点击回调支持指定列排序支持滚动加载更多效果和之前写的vue3版本类似vue3h5表格大数据量时使用虚拟列表

cheerfulCoder·2024-01-20 10:29

RabbitMQ的基本使用&入门

广泛用于构建分布式系统、微服务架构以及异构系统之间的通信，本期文章将为大家带来RabbitMQ的基本使用及入门一.RabbitMQ基本介绍RabbitMQ可以实现可靠的异步通信，解耦系统中的组件，以及处理高并发和大规模的消息流

ChatYU.·2024-01-20 08:28

python中scrapy可以爬取多少数据_使用Scrapy爬取大规模数据

于是想做一次大数据量的爬取。选择的数据源是简书用户，使用的是Scrapy框架。同时也想对简书的用户做一个数据分析。

weixin_39567943·2024-01-20 08:23

Linux服务器性能调优之I/O调优详解

1.进程可以打开的文件数（高并发时常用）ulimit-n#查看一个进程可以打开的文件数修改进程可以打开的最大文件数临时修改：ulimit-n[进程数]永久修改：修改限制用户资源配置文件vim/etc/security

linux大本营·2024-01-20 05:02

高并发内存池

高并发内存池1.项目介绍这个项目是基于google开源的tcmalloc，在经过简化后，拿出核心框架的内容所实现的一个高并发内存池。2.内存池2.1什么是池化技术？

CHAK&MING·2024-01-20 02:49

kafka学习（4）-- Kafka如何保证百万级写入速度以及保证不丢失不重复消费

一、如何保证百万级写入速度Kafka是高吞吐低延迟的高并发、高性能的消息中间件，在大数据领域有极为广泛的运用。配置良好的Kafka集群甚至可以做到每秒几十万、上百万的超高并发写入。

技术闲聊DD·2024-01-19 23:07

极客时间-《左耳听风》文章笔记 + 个人思考

极客时间-《左耳听风》文章笔记+个人思考分布式架构21|分布式系统架构的冰与火分布式架构21|分布式系统架构的冰与火比较流行的高并发框架：Node.js：是一个基于ChromeV8引擎的JavaScript

CodeCooI·2024-01-19 23:50

Nginx架构设计

系统架构高并发Nginx七大核心应用场景：反向代理、虚拟主机、域名解析、负载均衡、防盗链、url重定向、https高性能web服务器，负载均衡大型服务器的流量网关，应用网关，日志服务器，文件存储服务器模块化扩展

浪里摸鱼·2024-01-19 22:37

MongoDB数据库的使用

MongoDB的优势1.易扩展，这也是非关系数据库共有的优势2.大数据量，高性能，非常高的读写性能3.灵活的数据模型，无需事先为要存储的数据建立字段MongoDB的安装1.pipinstallmongodb2

Little_Raccoon·2024-01-19 22:08

互联网系统架构演变

目录1.程序三高1）高并发2）高性能3）高可用2.传统架构2.1提高服务器性能（单机）2.2增加服务器数量（DNS负载均衡）2.3负载均衡负载均衡的功能总结负载均衡种类负载均衡——主流的软件解决方案Apache

浮生带你学Java·2024-01-19 21:46

高并发缓存问题分析以及分布式锁的实现

一,场景概述:在高并发的环境下,比如淘宝,京东不定时的促销活动,大量的用户访问会导致数据库的性能下降,进而有可能数据库宕机从而不能产生正常的服务,一般一个系统最大的性能瓶颈，就是数据库的io操作,如果发生大量的

豆豆的java之旅·2024-01-19 20:04

母亲的急性子

几天前她就开始口腔溃疡，除了血糖高并发症的因素，最主要的原因应该是急火攻心吧？昨天，母亲就不惜放弃自己的爱好—-打麻将，早早地来到城里我的家，开始整理出门需要带的衣物和药品。

无忘我·2024-01-19 19:02

高并发编程06 ~ AQS：AbstractQueuedSychronizer

前面的章节中，我们已经解除到了JUC，JUC可以大大的提高线程的安全性，而JUC的核心则是AQS。AQS底层原理原理图AQS数据结构图底层设计使用Node实现FIFO队列，是一个可以用于构建锁和其他的同步组件的一个独立的基础框架；使用一个int类型的state表示状态和一个可重入锁ReentrantLock，在这个ReentrantLock中state表示获取锁的线程数：state为0，则没有现成

帅可儿妞·2024-01-19 19:29

【微服务】服务熔断降级 Sentinel

目录高并发带来的问题结论:服务器雪崩效应常见容错方案隔离机制:超时机制限流机制熔断机制:降级机制常见的容错组件Sentinel入门什么是Sentinel订单微服务集成Sentinel安装Sentinel

吴金金5·2024-01-19 18:19

PHP之秒杀设计

前言源自慕课网皮奇秒杀设计课程所做的笔记课程目标掌握秒杀系统的核心实现系统高可用的方法论学习高并发场景的通用解决思路学习原理知识介绍减而治之（CDN原理/nginx限流/异步队形）分而治之（nginx负载均衡

东东锵·2024-01-19 18:35

Redis基础

2.为什么是NoSQL随着互联网网站的兴起，传统的关系数据库在应付动态网站，特别是超大规模和高并发的纯动态网站已经显得力不从心，暴露了很多难以克服的问题。

夨落旳尐孩649·2024-01-19 17:59

python选择哪个版本安装-初学Python版本选择

64位Python能使用3GB以上的内存，可用于超大数据量的

weixin_37988176·2024-01-19 17:22

Spring5.0 — WebClient（响应式web客户端）

异步执行不阻塞代码，少量的线程数处理高并发的Http请求。3.集成SpringWebFlux框架，可与其他Spring组件无缝协作。

JunSouth·2024-01-19 15:58

Sql server bulk insert语句：将数据从文件导入数据库中

Sqlserver的bulkinsert语句可以高效的导入大数据量的平面文件（txt，csv文件）到数据库的一张表中--创建虚拟表createtable#tmptable(Datevarchar(10)

Smilecoc·2024-01-19 13:48

【Java基础】BIO/NIO/AIO的详细介绍与比较区分

基本概念1.1BIOBIO全称BlockingI/O，它是JDK1.4之前的传统IO模型，是一种同步阻塞的IO，线程发起IO后，一直阻塞，直到缓冲区数据就绪后，在进入下一步操作BIO存在的问题：无法应对高并发的场景连接建立后

DEMIY_·2024-01-19 13:26

redis为什么快

虽然单线程模型在处理高并发请求时可能存在瓶颈，但由于Redis大部分操作都是内存操作，因此单线程能够充分发挥CPU的性能。非阻塞I/O：Redis使用非阻塞I/

折花刀·2024-01-19 11:36

浅聊雷池社区版（WAF）的tengine

旨在满足高并发、高可用性和高扩展性的需求Tengine的主要特点高性能：继承了Nginx的高性能特质，Tengine在处

云宝的黑客对抗日记·2024-01-19 10:06

云轴科技ZStack 助力广西某地级市建设市级警务云视频系统

某市属于广西壮族自治区辖地级市，省域副中心城市，选择云轴科技ZStack超融合解决方案支撑警务云视频监控联网管理系统（警务云视频系统），实现了该市对各辖区视频资源统一管理；同时也满足了该市警务云视频系统对云计算、存储资源的高并发弹性需求

ZStack云计算·2024-01-19 10:29

分布式概念

分布式系统是指组件分布在网络上，组件之间通过传递消息进行通信和动作协调的系统，她的核心理念是让多台服务器协同工作，完成单台服务器无法处理的任务，尤其是高并发和大数据的任务。

莫言选·2024-01-19 09:18

Redis应用场景举例

面对越来越多的高并发场景，限流显示的尤为重要。限流当然，限流有许多种实现的方式，Redis具有很强大的功能，我用Redis实践了三种的实现方式，可以较为简单的实现其方式。

anssummer·2024-01-19 09:38

Redis-List专题

1.高并发淘宝聚划算商品列表###一、需求分析:淘宝聚划算功能https://ju.taobao.com/这张页面的特点：1.数据量少，才13页2.高并发，请求量大。

迷路人~·2024-01-19 09:53

对富文本中的阿里云图片进行重定向

解决方法：1.适用于非高并发场景：我们的富文本的img标签保存的是完整的图片地址，在上传