高并发大数据量

工作两年多的渣渣社招辛酸心路历程【内含阿里、字节、美团等】

前言楼主本科渣211，硕士华科，专业均SE,校招的时候没啥实习经历，进大厂工作两年多，做后端开发的工作，没有涉及到高并发的case，也没有大流量的项目，也没有必须引入某些中间件或者nosql才能解决业务问题的场景
AI乔治·2024-02-04 23:53

服务端 TCP 连接的 TIME_WAIT 过多问题的分析与解决

问题描述模拟高并发的场景，会出现批量的TIME_WAIT的TCP连接：短时间后，所有的TIME_WAIT全都消失，被回收，端口包括服务，均正常。
purple.taro·2024-02-04 23:38

[Java并发]-----第2章 并发编程的其他基础知识

时代的到来打破了单核CPU对多线程效能的限制.对多个CPU意味着每个线程可以使用自己的CPU运行,这减少了线程上下文切换的开销,但随着对应用系统性能和吞吐量要求的提高,出现了处理海量数据和请求的要求,这些都对高并发编程有着迫切的
Benjamin_Lee·2024-02-04 23:07

Redis学习笔记（四）-- 高并发分布式锁

Redis学习笔记（四）--高并发分布式锁高并发分布式锁在我们平时写代码过程中，会遇到很多高并发的场景，比如双十一的秒杀场景，本文就以此举例分析SpringBoot整合Redis锁代码1、引入依赖org.springframework.bootspring-boot-starter-weborg.springframework.bootspring-boot-starter-data-rediso
「已注销」·2024-02-04 16:47

alibabacloud学习笔记05（小滴课堂）

高并发下的微服务存在的问题高并发下的微服务容错方案介绍什么是分布式系统的流量防卫兵Sentinel微服务引入Sentinel和控制台搭建每个服务都加上这个依赖。
抹茶味的西瓜汁·2024-02-04 16:07

高并发后端设计-限流

系统在设计之初就会有一个预估容量，长时间超过系统能承受的TPS/QPS阈值，系统可能会被压垮，最终导致整个服务不够用。为了避免这种情况，我们就需要对接口请求进行限流。限流的目的是通过对并发访问请求进行限速或者一个时间窗口内的的请求数量进行限速来保护系统，一旦达到限制速率则可以拒绝服务、排队或等待。常见的限流模式有控制并发和控制速率，一个是限制并发的数量，一个是限制并发访问的速率，另外还可以限制单位
java高并发·2024-02-04 14:24

kafka自定义分区策略详解

Kafka作为一种高性能、可扩展的消息队列系统，在处理海量数据和高并发场景下表现出色。而针对Kafka消息的分区选择，则可以通过自定义分区器来实现。
啄sir.·2024-02-04 11:01

Python从入门到精通学习的十个阶段

文章目录前言一、Python开发基础二、Python高级编程和数据库开发三、前端开发四、WEB框架开发五、爬虫开发六、全栈项目实战七、数据分析八、人工智能九、自动化运维&开发十、高并发语言GO开发关于Python
python零基础入门小白·2024-02-04 11:27

Kafka 超高并发网络 架构演进过程

只有了解了这些，我们才能深刻掌握Kafka服务端设计精髓所在，更加深刻理解一个高并发、高性能服务端架构该如何设计。认真读完
程序员xysam·2024-02-04 11:55

分布式锁有哪些应用场景和实现

文章目录如何理解分布式锁分布式锁的常用实现基于关系型数据库应用Redis缓存基于ZooKeeper实现总结电商网站都会遇到秒杀、特价之类的活动，大促活动有一个共同特点就是访问量激增，在高并发下会出现成千上万人抢购一个商品的场景
丁川·2024-02-04 11:46

应用app分发的服务器如何增加高并发?试试这四个办法

服务器的高并发能力怎样达到？服务器高并发能力体现着服务器在单位时间内的很强数据处理能力，一般来说，如果企业的互联网业务需要面对大量的同时在线请求，那么就需要高并发能力来支持。
我的皮皮虾·2024-02-04 10:17

2019-04-12课堂笔记

b.能处理高并发访问3.集群特点a.数据量大、用户多b.7*24小时持续服务c.高并发d.用户分布广泛，网络情况复杂二、基础优化1.最小化原则：（1）安装软件包最小化（2）权限最小化（3）目录文件权限最小化
1340010b7af0·2024-02-04 09:44

haproxy 负载均衡

1.haproxy简介HAProxy是法国开发者威利塔罗(WillyTarreau)在2000年使用C语言开发的一个开源软件，是一款具备高并发(一万以上)、高性能的TCP和HTTP负载均衡器，支持基于cookie
wssswsss·2024-02-04 08:58

DevOps落地笔记-12|API管理：微服务时代的必备工具

前后端分离使得前端和后端充分解耦，在高并发情况下，后端可以按需扩展，前端和后端通过API接口定义的契约进行通信。API接口也会随着业务需求的变化不断改变，但API接口改变但调用方没有改变时就使得软件
机智阳·2024-02-04 07:04

Kafka系列（一）【消息队列、Kafka的基本概念、Kafka的工作机制、Kafka可满足的需求、Kafka的特性、Kafka的应用场景】

入门、进阶、商业实战》一、消息队列1.消息队列的来源在高并发的应用场景中，由于来不及同步处理请
_蓝天IT_·2024-02-04 06:57

MySQL调优

参考博客MySQL调优篇：单机数据库如何在高并发场景下健步如飞？
whiteBrocade·2024-02-04 06:48

tar包部署nginx

2.主要用途在连接高并发的情况下，Nginx是Apache服务不错的替代品。Nginx在美国是做虚拟主机生产商经常选择的软件平台之一。它能支持高达50,000个并发连接数的响应，Nginx为
曹博Blog·2024-02-04 05:25

【lesson9】高并发内存池Page Cache层释放内存的实现

文章目录PageCache层释放内存的流程PageCache层释放内存的实现PageCache层释放内存的流程如果centralcache释放回一个span，则依次寻找span的前后pageid的没有在使用的空闲span，看是否可以合并，如果合并继续向前寻找。这样就可以将切小的内存合并收缩成大的span，减少内存碎片。PageCache层释放内存的实现voidPageCache::ReleaseS
(unstoppable)·2024-02-04 05:22

【lesson7】高并发内存池Thread Cache层释放内存的实现

文章目录ThreadCache层释放内存的流程ThreadCache层释放内存的实现ThreadCache层释放内存的流程当释放内存小于256k时将内存释放回threadcache，计算size映射自由链表桶位置i，将对象Push到_freeLists[i]。当链表的长度过长，则回收一部分内存对象到centralcache。ThreadCache层释放内存的实现之前我们只实现了一部分现在就全部实现
(unstoppable)·2024-02-04 05:51

【lesson8】高并发内存池Central Cache层释放内存的实现

文章目录CentralCache层释放内存的流程CentralCache层释放内存的实现CentralCache层释放内存的流程当thread_cache过长或者线程销毁，则会将内存释放回centralcache中的，释放回来时–use_count。当use_count减到0时则表示所有对象都回到了span，则将span释放回pagecache，pagecache中会对前后相邻的空闲页进行合并。但
(unstoppable)·2024-02-04 05:50

【C/C++】实现Reactor高并发服务器 一

一简单epoll服务端程序一步一步完善tcpepoll.cpp#include#include#include#include#include#include#include#include#include#include#include//TCP_NODELAY//设置非阻塞IOvoidsetnonblocking(intfd){fcntl(fd,F_SETFL,fcntl(fd,F_GETFL
橙留香写代码·2024-02-04 04:44

【C/C++】实现Reactor高并发服务器 二 优化一下服务器代码

tcpepoll.cpp#include#include#include#include#include#include#include#include#include#include#include//TCP_NODELAY//设置非阻塞IOvoidsetnonblocking(intfd){fcntl(fd,F_SETFL,fcntl(fd,F_GETFL)|O_NONBLOCK);}intm
橙留香写代码·2024-02-04 04:44

【C/C++】实现Reactor高并发服务器 三 增加 InetAddress 类

-rw-rw-r--1kingking1296Feb111:56client.cpp-rwxrwxr-x1kingking24344Feb111:56client-rw-rw-r--1kingking4437Feb113:32tcpepoll.cpp-rw-rw-r--1kingking204Feb113:33makefile-rw-rw-r--1kingking460Feb113:34InetA
橙留香写代码·2024-02-04 04:44

01-什么是tornado

Tornado的诞生和演进Tornado的功能和特性非阻塞性Web服务器异步编程Web框架功能tornado安装及简单应用在Python的众多网络框架中，Tornado唯一的一员，以其非阻塞性的网络I/O和高并发的能力而著名
safina ~·2024-02-04 03:31

java高并发系列 - 第4天:JMM相关的一些概念

JMM(java内存模型)，由于并发程序要比串行程序复杂很多，其中一个重要原因是并发程序中数据访问一致性和安全性将会受到严重挑战。如何保证一个线程可以看到正确的数据呢？这个问题看起来很白痴。对于串行程序来说，根本就是小菜一碟，如果你读取一个变量，这个变量的值是1，那么你读取到的一定是1，就是这么简单的问题在并行程序中居然变得复杂起来。事实上，如果不加控制地任由线程胡乱并行，即使原本是1的数值，你也
智能编程设计工作室·2024-02-04 02:55

TiDB架构设计和实践：高性能分布式数据库解决方案

正文：###1.引言随着互联网规模的不断扩大和数据量的快速增长，传统的关系型数据库在面对大规模数据处理和高并发请求时面临着挑战。为了解决这些问题，新一代的分布式数据库应运而生。
007php007·2024-02-04 00:57

从MySQL到TiDB：兼容性全解析

MySQL在高并发和大数据量场景下，单个实例的扩展性有限。
超越不平凡·2024-02-04 00:25

详解Nginx基础知识、工作原理、核心应用、运维管理、集成扩展-阿里P8架构师从应用、运维及与K8S和微服务3个维度

Nginx作为一款优秀的开源Web服务器软件，具有性能稳定、高并发能力、资源耗用低及高性能的负载均衡等特点，被众多互联网公司广泛应用于实际生产项目中。因此,它也成为每个互联网技术人员的必备技术。
架构师啦啦啦啦·2024-02-03 23:08

C++数据库连接池

但是如果在高并发情况下，有些需要频繁处理的操作就会消耗很多的资源和时间，比如：建立通信连接的TCP三次握手数据库服务器的连接认证数据库服务器关闭连接时的资源回收断开通信连接的TCP四次挥手数据库连接池负责分配
cliu1_16·2024-02-03 22:32

面渣自救攻略！阿里架构师耗时3个月手码的Java面试手册

（这阵容，质量就不用我多说了吧）内容非常全面，主要是结合了互联网大厂的面试需求点，包含了：分布式架构（大型网站系统的特点+架构演化发展历程+微服务）中间件技术（缓存+消息队列+搜索引擎）大数据与高并发技术
π大星的日常·2024-02-03 19:23

服了，一个ThreadLocal被问出了花

ThreadLocal在高并发场景下会造成内存泄漏吗？为什么？如何避
程序员老猫·2024-02-03 17:05

实现接口的限流各种算法

计数器法2.滑动窗口2.1解决方案3.漏桶算法3.令牌桶算法3.1RateLimiter详解RateLimiter主要接口3.2临界问题4.总结4.1计数器VS滑动窗口4.2漏桶算法VS令牌桶算法在一个高并发系统中对流量的把控是非常重要的
ZNineSun·2024-02-03 14:43

限流算法详解

一、什么是限流限流是指在高并发、大流量请求的情况下，限制新的流量对系统的访问，从而保证系统服务的安全性。
crazyK.·2024-02-03 14:42

（十）springboot实战——springboot3下的webflux项目mysql数据库事务处理

前言WebFlux是SpringFramework5.0中引入的一种新型反应式编程模型，支持非阻塞I/O，适用于高并发、高吞吐量的应用程序。在WebFlux应用程序中使用事务需要注意以下几点。
厉害哥哥吖·2024-02-03 13:19

2019最火爆的项目平台----项目学院

4）数据透明：通过大数据量化筛选，一键筛选到适合自己的投资项目5)推广项目：自己正在从事项目包括未开盘项目，可以选择上传项目，把自已的项目连同自己的联系
happy艺汇·2024-02-03 13:59

POI读写大数据量excel，解决超过几万行而导致内存溢出的问题

1.Excel2003与Excel2007两个版本的最大行数和列数不同，2003版最大行数是65536行，最大列数是256列，2007版及以后的版本最大行数是1048576行，最大列数是16384列。excel2003是以二进制的方式存储，这种格式不易被其他软件读取使用；而excel2007采用了基于XML的ooxml开放文档标准，ooxml使用XML和ZIP技术结合进行文件存储，XML是一个基于
Swordfall·2024-02-03 12:35

无锁队列Disruptor使用笔记

一.背景Disruptor是由英国外汇公司LMAX于2010年公开的一款用于线程间数据交互的高并发组件，其原型是一个有界的环形队列，通过巧妙的设计使得该队列在多线程环境下无需加锁就能保证消息的安全可靠，
MOONICK·2024-02-03 12:23

Linux环境下安装Nginx+Pcre+OpenSSL

Nginx是一款非常优秀的Web服务器，它是由俄罗斯人IgorSysoev（伊戈尔-塞索耶夫）写的，虽然它的应用还没有老牌Web服务器Apache广泛，但相比Apache，它有着自己的一些优势，比如很好的高并发访问支持内存却占用少
tonyhzw·2024-02-03 12:10

linux系统lvs负载均衡和四种工作模式

LVS负载均衡LVS优势与不足优势不足LVS核心组件和专业术语核心组件专业术语LVS负载均衡四种工作模式NAT模式DR模式Tun隧道模式FULL-NAT模式四者的区别LVS负载均衡LVS优势与不足优势高并发连接
丨析木丨·2024-02-03 11:25

【lesson6】高并发内存池Page Cache层申请内存的实现

文章目录PageCache层的结构申请内存的流程释放内存的流程PageCache对象结构PageCache所需要的成员变量PageCache所需要的成员变量GetInstance()的实现NewSpan()的实现GetOneSpan()的实现NewSpan()的实现PageCache层实现的全部代码Common.hThreadCache.hThreadCache.cppConcurrentAllo
(unstoppable)·2024-02-03 11:41

Python2 Tornado异步协程

Tornado是一个高性能的PythonWeb框架，具有非阻塞I/O的特性，常用于构建大规模高并发的网络应用程序。
永恒dingle·2024-02-03 11:52

【项目】九万字手把手教你写高并发内存池（化简版tcmalloc）

高并发内存池前言引例介绍正式开始项目介绍内存池的作用效率问题内存碎片tcmalloc和malloc的关系定长内存池注意事项编写代码两个成员变量接口New——申请T类型大小的空间接口Delete——回收还回来的小空间
先搞面包再谈爱·2024-02-03 10:49

Springcloud、分布式和微服务经典面试题

作用不同：分布式：不同模块部署在不同服务器上，分布式主要解决的是网站高并发带来问题。微服务：各服务可独立应用，组合服务也可
零·2024-02-03 08:30

秒杀活动需要考虑的场景

设计秒杀活动时，需要考虑以下一些常见的场景以确保系统的稳定性和可靠性：高并发场景：模拟大量用户同时参与秒杀活动，确保系统能够处理并发请求，并正常地响应和处理每个请求。
费曼乐园·2024-02-03 08:17

聊聊高并发（一）概念

并发/线程的一些概念，概念很重要，没有理论指导的话会导致理解不够全面多线程问题的本质--有序性，可见性，原子性synchronize的底层实现volatile的底层实现无锁算法的底层实现--CAS原子变量的实现final关键字的新含义深入理解Java内存模型指令重排序和内存屏障顺序一致性和Happens-before规则一些基本的硬件知识一些处理同步问题的技术
wenming6688·2024-02-03 07:31

你知道网关 架构是如何演进？

其中网关系统是天翼账号对外能力开放体系的重要组成：业务侧它以集中入口、集中计费、集中鉴权管控为目标，技术侧它支持隔离性、可配置、易开发、动态路由、可降级、高并发等场景。
Java烟雨·2024-02-03 07:03

学习总结-网关 架构演进

其中网关系统是天翼账号对外能力开放体系的重要组成：业务侧它以集中入口、集中计费、集中鉴权管控为目标，技术侧它支持隔离性、可配置、易开发、动态路由、可降级、高并发等场景。
Linux服务器开发·2024-02-03 06:41

mybatis 高并发查询性能问题

场景：使用Mybatis（3.5.10）@SelectProvider注解执行动态sql在高并发查询时QPS很低问题复现mybatis配置（getOfflineConfigSqlTemplate该方法返回的是动态
IT_ZhiCunGaoYuan·2024-02-03 06:11

「天翼账号」网关系统 架构演进历程

其中网关系统是天翼账号对外能力开放体系的重要组成：业务侧它以集中入口、集中计费、集中鉴权管控为目标，技术侧它支持隔离性、可配置、易开发、动态路由、可降级、高并发等场景。
程序员xysam·2024-02-03 06:36

ConcurrentLinkedQueue，常用方法及应用场景总结

它不仅提供了高效的并发操作，还基于无锁算法，适用于许多高并发的场景。ConcurrentLinkedQueue1.简
Chowley·2024-02-03 04:43
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他