大型网站技术探索第10页

Hash表的资料

与一致性哈希（ConsistentHashing）介绍哈希表的原理与实现（二）哈希表（HashTable）唠唠数据结构——哈希表哈希表原理及应用一致性Hash分布式技术1：一致性哈希原理及C++实现分布式技术探索

小南家的青蛙·2023-06-11 14:32

3.Nginx+Tomcat负载均衡和动静分离群集

Tomcat负载均衡和动静分离群集Nginx是-款非常优秀的HTTP服务器软件支持高达50000个并发连接数的响应拥有强大的静态资源处理能力运行稳定内存、CPU等系统资源消耗非常低Nginx作用目前很多大型网站都应用

夜海赤竹·2023-06-11 12:27

Haproxy搭建web群集

Haproxy3、硬件一般使用比较多的是F5，也有很多人使用国内的一些产品，如梭子鱼、绿盟等二、Haproxy应用分析1、LVS在企业应用中抗负载能力很强，但存在不足•LVS不支持正则处理，不能实现动静分离•对于大型网站

半糖不加冰520·2023-06-11 09:58

分布式(一)-大型网站系统的特点

大型网站系统的特点高并发，大流量需要面对高并发用户，大流量访问。Google日均PV35亿，日IP访问数3亿；腾讯QQ的最大在线用户数1.4亿（2011年数据）。高可用系统7x24小时不间断服务。

qq_30024063·2023-06-10 22:03

分布式（二）-大型网站架构演化发展历程

大型网站架构演化发展历程大型网站的技术挑战主要来自于庞大的用户，高并发的访问和海量的数据，任何简单的业务一旦需要处理数以P计的数据和面对数以亿计的用户，问题就会变得很棘手。

qq_30024063·2023-06-10 22:32

百度新闻源调整：自媒体权重降低，官方媒体优势突显

现在，我们在搜索新闻源一栏中可以看到，在资讯栏目中，**大量的内容都来自官媒和大型网站。**像澎湃新闻、ZAKER这样的官方媒体号才能保留

#卢松松#·2023-06-10 17:40

个人博客网站实现微信扫码登录(新)

希望各位在技术探索的路上不迷茫。在开始正题之前，我们先聊一下实现原理，方便更好的带领大家

胖太乙·2023-06-08 22:05

Nginx+Tomcat负载均衡、动静分离

Nginx应用Nginx是一款非常优秀的HTTP服务器软件支持高达50000个并发连接数的响应拥有强大的静态资源处理能力运行稳定内存、CPU等系统资源消耗非常低目前很多大型网站都应用Nginx服务器作为后端网站程序的反向代理及负载均衡器

三色丸子^·2023-06-07 20:15

【网站架构】Nginx 4层、7层代理配置，正向代理、反向代理详解

在往期《大型网站安全性》介绍过，出于网络安全的考虑，一般大型网站都需要做网络区域隔离，以防止攻击者直接操控服务器。网站系统的应用及数据库都会放在这个网络安全区域里。这样的话就会产生代理的问题。

停止重构·2023-06-07 09:34

大数据存储与处理技术探索：Hadoop HDFS与Amazon S3的无尽可能性【上进小菜猪大数据】

上进小菜猪，沈工大软件工程专业，爱好敲代码，持续输出干货。大数据时代带来了数据规模的爆炸性增长，对于高效存储和处理海量数据的需求也日益迫切。本文将探索两种重要的大数据存储与处理技术：HadoopHDFS和AmazonS3。我们将深入了解它们的特点、架构以及如何使用它们来构建可扩展的大数据解决方案。本文还将提供代码实例来说明如何使用这些技术来处理大规模数据集。在当今数字化时代，大数据成为了各个领域的

上进小菜猪·2023-06-07 05:59

技术分享| anyRTC回声消除算法进化

本文将从基础概念、经典算法、主要挑战，以及人工智能回声消除技术探索等方面，分享anyRTC在AEC技术方面的实践及效果。

anyRTC·2023-04-21 17:16

高并发系统设计：缓存、降级、限流、(熔断)

大型网站一般主要是“读”，缓

RockyBlog·2023-04-21 08:40

精彩回顾｜SOFA 五周年，Live Long and Prosper！

在“LiveLongandProsper”的活动主题贯彻下，活动现场的开源技术探索氛围变得尤其浓厚。

SOFAStack·2023-04-19 12:13

15《Nginx 入门教程》Nginx中的缓存与压缩配置

因此，用好Nginx的缓存功能对于大型网站而言至关重要。

木子教程·2023-04-19 07:40

web应用框架——初识Flask+入门示例

第三方库的选择面广，开发时可以结合自己最喜欢用的轮子，也能结合最流行最强大的Python库2.入门简单，即便没有多少web开发经验，也能很快做出网站3.非常适用于小型网站4.非常适用于开发web服务的API5.开发大型网站无压力

思君_4cd3·2023-04-18 17:45

张程伟：从开源项目到企业级数据库，云和恩墨 MogDB & Uqbar 的技术探索与实践...

导语4月8日下午，为期两天的第十二届数据技术嘉年华（DTC2023）在北京新云南皇冠假日酒店圆满落下帷幕。大会以“开源·融合·数字化——引领数据技术发展，释放数据要素价值”为主题，汇聚产学研各界精英到场交流。作为大会的协办方和重要合作伙伴，云和恩墨·本原数据技术合伙人张程伟、金毅在主论坛发表了题为《回归数据本原，企业级数据库的技术探究》的联合演讲。本篇文章对张程伟的演讲内容进行了整理归纳，供大家学

-云和恩墨-·2023-04-18 16:36

文章推荐系统 | 六、构建离线用户画像

用户画像往往是大型网站的重要模块，基于用户画像不仅可以实现个性化推荐，还可以实现用户分群、精准推送、精准营销以及用户行为预测、商业化转化分析等

小王子特洛伊·2023-04-18 07:13

大型网站技术架构演进与性能优化

框架异步消息架构分布式数据层分布式文件系统服务发现,注册,管理分布式session问题阶段三无线化改造阶段四中台改造阶段五国际化多语言问题多时区问题数据路由问题全球数据的同步与复制问题二,挑战性能瓶颈三,组织架构的变迁四,工程师文化的形成1,构建大型网站

星月IWJ·2023-04-18 07:09

Redis——分布式锁与实现

概述目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。

许俊贤·2023-04-18 00:56

视频教程-大型网站从单一架构到微服务分布式架构实战第1季-Java

大型网站从单一架构到微服务分布式架构实战第1季张长志技术全才、擅长领域：区块链、大数据、Java等。10余年软件研发及企业培训经验，曾为多家大型企业提供企业内训如中石化，中国联通，中国移动等知名企业。

weixin_34263863·2023-04-17 22:46

大型网站技术架构核心原理与案例分析笔记

大型网站技术架构核心原理与案例分析笔记网站的演化历史：【考虑到可用性，下面每一步都可以做主备】一、小型网站：lamp(linuxapachemysqlphp),将所有东西都部署在单台机器上。

七年蝉·2023-04-17 22:43

大型网站技术架构核心原理与案例分析学习笔记（实践篇）

Wikipedia性能优化策略前端性能优化80%以上的用户请求可以通过前端服务返回CDN缓存的几条准则：内容页面不包含动态信息，以免页面内容缓存很快失效或者包含过时信息每个内容页面有唯一的REST风格的URL，以便CDN快速查找并避免重复缓存在HTML响应头写入缓存控制信息，通过应用控制内容是否缓存及缓存有效期等LVS负载均衡地分发到反向代理服务器Squid集群（缓存热门词条），Squid中没有的

年糕coder·2023-04-17 22:08

SSO

尤其，大型网站背后是成百上千的子系统，用户一次操作或交易可能涉及到几十个子系统的协作如果每次子系统都需要用户认证，不仅用户会疯掉，各子系统也会为这种重复认证的逻辑搞疯掉SSO框架CAS（Centra

BenedictJin·2023-04-16 22:59

【Redis技术探索】「底层架构原理」探索分析服务数据同步持久化机制

背景介绍✒️Redis数据恢复的介绍通常情况下redis的数据全部存储在内存中，数据库一旦故障发生重启数据会全部丢失，持久化功能在于能够有效地避免因进程退出造成的数据丢失问题，在下次重启时利用之前持久化的文件即可实现数据恢复。✒️Redis高可用的功能基础即使是在rediscluster或者redissentinel模式下主从同步数据的恢复仍然需要一段时间。✒️Redis实际场景的分析开启Redi

洛神灬殇·2023-04-16 04:54

使用PHP做个图片防盗链（全网详解）

图片防盗链在一些大型网站中，比如百度贴吧，该站点的图

奔跑的蜗牛.·2023-04-14 23:53

MongoDB 在评论中台的实践

本文主要讲述vivo评论中台在数据库设计上的技术探索和实践。一、业务背景随着公司业务发展和用户规模的增多，很多项目都在打造自己的评论功能，而评论的业务形态基本类似。

vivo互联网技术·2023-04-14 22:44

大型网站必备，彻底理解Http的缓存机制！

概述浏览器的缓存机制也就是我们说的HTTP缓存机制，其机制是根据HTTP报文的缓存标识进行的，所以在分析浏览器缓存机制之前，我们先使用图文简单介绍一下HTTP报文，HTTP报文分为两种：HTTP请求(Request)报文，报文格式为：请求行–HTTP头(通用信息头，请求头，实体头)–请求报文主体(只有POST才有报文主体)，如下图imageimageHTTP响应（Response）报文，报文格式为

码农小光·2023-04-14 19:30

对话爱化身涂政：元宇宙是「价值创造」经济

碳链价值·2023-04-14 18:49

linux 内核 fuzz,fuzz技术和漏洞挖掘

比如xss，目前很多大型网站依然存在xss漏洞。一个简单的程序下面的程序是求一个数的平方。

痛仰乐队·2023-04-14 05:24

单点登录SSO的实现原理

单点登录在大型网站里使用得非常频繁，例如像阿里巴巴这样的网站，在网站的背后是成百上千的子系统，用户一次操作或交易可能涉及到几十个子系统的协作，如果每个子系统都需要用户认证，不仅用户会疯掉，各

weixin_33923148·2023-04-14 04:03

PHP学习爱好者，请进

拥有丰富的大数据、高并发处理、大型网站架构经验。曾在新浪视频负责PHP开发，CCTV6电影网项目经理，现在某大型知名互联网公司（BAT界）负责大数据流的开发。

小怪聊职场·2023-04-13 22:20

常用缓存框架及redis应用

常用缓存框架及redis应用一.缓存简介互联网高速发展的今天,缓存技术已经成为大型网站的关键技术之一,其设计的好坏直接关系到用户体验,在考虑对服务性能表现进行提升时,缓存机制也往往是解决问题的重要起点-

chenzhihong1214·2023-04-13 14:41

Redis介绍

Redis内存数据库背景随着互联网+大数据时代的来临，传统的关系型数据库已经不能满足中大型网站日益增长的访问量和数据量。

小海怪的互联网·2023-04-13 02:51

jQuery(入门&选择器)

哪些情况下用中大型网站开发中我们都需

清晨喂·2023-04-13 01:50

盘点 | 空间转录组下游分析工具大PK，你在用哪个？

SpatialTranscriptomics”，software‘PublishorPerish’搜索PubMed并手动搜索bioRvix的论文数此前已经在多篇文章中为大家介绍了空间转录组技术及计算工具（Nature：利用空间转录组技术探索组织结构

尐尐呅·2023-04-12 14:17

掌握这六点，你也可以对网站性能做优化！

前言一个成熟的大型网站（如淘宝、天猫、腾讯等）的系统架构并不是一开始设计时就具备完整的高性能、高可用、高伸缩等特性的，它是随着用户量的增加，业务功能的扩展逐渐演变完善的，在这个过程中，开发模式、技术架构

程序员技术圈·2023-04-12 07:06

[转]CAP 定理的含义

原文链接分布式系统（distributedsystem）正变得越来越重要，大型网站几乎都是分布式的。分布式系统的最大难点，就是各个节点的状态如何同步。

Elvis_zhou·2023-04-12 04:44

大型网站技术架构读书笔记 (二) 大型网站架构模式

1.网站架构模式1.1分层将系统在横向维度上切分成几个部分，每个部分负责一部分相对比较单一的职责，然后通过上层对下层的依赖和调用组成一个完整的系统。1.2分割分层是将软件在横向方面进行切分，那么分割就是在纵向方面对软件进行切分。1.3分布式分布式应用和服务分布式静态资源分布式数据和存储分布式计算1.4集群使用分布式虽然已经将分层和分割后的模块独立部署，但是对于用户访问集中的模块（比如网站的首页），

雪孤城·2023-04-12 02:20

大型网站技术架构秘诀

来源：xybabycnblogs.com/xybaby/p/8907880.html一个网站的进化史大型网站架构模式与核心要素性能高可用伸缩性（Scalability）可扩展性（Extensibility

python爬虫人工智能大数据·2023-04-12 02:18

大型网站技术架构：摘要与读书笔记

花了几个晚上看完了《大型网站技术架构》这本书，个人感觉这本书的广度还行，深度还有些欠缺（毕竟只有200页左右）。

weixin_33778778·2023-04-12 02:48

阅读《大型网站技术架构》

本次重点阅读了第五、六、七章。系统的可用性是十分重要的，第五章介绍了网站的高可用性架构，甚至用上了万无一失这样的字眼。可用性体现了系统故障的多少以及出现故障后恢复的速度，一个的不可用时间越短，网站的可用性就越高。网站的可用性可以用多少个9来度量。虽然一个网站不可能是完全可用的，但我们可以尽力去做一些事情去完善。因而，高可用架构的主要目的就是保证服务器硬件故障时服务依然可用，数据依然能被访问。实现高

躲不过这哀伤·2023-04-12 02:17

《大型网站技术架构》读书笔记二

一、网站的架构模式1、分层将系统在横向维度上划分成几个部分，每个部分负责一部分单一的职责，然后通过上层对下层的依赖和调用组成一个完整的系统；例如常见的把整个应用程序分成应用层、服务层和数据层。应用层相当于应用程序的前端服务。2、分割分割是在纵向维度上把不同的服务和功能分割成不同的模块包装成高内聚低耦合的模块单元。一方面方便软件的开发和维护，另一面也便于分布式部署。3、分布式将不同的模块部署在不同的

Futureh·2023-04-12 02:47

大型网站技术架构笔记一（概述）

一、大型网站软件系统的特点大型互联网应用系统特点：1、高并发，大流量2、高可用3、海量数据4、用户分布广泛，网络情况复杂5、安全环境恶劣6、需求快速变更，发布频繁7、渐进式发展二、大型网站架构演化发展历程初始阶段的网站架构大型网站都是从小型网站发展而来

larjoriex·2023-04-12 02:47

大型网站技术架构核心原理与案例分析学习笔记（理论篇）

大型网站软件系统的特点高并发、大流量高可用海量数据用户分布广泛，网络情况复杂安全环境恶劣需求快速变更，发布频繁渐进式发展大型网站架构演化发展历程所有资源在一台服务器上，使用免费开源的技术（操作系统使用linux

年糕coder·2023-04-12 02:44

大型网站技术架构——核心原理与案例分析，笔记思考【未完】

1.核心要素性能可用性伸缩性拓展性安全性五个要素能不能都要呢？2.性能网站的性能是客观的指标，可以具体体现到响应时间、吞吐量等技术指标，同时也是主观感受。用户视角的性能：就是用户在浏览器上直观感受到的网站响应速度快还是慢。开发人员眼中的性能：响应延迟系统吞吐量并发处理能力系统稳定性等相关的优化手段有：缓存加速读取使用集群提高吞吐能力使用异步消息加快请求响应及实现削峰使用代码手段优化运维人员视角的性

jjyy2333·2023-04-12 02:13

《大型网站技术架构》阅读笔记

文章目录前言基本信息一、概述1.1、架构演化1.2、架构模式1.3、核心要素二、架构层面2.1、高性能【网站性能、web前端、应用服务器、存储性能】2.2、高可用【不同层、应用、服务、数据、软件发布、监控】2.3、伸缩性【网站架构、应用服务器集群、分布式缓存集群、数据存储服务器集群】2.4、可扩展【网站架构、分布式消息队列、分布式服务、数据结构、开放平台】2.5、网站安全架构【攻击、信息加密、信息

长路 ㅤ ·2023-04-12 02:10

Django 适合做微服务嘛

Django是一个非常成熟的Pythonweb框架，适用于构建大型网站和web应用程序。它提供了许多内置功能，如身份验证、数据库支持、管理界面等，这些都可以大大减少开发时间。

焦虑肇事者·2023-04-11 23:23

2023年 Linux Mysql8.0安装（详细教程）

MySQL软件采用了双授权政策，分为社区版和商业版，由于其体积小、速度快、总体拥有成本低，尤其是开放源码这一特点，一般中小型和大型网站的开发都选择MySQL作为网站数据库。社区版

小黑的吴小黑·2023-04-11 18:23

商品详情页动态渲染系统：大型网站的多机房4级缓存架构设计

124_大型电商网站的商品详情页的深入分析之前，咱们也是说在讲解这个商品详情页系统的架构缓存架构，高可用服务商品详情页系统，我们只是抽取了其中一部分来讲解，而且还做了很大程度的简化主要是为了用一个较为拟真的这么一个业务场景，重点是要讲解：缓存架构，高可用服务（hystrix）在讲解完了之前的内容之后，相信大家也都掌握了一定的基础了，然后接下来我们就要去动手纯实战，去开发出来一个较为完整的亿级流量大

asd23rsa·2023-04-11 15:46

分布式架构的演进过程

一个成熟的大型网站架构并不是一开始就设计的非常完美，也不是一开始就具备高性能、高可用、安全性等特性，而是随着用户量的增加，业务功能的扩展逐步完善演变过来的。

匠丶·2023-04-11 07:59

推荐频道

大型网站技术探索