高性能、高并发TCP服务器(多线程调用libevent)

from：http://blog.csdn.net/i_am_jojo/article/details/7587838

本文讲述的TCP服务器是模仿memcache中的TCP网络处理框架，其中是基于libevent网络库的。

主线程只处理监听客户端的连接请求，并将请求平均分配给子线程。

子线程处理与客户端的连接以及相关业务。

每个子线程有一个“连接”队列。每个“连接”有一个“反馈”队列。

 

先上个流程图，要上班了，以后再解释。代码以后再上···

 高性能、高并发TCP服务器(多线程调用libevent)_第1张图片

高性能、高并发TCP服务器(多线程调用libevent)_第2张图片

你可能感兴趣的:(libevent)

  • 开源事件通知库libevent及网络连接管理模块bufferevent详解 dvlinker 开源组件及数据库技术开源事件通知库libevent网络连接管理bufferevent回调数据读写心跳处理
    目录1、libevent介绍1.1、什么是libevent？1.2、libevent特点1.3、网络连接管理模块bufferevent2、bufferevent有什么用？3、bufferevent的整体设计与实现细节3.1、整体概况3.2、evbuffer与bufferevent3.3、defercallback4、bufferevent的使用方法4.1、创建和销毁bufferevent4.2、设
  • Windows下编译libevent 64位静态库总结 岩屿 libevent
    参照：https://my.oschina.net/jacobin/blog/146567http://blog.csdn.net/qingfengpu99/article/details/45113841http://blog.csdn.net/xiaoluer/article/details/56008921http://blog.csdn.net/u010085340/article/det
  • libevent-bufferevent遇到的坑 zidian666 C++libeventc++libevent
    1.多线程操作段错误intevbuffer_enable_locking(structevbuffer*buf,void*lock);voidevbuffer_lock(structevbuffer*buf);对evbuffer加锁，先确保安全，再优化效率2.对evbuffer加锁后还是段错structbufferevent*bufferevent_socket_new(structevent_b
  • libevent之android与鸿蒙编译过程 老中医的博客 libeventharmonyos
    背景最近基于libevent开发了一个端侧的缓存代理库，先是基于macOS编译开发的，基本0问题，后来移植到鸿蒙与android时遇到一些编译链接问题。libevent版本如下：软件版本号libevent-2.1.8android编译编译环境androidstudio版本ndk编译链版本api级别AndroidStudioFlamingo|2022.2.1Patch2Build#AI-222.44
  • Linux Memcached 安装 执笔轻叹_
    Memcached支持许多平台：Linux、FreeBSD、Solaris、MacOS，也可以安装在Windows上。Linux系统安装memcached，首先要先安装libevent库。sudoapt-getinstalllibeventibevent-dev自动下载安装（Ubuntu/Debian）yuminstalllibeventlibevent-devel自动下载安装（Redhat/Fe
  • C++服务器端开发（2）:确定服务器框架 Galaxy银河 C++更多语法计算机/人工智能c++服务器开发语言
    选择C++服务器框架时，可以考虑：并发性能：C++的强项之一是其并发性能。选择一个具有高并发处理能力的服务器框架，可以更好地满足大量并发请求的需求。例如，libevent、Boost.Asio和CppServer都是具有良好并发性能的C++服务器框架。可扩展性：服务器应用程序通常需要处理大量数据和请求，因此选择一个具有良好可扩展性的服务器框架非常重要。一些流行的可扩展性强的C++服务器框架包括Po
  • FastDFS安装并整合Openresty 良辰美景好时光 nginxopenresty
    FastDFS安装并整合Openresty一、安装环境准备【CentOS7.9】二、FastDFS--tracker安装2.1.下载fastdfs2.2.FastDFS安装环境2.3.安装FastDFS依赖libevent库2.4.安装libfastcommon2.5.安装libserverframe网络框架2.6.tracker编译安装2.7.安装之后文件目录介绍2.8.错误处理2.9.配置Fa
  • libevent、curl进行网络通信的时候返回值CURLE_PARTIAL_FILE，网络通信数据传输不完整 toddzk 问题待解决18
    libevent、curl进行网络通信的时候函数intresult=client.Get(url,res)返回值为18，网络通信不成功。经查询：CURLE_PARTIAL_FILETransferredapartialfile18文件传输不完整。抓包看请求的回复包内容少于指定包的内容，想要找到具体原因需要网络通信底层的深厚知识，我反正尽力了没找到。换了个网络环境，网络通信很稳定。所以这个情况可能是
  • 体现libevent实质上干了啥事-libevent与epoll 干饭小白 算法
    libevent#include#include#include#defineSERVER_PORT8080#defineBUFFER_MAX1024structevent*eventList[1024];voidwrite_cb(evutil_socket_tsock,shortevents,void*arg);voidread_cb(evutil_socket_tsock,shortevent
  • libevent源码解析--evconnlistener, evconnlistener_event raindayinrain 4.5.网络-Libeventevconnlistener服务端监听
    1.概述前面我们分析了libevent中event，event_callback及event_base，有了这些设施，我们便可利用event_base的实现事件循环。基于实现循环实现事件监听，自动分发，手动分发处理。最基础的网络库由服务端，客户端组成。服务端需要通过监听套接字监听，并通过监听套接字的可读事件，取出新的被动连接，用于和客户端进行后续通信。这里，我们分析libevent中如何处理服务端
  • libevent---核心event和event_base 奔跑吧，行者 数据结构classioheapstruct
    结构体event和event_base是libevent的两个核心数据结构，前者代表一个事件对象，后者代表整个事件处理框架。1.event事件对象//event.hstructevent{TAILQ_ENTRY(event)ev_next;//已注册事件链表TAILQ_ENTRY(event)ev_active_next;//就绪事件链表TAILQ_ENTRY(event)ev_signal_ne
  • libevent---event_base事件处理框架 u010765526 libevent
    一、event_base数据结构event_base是整个libevent的核心，它持有所有注册的事件，并负责通知激活的事件。在event-internal.h中。structevent_base{conststructeventop*evsel;void*evbase;intevent_count;/*countsnumberoftotalevents*/intevent_count_activ
  • libevent (hello-world代码源码)----event_base_new 雾缭钟 libevent开发语言c++c语言网络
    libevent(hello-world代码源码)----evconnlistener、event中看了evconnlistener、event的定义，现在我们知道evconnlistener是用来描述tcp服务端的结构体，event结构里有3个event_callback，分别对应超时、io和信号事件。在libevent(hello-world代码源码)----event_base中可以知道ev
  • libevent (hello-world代码源码)----event_base 雾缭钟 libevent开发语言c++c语言网络
    目录event.hevent_baseevent_base_newevent_base_freeeventbase_loopevent_base_dispatchevent_base_new_with_configeventopevent_changelistevent_changeevsig_infoTAILQ_HEADevcallback_listevent_callbackcommon_ti
  • libevent源码分析（2）－－2.1.8－－结构体 struct event和struct event_callback 录事参军 libeventlibeventlibevent
    一、event_callback结构体structevent_callback{//下一个回调事件TAILQ_ENTRY(event_callback)evcb_active_next;//回调事件的状态标识，具体为：//#defineEVLIST_TIMEOUT0x01//event在time堆中，min_heap//#defineEVLIST_INSERTED0x02//event在已注册事件
  • Libevent源码分析-----与event相关的一些函数和操作 amoscykl LibeventLibeventlibevent
    Libevent提供了一些与event相关的操作函数和操作。本文就重点讲一下这方面的源代码。在Libevent中，无论是event还是event_base，都是使用指针而不会使用变量。实际上，如果查看Libevent不同的版本，就可以发现event和event_base这两个结构体的成员是不同的。对比libevent-2.0.21-stable和libevent-1.4.13-stable这两个版
  • Libevent源码分析-----信号event的处理 amoscykl LibeventLibeventlibevent
    信号event的工作原理：前面讲解了Libevent如何监听一个IO事件，现在来讲一下Libevent如何监听信号。Libevent对于信号的处理是采用统一事件源的方式。简单地说，就是把信号也转换成IO事件，集成到Libevent中。统一事件源的工作原理如下：假如用户要监听SIGINT信号，那么在实现的内部就对SIGINT这个信号设置捕抓函数。此外，在实现的内部还要建立一条管道(pipe)，并把这
  • Libevent源码分析-----超时event的处理 amoscykl LibeventLibeventlibevent
    如何成为超时event：Libevent允许创建一个超时event，使用evtimer_new宏。//event.h文件#defineevtimer_new(b,cb,arg)event_new((b),-1,0,(cb),(arg)) 从宏的实现来看，它一样是用到了一般的event_new，并且不使用任何的文件描述符。从超时event宏的实现来看，无论是evtimer创建的event还是一般ev
  • libevent源码解析--event，event_callback，event_base raindayinrain 4.5.网络-Libeventeventevent_callbackevent_base
    1.概述实现一个基础tcp网络库，以基于tcp网络库构建服务端应用，客户端应用为起点，我们的核心诉求有：a.tcp网络库管理工作线程。b.tcp网络库产生服务端对象，通过启动接口，开启服务端监听。进一步，对于服务端对象我们希望：b.1.网络库内部帮助我们监控监听描述符可读事件，自动帮我们处理此事件，产生被动连接。b.2.可以在被动连接产生，被动连接关闭时触发我们提供得事件回调函数，通知应用层执行必
  • Libevent源码分析-event_base KangRoger Libeventlibeventevent-basereactor
    event_base数据结构初始化event_base相关接口前面介绍了event，本节介绍Reactor的核心结构：event_base，它在event-internal.h中。event_base是整个libevent的核心，它持有所有注册的事件，并负责通知激活的事件。event_base数据结构structevent_base{conststructeventop*evsel;void*ev
  • libevent源码解析--evbuffer_chain，evbuffer，bufferevent，bufferevent_private raindayinrain 4.5.网络-Libeventevbuffer_chainevbufferbuffereventbuffevent_priv
    1.概述前面我们已经分析了event，event_callback，event_base及监听套接字处理。有了event_base我们便可实现事件监控，事件分发处理。有了监听套接字处理，我们便可实现服务端监听，通过accept得到服务端通信套接字。一个网络库核心功能由客户端，服务端组成。我们要实现网络库，除了上述设施，还需通信对象，客户端。围绕通信对象主要有以下功能：(1).创建通信对象并对其初始
  • centos 7.6 安装 openldap 2.5.17 OceanWaves1993 sso单点登录openldapldap
    centos7.6安装ldap1、下载ldap2、安装ldap2.1、官方参考文档2.2、安装前准备2.2.1、安装gcc2.2.2、安装CyrusSASL2.1.27+2.2.3、安装OpenSSL1.1.1+2.2.3.1、下载openssl3.02.2.3.2、安装依赖包2.2.3.3、编译安装openssl3.02.2.3、安装libevent2.1.8+2.2.4、安装libargon2
  • error while loading shared libraries: libevent-1.4.so.2: cannot open shared object file 长安明月 Linuxlinuxcentos运维
    一、运行个别工具时报错及原因分析  笔者在Linux环境运行一个工具时，报如下错误。errorwhileloadingsharedlibraries:libevent-1.4.so.2:cannotopensharedobjectfile:Nosuchfileordirectory  报错提示：加载共享库时出错：libevent-1.4.so.2：无法打开共享对象文件：本机没有安装libevent
  • libevent 的http模块实现http服务器 MOONICK 服务器http
    首先声明，libevent的http模块是为单线程设计的，如果业务逻辑中有耗时操作，则需要自行设计线程池以便提高吞吐量，每个工作线程中都要运行一个event_base_loop和一个evhttp实例(这些evhttp实例需要用evhttp_bind_socket绑定到相同的端口上)，具体参考官方issue。(PS:libevent版本为2.1.12)https://github.com/libev
  • wificoin solo 教程---ubuntu hades2013
    1sudoapt-getinstallsoftware-properties-commonsudoadd-apt-repositoryppa:bitcoin/bitcoinsudoapt-getupdate2sudoapt-getinstallbuild-essentiallibtoolautotools-devautoconfpkg-configlibssl-devlibevent-devsud
  • ubuntu源码编译安装memcached和php-memcache 扩展 wzerofeng ubuntumemcachedphp
    1.编译前，先确认gcc、make、patch等编译工具是否已安装，并可正常使用。2.Libevent是一个异步事件处理软件函式库，以BSD许可证释出。Memcached依赖Libevent，因此必须先编译安装Libevent。wgethttps://github.com/libevent/libevent/releases/download/release-2.1.8-stable/libeve
  • libevent_epoll 一天开始了 算法linuxepoll
    demo部分libevent_demo,帮助大家更快了解epoll，其中还涉及reactor反应堆，有兴趣得可以了解一下。#include#include#include#include#include#include#include#include#include#include#defineMAX_EVENTS1024/*监听上限*/#defineBUFLEN4096/*缓存区大小*/#def
  • 开发利器——C语言必备实用第三方库 码哥比特 c语言开发语言经验分享程序人生学习linux单片机
    对于广大C语言开发者来说，缺乏类似C++STL和Boost的库会让开发受制于基础库的匮乏，也因此导致了开发效率的骤降。这也使得例如libevent这类事件库（基础组件库）一时间大红大紫。今天，码哥给大家带来一款基础库，这套库不仅仅提供了常用的数据结构、算法，如红黑树、斐波那契堆、队列、KMP算法、RSA算法、各类哈希算法、数据恢复算法等等，还提供了多进程框架、多线程框架、跨平台高性能事件等实用内容
  • 《Linux高性能服务器编程》笔记05 阿正的梦工坊 LinuxServer服务器linux
    Linux高性能服务器编程本文是读书笔记，如有侵权，请联系删除。参考Linux高性能服务器编程源码:https://github.com/raichen/LinuxServerCodes豆瓣:Linux高性能服务器编程文章目录Linux高性能服务器编程第12章高性能I/O框架库Libevent12.1I/O框架库概述12.2Libevent源码分析12.2.1一个实例12.2.2源代码组织结构12
  • TCP服务器的演变过程：C++使用libevent库开发服务器程序 Lion Long Linux网络设计tcp/ip服务器c++网络网络协议tcplinux
    C++使用libevent库开发服务器程序一、引言二、libevent简介三、Libevent库的封装层级3.1、reactor对象封装structevent_base3.2、事件对象structevent3.3、structbufferevent对象3.4、evconnlistener对象3.5、事件循环3.6、事件处理四、完整示例代码小结一、引言手把手教你从0开始编写TCP服务器程序，体验开局
  • java杨辉三角 3213213333332132 java基础
    package com.algorithm; /** * @Description 杨辉三角 * @author FuJianyong * 2015-1-22上午10:10:59 */ public class YangHui { public static void main(String[] args) { //初始化二维数组长度 int[][] y
  • 《大话重构》之大布局的辛酸历史 白糖_ 重构
    《大话重构》中提到“大布局你伤不起”，如果企图重构一个陈旧的大型系统是有非常大的风险，重构不是想象中那么简单。我目前所在公司正好对产品做了一次“大布局重构”，下面我就分享这个“大布局”项目经验给大家。   背景         公司专注于企业级管理产品软件，企业有大中小之分，在2000年初公司用JSP/Servlet开发了一套针对中
  • 电驴链接在线视频播放源码 dubinwei 源码电驴播放器视频ed2k
    本项目是个搜索电驴（ed2k）链接的应用,借助于磁力视频播放器（官网： http://loveandroid.duapp.com/ 开放平台），可以实现在线播放视频，也可以用迅雷或者其他下载工具下载。 项目源码： http://git.oschina.net/svo/Emule,动态更新。也可从附件中下载。 项目源码依赖于两个库项目，库项目一链接： http://git.oschina.
  • Javascript中函数的toString()方法 周凡杨 JavaScriptjstoStringfunctionobject
    简述     The toString() method returns a string representing the source code of the function.     简译之，Javascript的toString()方法返回一个代表函数源代码的字符串。 句法     function.
  • struts处理自定义异常 g21121 struts
    很多时候我们会用到自定义异常来表示特定的错误情况，自定义异常比较简单，只要分清是运行时异常还是非运行时异常即可，运行时异常不需要捕获，继承自RuntimeException，是由容器自己抛出，例如空指针异常。 非运行时异常继承自Exception，在抛出后需要捕获，例如文件未找到异常。 此处我们用的是非运行时异常，首先定义一个异常LoginException: /** * 类描述：登录相
  • Linux中find常见用法示例 510888780 linux
    Linux中find常见用法示例 ·find   path   -option   [   -print ]   [ -exec   -ok   command ]   {} \; find命令的参数；
  • SpringMVC的各种参数绑定方式 Harry642 springMVC绑定表单
    1. 基本数据类型(以int为例，其他类似)： Controller代码： @RequestMapping("saysth.do") public void test(int count) { } 表单代码： <form action="saysth.do" method="post&q
  • Java 获取Oracle ROWID aijuans javaoracle
    A ROWID is an identification tag unique for each row of an Oracle Database table. The ROWID can be thought of as a virtual column, containing the ID for each row. The oracle.sql.ROWID class i
  • java获取方法的参数名 antlove javajdkparametermethodreflect
    reflect.ClassInformationUtil.java package reflect; import javassist.ClassPool; import javassist.CtClass; import javassist.CtMethod; import javassist.Modifier; import javassist.bytecode.CodeAtt
  • JAVA正则表达式匹配 查找 替换 提取操作 百合不是茶 java正则表达式替换提取查找
    正则表达式的查找;主要是用到String类中的split();       String str;      str.split();方法中传入按照什么规则截取,返回一个String数组   常见的截取规则: str.split("\\.")按照.来截取 str.
  • Java中equals()与hashCode()方法详解 bijian1013 javasetequals()hashCode()
    一.equals()方法详解     equals()方法在object类中定义如下：  public boolean equals(Object obj) { return (this == obj); }    很明显是对两个对象的地址值进行的比较（即比较引用是否相同）。但是我们知道，String 、Math、I
  • 精通Oracle10编程SQL(4)使用SQL语句 bijian1013 oracle数据库plsql
    --工资级别表 create table SALGRADE ( GRADE NUMBER(10), LOSAL NUMBER(10,2), HISAL NUMBER(10,2) ) insert into SALGRADE values(1,0,100); insert into SALGRADE values(2,100,200); inser
  • 【Nginx二】Nginx作为静态文件HTTP服务器 bit1129 HTTP服务器
     Nginx作为静态文件HTTP服务器 在本地系统中创建/data/www目录，存放html文件(包括index.html) 创建/data/images目录，存放imags图片 在主配置文件中添加http指令   http { server { listen 80; server_name
  • kafka获得最新partition offset blackproof kafkapartitionoffset最新
    kafka获得partition下标，需要用到kafka的simpleconsumer   import java.util.ArrayList; import java.util.Collections; import java.util.Date; import java.util.HashMap; import java.util.List; import java.
  • centos 7安装docker两种方式 ronin47
          第一种是采用yum 方式              yum install -y docker           
  • java-60-在O(1)时间删除链表结点 bylijinnan java
    public class DeleteNode_O1_Time { /** * Q 60 在O(1)时间删除链表结点 * 给定链表的头指针和一个结点指针(!!)，在O(1)时间删除该结点 * * Assume the list is: * head->...->nodeToDelete->mNode->nNode->..
  • nginx利用proxy_cache来缓存文件 cfyme cache
    user  zhangy users; worker_processes 10; error_log  /var/vlogs/nginx_error.log  crit; pid        /var/vlogs/nginx.pid; #Specifies the value for ma
  • [JWFD开源工作流]JWFD嵌入式语法分析器负号的使用问题 comsci 嵌入式
        假如我们需要用JWFD的语法分析模块定义一个带负号的方程式，直接在方程式之前添加负号是不正确的，而必须这样做：     string str01 = "a=3.14;b=2.71;c=0;c-((a*a)+(b*b))"     定义一个0整数c,然后用这个整数c去
  • 如何集成支付宝官方文档 dai_lm android
    官方文档下载地址 https://b.alipay.com/order/productDetail.htm?productId=2012120700377310&tabId=4#ps-tabinfo-hash 集成的必要条件 1. 需要有自己的Server接收支付宝的消息 2. 需要先制作app，然后提交支付宝审核，通过后才能集成 调试的时候估计会真的扣款，请注意
  • 应该在什么时候使用Hadoop datamachine hadoop
    原帖地址：http://blog.chinaunix.net/uid-301743-id-3925358.html 存档，某些观点与我不谋而合，过度技术化不可取，且hadoop并非万能。 --------------------------------------------万能的分割线-------------------------------- 有人问我，“你在大数据和Hado
  • 在GridView中对于有外键的字段使用关联模型进行搜索和排序 dcj3sjt126com yii
    在GridView中使用关联模型进行搜索和排序 首先我们有两个模型它们直接有关联: class Author extends CActiveRecord { ... } class Post extends CActiveRecord { ... function relations() { return array( '
  • 使用NSString 的格式化大全 dcj3sjt126com Objective-C
    格式定义The format specifiers supported by the NSString formatting methods and CFString formatting functions follow the IEEE printf specification; the specifiers are summarized in Table 1. Note that you c
  • 使用activeX插件对象object滚动有重影 蕃薯耀 activeX插件滚动有重影
      使用activeX插件对象object滚动有重影   <object style="width:0;" id="abc" classid="CLSID:D3E3970F-2927-9680-BBB4-5D0889909DF6" codebase="activex/OAX339.CAB#
  • SpringMVC4零配置 hanqunfeng springmvc4
    基于Servlet3.0规范和SpringMVC4注解式配置方式，实现零xml配置，弄了个小demo，供交流讨论。     项目说明如下： 1.db.sql是项目中用到的表，数据库使用的是oracle11g 2.该项目使用mvn进行管理，私服为自搭建nexus,项目只用到一个第三方 jar，就是oracle的驱动； 3.默认项目为零配置启动，如果需要更改启动方式，请
  • 《开源框架那点事儿16》：缓存相关代码的演变 j2eetop 开源框架
    问题引入 上次我参与某个大型项目的优化工作，由于系统要求有比较高的TPS，因此就免不了要使用缓冲。 该项目中用的缓冲比较多，有MemCache，有Redis，有的还需要提供二级缓冲，也就是说应用服务器这层也可以设置一些缓冲。 当然去看相关实现代代码的时候，大致是下面的样子。 [java] view plain copy print ? public vo
  • AngularJS浅析 kvhur JavaScript
    概念 AngularJS is a structural framework for dynamic web apps. 了解更多详情请见原文链接：http://www.gbtags.com/gb/share/5726.htm Directive 扩展html，给html添加声明语句，以便实现自己的需求。对于页面中html元素以ng为前缀的属性名称，ng是angular的命名空间
  • 架构师之jdk的bug排查(一)---------------split的点号陷阱 nannan408 split
    1.前言.    jdk1.6的lang包的split方法是有bug的,它不能有效识别A.b.c这种类型,导致截取长度始终是0.而对于其他字符,则无此问题.不知道官方有没有修复这个bug. 2.代码 String[] paths = "object.object2.prop11".split("'"); System.ou
  • 如何对10亿数据量级的mongoDB作高效的全表扫描 quentinXXZ mongodb
      本文链接:  http://quentinXXZ.iteye.com/blog/2149440 一、正常情况下，不应该有这种需求 首先，大家应该有个概念，标题中的这个问题，在大多情况下是一个伪命题，不应该被提出来。要知道，对于一般较大数据量的数据库，全表查询，这种操作一般情况下是不应该出现的，在做正常查询的时候，如果是范围查询，你至少应该要加上limit。 说一下，
  • C语言算法之水仙花数 qiufeihu c算法
    /** * 水仙花数 */ #include <stdio.h> #define N 10 int main() { int x,y,z; for(x=1;x<=N;x++) for(y=0;y<=N;y++) for(z=0;z<=N;z++) if(x*100+y*10+z == x*x*x
  • JSP指令 wyzuomumu jsp
    jsp指令的一般语法格式： <%@ 指令名 属性 =”值 ” %> 常用的三种指令： page,include,taglib page指令语法形式： <%@ page 属性 1=”值 1” 属性 2=”值 2”%> include指令语法形式： <%@include file=”relative url”%> (jsp可以通过 include
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他