s1mba

muduo网络库学习之EventLoop（四）：EventLoopThread 类、EventLoopThreadPool 类

1、EventLoopThread（IO线程类）

任何一个线程，只要创建并运行了EventLoop，都称之为IO线程

IO线程不一定是主线程

muduo并发模型one loop per thread + threadpool（计算线程池）

为了方便今后使用，定义了EventLoopThread类，该类封装了IO线程

EventLoopThread创建了一个线程

在线程函数中创建了一个EvenLoop对象并调用EventLoop::loop

多个IO线程可以用IO线程池来管理，对应的类是EventLoopThreadPool

       C++ Code  
    

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53

class EventLoopThread : boost::noncopyable
{
public:
     typedef boost::function< void(EventLoop *)> ThreadInitCallback;

    EventLoopThread( const ThreadInitCallback &cb = ThreadInitCallback());
    ~EventLoopThread();

    EventLoop *startLoop() // 启动线程，该线程就成为了IO线程
    {
        thread_.start(); // 执行threadFunc(); 构造函数初始化列表中thread_(boost::bind(&EventLoopThread::threadFunc, this))
        ....
    };

private:
     void threadFunc();       // 线程函数

    EventLoop *loop_;            // loop_指针指向一个EventLoop对象
     bool exiting_;
    Thread thread_;
    MutexLock mutex_;
    Condition cond_;
    ThreadInitCallback callback_;        // 回调函数在EventLoop::loop事件循环之前被调用
};

EventLoopThread::~EventLoopThread()
{
    exiting_ = true;
    loop_->quit();       // 退出IO线程，让IO线程的loop循环退出，从而退出了IO线程
    thread_.join();
}

C++ Code

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15

EventLoop *EventLoopThread::startLoop()
{
    assert(!thread_.started());
    thread_.start(); //启动线程，此时有两个线程在运行，
     //一个是调用EventLoopThread::startLoop()的线程，一个是执行EventLoopThread::threadFunc()的线程（IO线程）
    {
        MutexLockGuard lock(mutex_);
         while (loop_ == NULL)
        {
            cond_.wait(); //函数返回loop_，所以要等待IO线程启动
        }
    }

     return loop_;
}

void EventLoopThread::threadFunc()
{
    EventLoop loop;

     if (callback_)
    {
        callback_(&loop);
    }

    {
        MutexLockGuard lock(mutex_);
         // 一般情况是EventLoopThread对象先析构，析构函数调用loop_->quit() 使得loop.loop() 退出循环
         // 这样threadFunc 退出，loop栈上对象析构，loop_ 指针失效，但此时已经不会再通过loop_ 访问loop，
         // 故不会有问题。
        loop_ = &loop;
        cond_.notify();
    }

    loop.loop();
     //assert(exiting_);
}

测试代码：

       C++ Code  
    

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31

#include
#include

#include

using namespace muduo;
using namespace muduo::net;

void runInThread()
{
    printf( "runInThread(): pid = %d, tid = %d\n",
           getpid(), CurrentThread::tid());
}

int main()
{
    printf( "main(): pid = %d, tid = %d\n",
           getpid(), CurrentThread::tid());

    EventLoopThread loopThread;
    EventLoop *loop = loopThread.startLoop();
     // 异步调用runInThread，即将runInThread添加到loop对象所在IO线程，让该IO线程执行
    loop->runInLoop(runInThread);
    sleep( 1);
     // runAfter内部也调用了runInLoop，所以这里也是异步调用，让该IO线程添加一个2s定时器
    loop->runAfter( 2, runInThread);
    sleep( 3);
     //~EventLoopThread()会调用loop_->quit();

    printf( "exit main().\n");
}

执行输出如下:

simba@ubuntu:~/Documents/build/debug/bin$ ./reactor_test06
20131108 03:29:12.749530Z 2628 TRACE IgnoreSigPipe Ignore SIGPIPE - EventLoop.cc:51
main(): pid = 2628, tid = 2628
20131108 03:29:12.753135Z 2629 TRACE updateChannel fd = 4 events = 3 - EPollPoller.cc:104
20131108 03:29:12.753794Z 2629 TRACE EventLoop EventLoop created 0xB7415F44 in thread 2629 - EventLoop.cc:76
20131108 03:29:12.754266Z 2629 TRACE updateChannel fd = 5 events = 3 - EPollPoller.cc:104
20131108 03:29:12.754707Z 2629 TRACE loop EventLoop 0xB7415F44 start looping - EventLoop.cc:108
20131108 03:29:12.755088Z 2629 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 03:29:12.756033Z 2629 TRACE printActiveChannels {5: IN } - EventLoop.cc:271
runInThread(): pid = 2628, tid = 2629
20131108 03:29:13.755730Z 2629 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 03:29:13.756388Z 2629 TRACE printActiveChannels {5: IN } - EventLoop.cc:271
20131108 03:29:15.755858Z 2629 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 03:29:15.757316Z 2629 TRACE printActiveChannels {4: IN } - EventLoop.cc:271
20131108 03:29:15.757469Z 2629 TRACE readTimerfd TimerQueue::handleRead() 1 at 1383881355.757345 - TimerQueue.cc:62
runInThread(): pid = 2628, tid = 2629
exit main().
20131108 03:29:16.755942Z 2629 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 03:29:16.755988Z 2629 TRACE printActiveChannels {5: IN } - EventLoop.cc:271
20131108 03:29:16.756003Z 2629 TRACE loop EventLoop 0xB7415F44 stop looping - EventLoop.cc:133
simba@ubuntu:~/Documents/build/debug/bin$

主线程不是IO线程，根据前面的文章，timerfd_ = 4, wakeupFd_ = 5。主线程调用 loop->runInLoop(runInThread); 由于不是IO线

程调用runInLoop，故调用queueInLoop() 将runInThead 添加到队列，然后wakeup() IO线程，IO线程在doPendingFunctors() 中取

出队列的runInThread()执行，可以看到IO线程的tid 跟主线程不一样。同理，loop->runAfter(2, runInThread); 也是一样的流程，需

要唤醒一下，此时只是执行runAfter() 添加了一个2s的定时器, 2s超时，timerfd_ 可读，先handleRead()一下然后执行回调函数

runInThread()。那为什么exit main() 之后wakeupFd_ 还会有可读事件呢？那是因为EventLoopThead 栈上对象析构，在析构函数内

loop_ ->quit(), 由于不是在IO 线程调用quit()，故也需要唤醒一下，IO线程才能从poll 返回，这样再次循环判断 while (!quit_) 就能

退出IO线程。

2、EventLoopThreadPool（IO线程池类）

IO线程池的功能是开启若干个IO线程，并让这些IO线程处于事件循环的状态

muduo网络库学习之EventLoop（四）：EventLoopThread 类、EventLoopThreadPool 类_第1张图片

        C++ Code  
     

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47

class EventLoopThreadPool : boost::noncopyable
{
public:
     typedef boost::function< void(EventLoop *)> ThreadInitCallback;

    EventLoopThreadPool(EventLoop *baseLoop);
    ~EventLoopThreadPool();
     void setThreadNum( int numThreads)
    {
        numThreads_ = numThreads;
    }
     void start( const ThreadInitCallback &cb = ThreadInitCallback());

     // 如果loops_为空，则loop指向baseLoop_
     // 如果不为空，按照round-robin（RR，轮叫）的调度方式选择一个EventLoop
    EventLoop *getNextLoop();

private:

    EventLoop *baseLoop_;    // 与Acceptor所属EventLoop相同
     bool started_;
     int numThreads_;         // 线程数，除去mainReactor
     int next_;           // 新连接到来，所选择的EventLoop对象下标
    boost::ptr_vector threads_;         // IO线程列表
    std::vector loops_;                     // EventLoop列表
};

void EventLoopThreadPool::start( const ThreadInitCallback &cb)
{
    assert(!started_);
    baseLoop_->assertInLoopThread();

    started_ = true;

     for ( int i = 0; i < numThreads_; ++i)
    {
        EventLoopThread *t = new EventLoopThread(cb);
        threads_.push_back(t);
        loops_.push_back(t->startLoop());    // 启动EventLoopThread线程，在进入事件循环之前，会调用cb
    }
     if (numThreads_ == 0 && cb)
    {
         // 只有一个EventLoop，在这个EventLoop进入事件循环之前，调用cb
        cb(baseLoop_);
    }
}

现在使用 mainReactor + ThreadPool(subReactors) 模式，则baseLoop_ 与TcpServer 和 Acceptor 中的 loop_ 成员是相同的，即mainReactor 处理监听事件，已连接套接字事件轮询给线程池中的subReactors 处理。此时需要注意，创建一个TcpConnection对象时，需要绑定其中一个subReactor, 如下：

          C++ Code  
       

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19

void TcpServer::newConnection( int sockfd, const InetAddress &peerAddr)
{
    loop_->assertInLoopThread();
     // 按照轮叫的方式选择一个EventLoop
    EventLoop *ioLoop = threadPool_->getNextLoop();

    InetAddress localAddr(sockets::getLocalAddr(sockfd));

    TcpConnectionPtr conn( new TcpConnection(ioLoop,
                                            connName,
                                            sockfd,
                                            localAddr,
                                            peerAddr));

    connections_[connName] = conn;

    ioLoop->runInLoop(boost::bind(&TcpConnection::connectEstablished, conn));

}

测试程序：

          C++ Code  
       

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74

#include
#include
#include

#include

#include

using namespace muduo;
using namespace muduo::net;

class TestServer
{
public:
    TestServer(EventLoop *loop,
                const InetAddress &listenAddr, int numThreads)
        : loop_(loop),
          server_(loop, listenAddr, "TestServer"),
          numThreads_(numThreads)
    {
        server_.setConnectionCallback(
            boost::bind(&TestServer::onConnection, this, _1));
        server_.setMessageCallback(
            boost::bind(&TestServer::onMessage, this, _1, _2, _3));
        server_.setThreadNum(numThreads);
    }

     void start()
    {
        server_.start();
    }

private:
     void onConnection( const TcpConnectionPtr &conn)
    {
         if (conn->connected())
        {
            printf( "onConnection(): new connection [%s] from %s\n",
                   conn->name().c_str(),
                   conn->peerAddress().toIpPort().c_str());
        }
         else
        {
            printf( "onConnection(): connection [%s] is down\n",
                   conn->name().c_str());
        }
    }

     void onMessage( const TcpConnectionPtr &conn,
                    const char *data,
                   ssize_t len)
    {
        printf( "onMessage(): received %zd bytes from connection [%s]\n",
               len, conn->name().c_str());
    }

    EventLoop *loop_;
    TcpServer server_;
     int numThreads_;
};

int main()
{
    printf( "main(): pid = %d\n", getpid());

    InetAddress listenAddr( 8888);
    EventLoop loop;

    TestServer server(&loop, listenAddr, 4);
    server.start();

    loop.loop();
}

此时共有5个IO线程，1个主线程（mainReactor）和 4个线程池中的线程（subReactor），server.start() 会启动线程池中的4个线程，并且启动mainReactor 监听：

          C++ Code  
       

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17

// 该函数多次调用是无害的
// 该函数可以跨线程调用
void TcpServer::start()
{
     if (!started_)
    {
        started_ = true;
        threadPool_->start(threadInitCallback_);
    }

     if (!acceptor_->listenning())
    {
         // get_pointer返回原生指针
        loop_->runInLoop(
            boost::bind(&Acceptor::listen, get_pointer(acceptor_)));
    }
}

开启两个telnet 客户端连接服务器，其中一个输入aaaa, 另一个输入ddddd, 服务器端输出如下:

simba@ubuntu:~/Documents/build/debug/bin$ ./reactor_test10
main(): pid = 8628
20131108 11:33:15.190620Z 8628 TRACE updateChannel fd = 4 events = 3 - EPollPoller.cc:104
20131108 11:33:15.191246Z 8628 TRACE EventLoop EventLoop created 0xBFB77D50 in thread 8628 - EventLoop.cc:62
20131108 11:33:15.191568Z 8628 TRACE updateChannel fd = 5 events = 3 - EPollPoller.cc:104

20131108 11:33:15.192270Z 8629 TRACE updateChannel fd = 9 events = 3 - EPollPoller.cc:104
20131108 11:33:15.192625Z 8629 TRACE EventLoop EventLoop created 0xB7484F44 in thread 8629 - EventLoop.cc:62
20131108 11:33:15.192927Z 8629 TRACE updateChannel fd = 10 events = 3 - EPollPoller.cc:104

20131108 11:33:15.193356Z 8629 TRACE loop EventLoop 0xB7484F44 start looping - EventLoop.cc:94
20131108 11:33:15.193759Z 8630 TRACE updateChannel fd = 12 events = 3 - EPollPoller.cc:104
20131108 11:33:15.194100Z 8630 TRACE EventLoop EventLoop created 0xB6AFEF44 in thread 8630 - EventLoop.cc:62
20131108 11:33:15.194398Z 8630 TRACE updateChannel fd = 13 events = 3 - EPollPoller.cc:104

20131108 11:33:15.194786Z 8630 TRACE loop EventLoop 0xB6AFEF44 start looping - EventLoop.cc:94
20131108 11:33:15.195135Z 8631 TRACE updateChannel fd = 15 events = 3 - EPollPoller.cc:104
20131108 11:33:15.195534Z 8631 TRACE EventLoop EventLoop created 0xB60FEF44 in thread 8631 - EventLoop.cc:62
20131108 11:33:15.207467Z 8631 TRACE updateChannel fd = 16 events = 3 - EPollPoller.cc:104

20131108 11:33:15.208169Z 8631 TRACE loop EventLoop 0xB60FEF44 start looping - EventLoop.cc:94
20131108 11:33:15.208940Z 8632 TRACE updateChannel fd = 18 events = 3 - EPollPoller.cc:104
20131108 11:33:15.209576Z 8632 TRACE EventLoop EventLoop created 0xB58FDF44 in thread 8632 - EventLoop.cc:62
20131108 11:33:15.210087Z 8632 TRACE updateChannel fd = 19 events = 3 - EPollPoller.cc:104

20131108 11:33:15.210445Z 8628 TRACE updateChannel fd = 6 events = 3 - EPollPoller.cc:104
20131108 11:33:15.210750Z 8628 TRACE loop EventLoop 0xBFB77D50 start looping - EventLoop.cc:94
20131108 11:33:15.211122Z 8632 TRACE loop EventLoop 0xB58FDF44 start looping - EventLoop.cc:94
20131108 11:33:18.958878Z 8628 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 11:33:18.959167Z 8628 TRACE printActiveChannels {6: IN} - EventLoop.cc:257
20131108 11:33:18.959226Z 8628 INFO TcpServer::newConnection [TestServer] - new connection[TestServer:0.0.0.0:8888#1] from 127.0.0.1:56411 - TcpServer.cc:93
20131108 11:33:18.959262Z 8628 DEBUG TcpConnection TcpConnection::ctor[TestServer:0.0.0.0:8888#1] at 0x8C84F98 fd=20 - TcpConnection.cc:62
20131108 11:33:18.959277Z 8628 TRACE newConnection [1] usecount=1 - TcpServer.cc:111
20131108 11:33:18.959300Z 8628 TRACE newConnection [2] usecount=2 - TcpServer.cc:113
20131108 11:33:18.959322Z 8628 TRACE newConnection [5] usecount=3 - TcpServer.cc:122
20131108 11:33:18.959343Z 8629 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 11:33:18.959365Z 8629 TRACE printActiveChannels {10: IN } - EventLoop.cc:257
20131108 11:33:18.959378Z 8629 TRACE connectEstablished [3] usecount=3 - TcpConnection.cc:78
20131108 11:33:18.959409Z 8629 TRACE updateChannel fd = 20 events = 3 - EPollPoller.cc:104
onConnection(): new connection [TestServer:0.0.0.0:8888#1] from 127.0.0.1:56411
20131108 11:33:18.959433Z 8629 TRACE connectEstablished [4] usecount=3 - TcpConnection.cc:83
20131108 11:33:23.111546Z 8628 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 11:33:23.111628Z 8628 TRACE printActiveChannels {6: IN } - EventLoop.cc:257
20131108 11:33:23.111662Z 8628 INFO TcpServer::newConnection [TestServer] - new connection[TestServer:0.0.0.0:8888#2] from 127.0.0.1:56412 - TcpServer.cc:93
20131108 11:33:23.111680Z 8628 DEBUG TcpConnection TcpConnection::ctor[TestServer:0.0.0.0:8888#2] at 0x8C85128 fd=21 - TcpConnection.cc:62
20131108 11:33:23.111693Z 8628 TRACE newConnection [1] usecount=1 - TcpServer.cc:111
20131108 11:33:23.111722Z 8628 TRACE newConnection [2] usecount=2 - TcpServer.cc:113
20131108 11:33:23.111746Z 8628 TRACE newConnection [5] usecount=3 - TcpServer.cc:122
20131108 11:33:23.111769Z 8630 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 11:33:23.111792Z 8630 TRACE printActiveChannels {13: IN} - EventLoop.cc:257
20131108 11:33:23.111805Z 8630 TRACE connectEstablished [3] usecount=3 - TcpConnection.cc:78
20131108 11:33:23.111813Z 8630 TRACE updateChannel fd = 21 events = 3 - EPollPoller.cc:104
onConnection(): new connection [TestServer:0.0.0.0:8888#2] from 127.0.0.1:56412
20131108 11:33:23.111836Z 8630 TRACE connectEstablished [4] usecount=3 - TcpConnection.cc:83
20131108 11:33:25.219778Z 8631 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:25.219829Z 8632 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:28.969971Z 8629 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:33.119151Z 8630 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:33.119202Z 8628 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:33.754975Z 8629 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 11:33:33.755031Z 8629 TRACE printActiveChannels {20: IN} - EventLoop.cc:257
20131108 11:33:33.755042Z 8629 TRACE handleEvent [6] usecount=2 - Channel.cc:67
onMessage(): received 6 bytes from connection [TestServer:0.0.0.0:8888#1]
20131108 11:33:33.755128Z 8629 TRACE handleEvent [12] usecount=2 - Channel.cc:69
20131108 11:33:35.230224Z 8631 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:35.230274Z 8632 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:36.540663Z 8630 TRACE poll 1 events happended - EPollPoller.cc:65
20131108 11:33:36.540715Z 8630 TRACE printActiveChannels {21: IN} - EventLoop.cc:257
20131108 11:33:36.540727Z 8630 TRACE handleEvent [6] usecount=2 - Channel.cc:67
onMessage(): received 7 bytes from connection [TestServer:0.0.0.0:8888#2]
20131108 11:33:36.540780Z 8630 TRACE handleEvent [12] usecount=2 - Channel.cc:69
20131108 11:33:43.129769Z 8628 TRACE poll nothing happended - EPollPoller.cc:74
20131108 11:33:43.765633Z 8629 TRACE poll nothing happended - EPollPoller.cc:74

一个进程本来被打开的文件描述符就有0，1，2;

每个Reactor 的 EventLoop 对象构造时，默认使用的是EPollPoller，即EPollPoller::epollfd_ ;

此外还有两个channel（EventLoop::timeQueue_ ::timerfd_ 和 EventLoop::wakeupFd_ ）

处于被poll()关注可读事件的状态，而且是一直关注直到事件循环结束。

即每个Reactor 都分别有这3个fd;

对于mainReactor来说，还有Acceptor::acceptSocket_.sockfd_ （listenfd）; Acceptor::idleFd_ ; (/dev/null)

按上述程序来说，mainReactor中：epollfd_ = 3; timerfd_ = 4; wakeupFd_ = 5; sockfd_ = 6; idleFd_ = 7;

(8,9,10),(11,12,13),(14,15,16),(17,18,19) 分别归4个IO线程所有

这样已连接套接字只能从20开始，而且均匀分配到4个subReactor 处理事件（可读事件（包括接收数据，连接关闭），可写事件（内核发送缓冲区不为满），错误事件）

当第一个客户端连接上来时，sockfd_ 可读，mainReactor 调用 TcpServer::newConnection(), 创建一个TcpConnection对象，绑定到线程池中的第一个IO线程上，函数内调用ioLoop->runInLoop(); 会唤醒第一个IO线程，即第一个IO线程的wakeupFd_ (10)可读，handleEvent() 处理后继续处理doPendingFunctors()，执行TcpConnection::connectEstablished()，接下去的流程包括接收数据(fd = 20 可读)可以参考 EventLoop（三）的描述。

当然如果我们传递的numThreads_ = 0 或者不传递; 即只有一个mainReactor, 则监听套接字和已连接套接字事件都要由这个mainReactor处理。

参考：

《UNP》

muduo manual.pdf

《linux 多线程服务器编程：使用muduo c++网络库》

muduo网络库学习总结：基本架构及流程分析 moumde epoll 网络 muduo c++
muduo网络库学习：基本架构及流程分析基本架构BasicReactorMutipleReactor+ThreadPoolmuduo库的基本使用基本结构介绍EventLoop类Poller类Channel类TcpConnection类Acceptor类TcpServer类流程梳理之前一直在学习陈硕大佬的muduo库，一直考虑找个时间总结一下（不然没过多久全忘光了）。muduo库是一种基于React
muduo网络库学习（1）躺又躺不平卷又卷不动 C++后端网络学习
muduo网络库学习（1）文章目录muduo网络库学习（1）前言一、muduo是什么？二、代码结构1.base库2.net库3.附属库二、网络库结构总结前言本章节主要介绍muduo网络库的整体架构！一、muduo是什么？muduo是一款基于reactor的网络库，整个网络库采用oneloopperthread+threadpool的方法，代码简洁，性能优越·。二、代码结构1.base库base库如
muduo网络库学习笔记(三)TimerQueue定时器队列 weixin_30648963
目录muduo网络库学习笔记(三)TimerQueue定时器队列Linux中的时间函数timerfd简单使用介绍timerfd示例muduo中对timerfd的封装TimerQueue的结构.TimerTimer的容器.TimerQueue私有接口介绍.更新定时器时序图TimerQueue源码TimerQueue使用示例muduo网络库学习笔记(三)TimerQueue定时器队列TimerQueu
muduo网络库学习（三）定时器TimerQueue的设计一个程序渣渣的小后院 muduo源码学习 muduo网络库源码分析
Linux下用于获取当前时间的函数有time(2)/time_t(秒)ftime(3)/structtimeb(毫秒)gettimeofday(2)/structtimeval(微秒)clock_gettime(2)/structtimespec(纳秒)定时函数，用于让程序等待一段时间或安排计划任务sleep(3)alarm(2)usleep(3)nanosleep(2)clock_nanosle
muduo网络库学习之EventLoop（一）：事件循环类图简介和muduo 定时器TimeQueue s1mba muduo网络库学习
1、EventLoop、Channel、Poller等类图如下：黑色菱形：组合；白色菱形：聚合；白色三角形：继承；实线：关联；Channel是selectableIOchannel，负责注册与响应IO事件，它不拥有filedescriptor。Channel是Acceptor、Connector、EventLoop、TimerQueue、TcpConnection的成员。一个EventLoop对象
muduo网络库学习笔记(15)：关于使用stdio和iostream的讨论 li27z muduo C/C++
C/C++程序中需要执行输入/输出时，我们一般会用到stdio或iostream。stdio指C语言的scanf/printf系列格式化输入输出函数，iostream指C++语言的cin/cout输入输出对象等。但是，在真实的项目中很少用到iostream（muduo网络库也不例外），本篇就对二者的优、缺点进行一个小结（主要考虑x86Linux平台，不考虑跨平台的可移植性，但是要考虑32-bit和
muduo网络库学习之Timestamp类、AtomicIntegerT 类封装中的知识点 s1mba muduo网络库学习
一、Timestamp类封装classTimestamp:publicmuduo::copyable,publicboost::less_than_comparable类图如下：值语义：可以拷贝，拷贝之后，与原对象脱离关系对象语义：要么是不能拷贝；要么可以拷贝，拷贝之后与原对象仍然存在一定的关系，比如共享底层资源两者之间的关系参见这里。1、muduo::copyable空基类，标识类，值类型2、l
muduo网络库学习笔记(1)：Timestamp类 li27z muduo
时间戳一般用来唯一地标识某一刻的时间，通常是指格林威治时间1970年01月01日00时00分00秒(北京时间1970年01月01日08时00分00秒)起至现在的总毫秒数。muduo网络库对时间戳Timestamp类也进行了封装。Timestamp类类图：由类图可知，Timestamp类的参数有一个常量kMicroSecondsPerSecond表示每秒所对应的微秒数，成员变量microSecond
muduo网络库学习之EventLoop（一）：事件循环类图简介哆啦尼可夫 muduo源码
番外TCP网络编程本质TCP网络编程最本质是的处理三个半事件连接建立：服务器accept（被动）接受连接，客户端connect（主动）发起连接连接断开：主动断开（close、shutdown），被动断开（read返回0）消息到达：文件描述符可读消息发送完毕：这算半个。对于低流量的服务，可不必关心这个事件;这里的发送完毕是指数据写入操作系统缓冲区，将由TCP协议栈负责数据的发送与重传，不代表对方已经
muduo网络库学习笔记(五) 链接器Connector与监听器Acceptor 335046781
目录muduo网络库学习笔记(五)链接器Connector与监听器AcceptorConnector系统函数connect处理非阻塞connect的步骤:Connetor时序图Acceptor系统函数acceptSocket的封装Acceptor的封装Acceptor时序图.简单测试程序AcceptorConnctor运行日志muduo网络库学习笔记(五)链接器Connector与监听器Accep
muduo网络库学习（九）日志类Logger和LogStream，将日志信息打印到屏幕一个程序渣渣的小后院 muduo源码学习 muduo网络库源码分析
每一个成熟的项目都有大大小小的日志系统，在关键的地方打印日志信息，常用来跟踪程序运行，查找错误原因等，可以节省大量的debug时间muduo的日志信息有5个级别TRACE，细粒度最高的日志信息，打印的最详细DEBUG，细粒度级别上对调试有帮助的日志信息INFO，粗粒度级别上强调程序的运行信息WARN，程序能正常运行，但存在潜在风险的信息ERROR，执行出错，但不影响程序继续执行的错误信息FATAL
muduo网络库学习（四）事件驱动循环EventLoop 一个程序渣渣的小后院 muduo源码学习 muduo网络库源码分析
muduo的设计采用高并发服务器框架中的oneloopperthread模式，即一个线程一个事件循环。这里的loop，其实就是muduo中的EventLoop，所以到目前为止，不管是Poller，Channel还是TimerQueue都仅仅是单线程下的任务，因为这些都依赖于EventLoop。这每一个EventLoop，其实也就是一个Reactor模型。而多线程体现在EventLoop的上层，即在
muduo网络库学习之muduo_http 库涉及到的类 s1mba muduo网络库学习
1、httprequest：requestline+header+body（header分为普通报头，请求报头与实体报头）header与body之间有一空行（CRLF）请求方法有：Get,Post,Head,Put,Delete等协议版本1.0、1.1常用请求头Accept：浏览器可接受的媒体（MIME）类型；Accept-Language：浏览器所希望的语言种类Accept-Encoding：浏
muduo网络库学习之muduo_inspect 库涉及到的类 s1mba muduo网络库学习
muduoinspect库通过HTTP方式为服务器提供监控接口,现在只实现进程相关信息的监控，通过成员ProcessInspector实现。ProcessInspector//通过ProcessInfo返回进程信息ProcessInfo//获取进程相关信息我们可以参照ProcessInspector实现一个如TcpStateInspector，作为Inspector的成员，这样就可以实现对Tcp连
muduo网络库学习之EventLoop（四）：EventLoopThread 类、EventLoopThreadPool 类 s1mba muduo网络库学习
1、EventLoopThread（IO线程类）任何一个线程，只要创建并运行了EventLoop，都称之为IO线程IO线程不一定是主线程muduo并发模型oneloopperthread+threadpool（计算线程池）为了方便今后使用，定义了EventLoopThread类，该类封装了IO线程EventLoopThread创建了一个线程在线程函数中创建了一个EvenLoop对象并调用Event
muduo网络库学习之Logger类、LogStream类、LogFile类封装中的知识点 s1mba muduo网络库学习
一、Logger类、LogStream类1、日志作用开发过程中：调试错误更好的理解程序运行过程中：诊断系统故障并处理记录系统运行状态2、日志级别TRACE指出比DEBUG粒度更细的一些信息事件（开发过程中使用）DEBUG指出细粒度信息事件对调试应用程序是非常有帮助的。（开发过程中使用）INFO表明消息在粗粒度级别上突出强调应用程序的运行过程。WARN系统能正常运行，但可能会出现潜在错误的情形。ER
muduo网络库学习笔记(3)：Thread类 li27z muduo
muduo网络库采用了基于对象的编程思想来封装线程类。类图如下:变量numCreated_表示创建的线程个数，类型为AtomicInt32，用到了我们上篇所说的原子性操作。Thread类中还用到了CurrentThread类。代码要点如下：(1)线程标识符Linux中，每个进程有一个pid，类型为pid_t，由getpid()取得。Linux下的POSIX线程也有一个id，类型为pthread_t
muduo网络库学习笔记(0)：面向对象编程风格和基于对象编程风格的比较 li27z C/C++muduo
我们通过对一个线程类的封装来比较这二者的不同。面向对象编程风格使用面向对象编程风格封装线程类，一般这么做：写一个Threadbaseclass，含有（纯）虚函数Thread::run()，然后应用程序派生一个derivedclass，覆写run()。程序里的每一种线程对应一个Thread的派生类。类图如下：代码如下：文件名：Thread.h--头文件#ifndef_THREAD_H_#define
muduo网络库学习笔记(8)：高效日志类的封装 li27z muduo
前言在服务端编程中，日志是必不可少的。开发过程中，日志的存在能方便我们调试错误和更好地理解程序；运行过程中，日志能帮助我们诊断系统故障并处理、记录系统运行状态。muduo日志类封装细节(1)日志消息有多种级别(level)，如TRACE、DEBUG、INFO、WARN、ERROR、FATAL。日志的输出级别在运行时可调。代码片段1：返回当前日志级别文件名：Logging.ccLogger::Log
muduo网络库学习笔记(6)：单例类(线程安全的) li27z muduo
muduo用pthread_once实现了线程安全的Singleton。文件名：Singleton.htemplateclassSingleton:boost::noncopyable{public:staticT&instance(){pthread_once(&ponce_,&Singleton::init);return*value_;}private:Singleton();~Single
muduo网络库学习之EventLoop（三）：Socket、Acceptor、TcpServer、TcpConnection（连接建立，接收消息） s1mba muduo网络库学习
1、Socket操作封装Endian.h封装了字节序转换函数（全局函数，位于muduo::net::sockets名称空间中）。SocketsOps.h/SocketsOps.cc封装了socket相关系统调用（全局函数，位于muduo::net::sockets名称空间中）。Socket.h/Socket.cc（Socket类）用RAII方法封装socketfiledescriptorInetA
在Muduo网络库学习过程中获得的C++知识小黄的雷雷 muduo网络库
1.shared_ptr为了解决多线程编程下无法确定对象是否存活的问题，引入了智能指针shared_ptr。shared_ptr是引用计数型智能指针，当计数为0时，对象即被销毁。shared_ptr控制对象的生命期，只要有一个shared_ptr存在，对象x就不会被析构，当最后一个shared_ptr析构或reset时，对象会被析构。注意是当指针销毁，对象就被析构。借助shared_ptr还可以实
muduo网络库学习笔记(10)：定时器的实现 li27z muduo
传统的Reactor通过控制select和poll的等待时间来实现定时，而现在在Linux中有了timerfd，我们可以用和处理IO事件相同的方式来处理定时，代码的一致性更好。为什么选择timerfd常见的定时函数有如下几种：sleepalarmusleepnanosleepclock_nanosleepgetitimer/setitimertimer_create/timer_settime/t
Muduo网络库学习之Buffer读取与发送数据段长风 Muduo网络库
Buffer存在的意义Buffer是Tcp网络编程中必不可少的东西。为什么必须要有要有Buffer。举个简单的例子，先说输出buffer，假如服务器要向客户端发送100KB数据，受到了某些因素的影响，一次性只能发送80KB，那剩余的20KB怎么办，总不可能把它丢掉吧。这时候Buffer的作用就出来了，它将缓存没发送完的20KB数据（把数据按时间顺序存好，有点像队列，先入先出），然后再次注册sock
一个基于C++11的定时器队列(timerfd,poll实现) 艾露米婭娜
目录前言优点test源代码@前言最近小程序要用到定时器，找了一圈也没找到合适的，最后还是绕回来选择了muduo里面的TimerQueue，整理了下它的代码，独立了出来，因为实在懒得从头写一个--！。原来的muduo中TimerQueue是专为EventLoop提供定时功能的组件，我在笔记muduo网络库学习笔记(三)TimerQueue定时器队列中解读过muduo这块代码，现在反过来，EventL
muduo网络库学习笔记(五) 链接器Connector与监听器Acceptor 艾露米婭娜
目录muduo网络库学习笔记(五)链接器Connector与监听器AcceptorConnector系统函数connect处理非阻塞connect的步骤:Connetor时序图Acceptor系统函数acceptSocket的封装Acceptor的封装Acceptor时序图.简单测试程序AcceptorConnctor运行日志muduo网络库学习笔记(五)链接器Connector与监听器Accep
muduo网络库学习笔记(四) 通过eventfd实现的事件通知机制艾露米婭娜
目录muduo网络库学习笔记(四)通过eventfd实现的事件通知机制eventfd的使用eventfd系统函数使用示例EventLoop对eventfd的封装工作时序runInLoop()queueInLoop()wakeup()handleRead()doPendingFunctors()总结muduo网络库学习笔记(四)通过eventfd实现的事件通知机制上篇文章为EventLoop添加了一
muduo网络库学习笔记(三)TimerQueue定时器队列艾露米婭娜
目录muduo网络库学习笔记(三)TimerQueue定时器队列Linux中的时间函数timerfd简单使用介绍timerfd示例muduo中对timerfd的封装TimerQueue的结构.TimerTimer的容器.TimerQueue私有接口介绍.更新定时器时序图TimerQueue源码TimerQueue使用示例muduo网络库学习笔记(三)TimerQueue定时器队列TimerQueu
Muduo网络库学习知识点总结 chudongfang2015 Muduo网络库
static_cast(expression)该运算符把expression转换为type-id类型，但没有运行时类型检查来保证转换的安全性。它主要有如下几种用法：①用于类层次结构中基类（父类）和派生类（子类）之间指针或引用的转换。进行上行转换（把派生类的指针或引用转换成基类表示）是安全的；进行下行转换（把基类指针或引用转换成派生类表示）时，由于没有动态类型检查，所以是不安全的。②用于基本数据类型
muduo网络库学习笔记(15)：关于使用stdio和iostream的讨论 Leeds1993
C/C++程序中需要执行输入/输出时，我们一般会用到stdio或iostream。stdio指C语言的scanf/printf系列格式化输入输出函数，iostream指C++语言的cin/cout输入输出对象等。但是，在真实的项目中很少用到iostream（muduo网络库也不例外），本篇就对二者的优、缺点进行一个小结（主要考虑x86Linux平台，不考虑跨平台的可移植性，但是要考虑32-bit和
遍历dom 并且存储（将每一层的DOM元素存在数组中）换个号韩国红果果 JavaScript html
数组从0开始！！ var a=[],i=0; for(var j=0;j<30;j++){ a[j]=[];//数组里套数组，且第i层存储在第a[i]中 } function walkDOM(n){ do{ if(n.nodeType!==3)//筛选去除#text类型 a[i].push(n); //con
Android+Jquery Mobile学习系列(9)-总结和代码分享白糖_ JQuery Mobile
目录导航经过一个多月的边学习边练手，学会了Android基于Web开发的毛皮，其实开发过程中用Android原生API不是很多，更多的是HTML/Javascript/Css。个人觉得基于WebView的Jquery Mobile开发有以下优点： 1、对于刚从Java Web转型过来的同学非常适合，只要懂得HTML开发就可以上手做事。 2、jquerym
impala参考资料 dayutianfei impala
记录一些有用的Impala资料 1. 入门资料 >>官网翻译： http://my.oschina.net/weiqingbin/blog?catalog=423691 2. 实用进阶 >>代码&架构分析： Impala/Hive现状分析与前景展望：http
JAVA 静态变量与非静态变量初始化顺序之新解周凡杨 java 静态非静态顺序
今天和同事争论一问题，关于静态变量与非静态变量的初始化顺序，谁先谁后，最终想整理出来！测试代码： import java.util.Map; public class T { public static T t = new T(); private Map map = new HashMap(); public T(){ System.out.println(&quo
跳出iframe返回外层页面 g21121 iframe
在web开发过程中难免要用到iframe，但当连接超时或跳转到公共页面时就会出现超时页面显示在iframe中，这时我们就需要跳出这个iframe到达一个公共页面去。首先跳转到一个中间页，这个页面用于判断是否在iframe中，在页面加载的过程中调用如下代码： <script type="text/javascript"> //<!-- function
JAVA多线程监听JMS、MQ队列 510888780 java多线程
背景：消息队列中有非常多的消息需要处理，并且监听器onMessage（）方法中的业务逻辑也相对比较复杂，为了加快队列消息的读取、处理速度。可以通过加快读取速度和加快处理速度来考虑。因此从这两个方面都使用多线程来处理。对于消息处理的业务处理逻辑用线程池来做。对于加快消息监听读取速度可以使用1.使用多个监听器监听一个队列；2.使用一个监听器开启多线程监听。对于上面提到的方法2使用一个监听器开启多线
第一个SpringMvc例子布衣凌宇 spring mvc
第一步：导入需要的包；第二步：配置web.xml文件 <?xml version="1.0" encoding="UTF-8"?> <web-app version="2.5" xmlns="http://java.sun.com/xml/ns/javaee" xmlns:xsi=
我的spring学习笔记15-容器扩展点之PropertyOverrideConfigurer aijuans Spring3
PropertyOverrideConfigurer类似于PropertyPlaceholderConfigurer，但是与后者相比，前者对于bean属性可以有缺省值或者根本没有值。也就是说如果properties文件中没有某个bean属性的内容，那么将使用上下文（配置的xml文件）中相应定义的值。如果properties文件中有bean属性的内容，那么就用properties文件中的值来代替上下
通过XSD验证XML antlove xml schema xsd validation SchemaFactory
1. XmlValidation.java package xml.validation; import java.io.InputStream; import javax.xml.XMLConstants; import javax.xml.transform.stream.StreamSource; import javax.xml.validation.Schem
文本流与字符集百合不是茶 PrintWrite()的使用字符集名字别名获取
文本数据的输入输出; 输入;数据流,缓冲流输出;介绍向文本打印格式化的输出PrintWrite(); package 文本流; import java.io.FileNotFound
ibatis模糊查询sqlmap-mapping-**.xml配置 bijian1013 ibatis
正常我们写ibatis的sqlmap-mapping-*.xml文件时，传入的参数都用##标识，如下所示： <resultMap id="personInfo" class="com.bijian.study.dto.PersonDTO"> <res
java jvm常用命令工具——jdb命令(The Java Debugger) bijian1013 java jvm jdb
用来对core文件和正在运行的Java进程进行实时地调试，里面包含了丰富的命令帮助您进行调试，它的功能和Sun studio里面所带的dbx非常相似，但 jdb是专门用来针对Java应用程序的。现在应该说日常的开发中很少用到JDB了，因为现在的IDE已经帮我们封装好了，如使用ECLI
【Spring框架二】Spring常用注解之Component、Repository、Service和Controller注解 bit1129 controller
在Spring常用注解第一步部分【Spring框架一】Spring常用注解之Autowired和Resource注解（http://bit1129.iteye.com/blog/2114084）中介绍了Autowired和Resource两个注解的功能，它们用于将依赖根据名称或者类型进行自动的注入，这简化了在XML中，依赖注入部分的XML的编写，但是UserDao和UserService两个bea
cxf wsdl2java生成代码super出错,构造函数不匹配 bitray super
由于过去对于soap协议的cxf接触的不是很多,所以遇到了也是迷糊了一会.后来经过查找资料才得以解决. 初始原因一般是由于jaxws2.2规范和jdk6及以上不兼容导致的.所以要强制降为jaxws2.1进行编译生成.我们需要少量的修改: 我们原来的代码 wsdl2java com.test.xxx -client http://..... 修改后的代
动态页面正文部分中文乱码排障一例 ronin47
公司网站一部分动态页面，早先使用apache+resin的架构运行，考虑到高并发访问下的响应性能问题，在前不久逐步开始用nginx替换掉了apache。不过随后发现了一个问题，随意进入某一有分页的网页，第一页是正常的（因为静态化过了）；点“下一页”，出来的页面两边正常，中间部分的标题、关键字等也正常，唯独每个标题下的正文无法正常显示。因为有做过系统调整，所以第一反应就是新上
java-54- 调整数组顺序使奇数位于偶数前面 bylijinnan java
import java.util.Arrays; import java.util.Random; import ljn.help.Helper; public class OddBeforeEven { /** * Q 54 调整数组顺序使奇数位于偶数前面 * 输入一个整数数组，调整数组中数字的顺序，使得所有奇数位于数组的前半部分，所有偶数位于数组的后半
从100PV到1亿级PV网站架构演变 cfyme 网站架构
一个网站就像一个人，存在一个从小到大的过程。养一个网站和养一个人一样，不同时期需要不同的方法，不同的方法下有共同的原则。本文结合我自已14年网站人的经历记录一些架构演变中的体会。 1：积累是必不可少的架构师不是一天练成的。 1999年，我作了一个个人主页，在学校内的虚拟空间，参加了一次主页大赛，几个DREAMWEAVER的页面，几个TABLE作布局，一个DB连接，几行PHP的代码嵌入在HTM
[宇宙时代]宇宙时代的GIS是什么？ comsci Gis
我们都知道一个事实，在行星内部的时候，因为地理信息的坐标都是相对固定的，所以我们获取一组GIS数据之后，就可以存储到硬盘中，长久使用。。。但是，请注意，这种经验在宇宙时代是不能够被继续使用的宇宙是一个高维时空
详解create database命令 czmmiao database
完整命令 CREATE DATABASE mynewdb USER SYS IDENTIFIED BY sys_password USER SYSTEM IDENTIFIED BY system_password LOGFILE GROUP 1 ('/u01/logs/my/redo01a.log','/u02/logs/m
几句不中听却不得不认可的话 datageek
1、人丑就该多读书。 2、你不快乐是因为：你可以像猪一样懒，却无法像只猪一样懒得心安理得。 3、如果你太在意别人的看法，那么你的生活将变成一件裤衩，别人放什么屁，你都得接着。 4、你的问题主要在于：读书不多而买书太多，读书太少又特爱思考，还他妈话痨。 5、与禽兽搏斗的三种结局：(1)、赢了，比禽兽还禽兽。(2)、输了，禽兽不如。(3)、平了，跟禽兽没两样。结论：选择正确的对手很重要。 6
1 14:00 PHP中的“syntax error, unexpected T_PAAMAYIM_NEKUDOTAYIM”错误 dcj3sjt126com PHP
原文地址：http://www.kafka0102.com/2010/08/281.html 因为需要，今天晚些在本机使用PHP做些测试，PHP脚本依赖了一堆我也不清楚做什么用的库。结果一跑起来，就报出类似下面的错误：“Parse error: syntax error, unexpected T_PAAMAYIM_NEKUDOTAYIM in /home/kafka/test/
xcode6 Auto layout and size classes dcj3sjt126com ios
官方GUI https://developer.apple.com/library/ios/documentation/UserExperience/Conceptual/AutolayoutPG/Introduction/Introduction.html iOS中使用自动布局（一） http://www.cocoachina.com/ind
通过PreparedStatement批量执行sql语句【sql语句相同，值不同】梦见x光 sql 事务批量执行
比如说：我有一个List需要添加到数据库中，那么我该如何通过PreparedStatement来操作呢？ public void addCustomerByCommit(Connection conn , List<Customer> customerList) { String sql = "inseret into customer(id
程序员必知必会----linux常用命令之十【系统相关】 hanqunfeng Linux常用命令
一.linux快捷键 Ctrl+C : 终止当前命令 Ctrl+S : 暂停屏幕输出 Ctrl+Q : 恢复屏幕输出 Ctrl+U : 删除当前行光标前的所有字符 Ctrl+Z : 挂起当前正在执行的进程 Ctrl+L : 清除终端屏幕，相当于clear 二.终端命令 clear : 清除终端屏幕 reset : 重置视窗，当屏幕编码混乱时使用 time com
NGINX IXHONG nginx
pcre 编译安装 nginx conf/vhost/test.conf upstream admin { server 127.0.0.1:8080; } server { listen 80; &
设计模式--工厂模式 kerryg 设计模式
工厂方式模式分为三种： 1、普通工厂模式：建立一个工厂类，对实现了同一个接口的一些类进行实例的创建。 2、多个工厂方法的模式：就是对普通工厂方法模式的改进，在普通工厂方法模式中，如果传递的字符串出错，则不能正确创建对象，而多个工厂方法模式就是提供多个工厂方法，分别创建对象。 3、静态工厂方法模式：就是将上面的多个工厂方法模式里的方法置为静态，
Spring InitializingBean/init-method和DisposableBean/destroy-method mx_xiehd java spring bean xml
1.initializingBean/init-method 实现org.springframework.beans.factory.InitializingBean接口允许一个bean在它的所有必须属性被BeanFactory设置后，来执行初始化的工作，InitialzingBean仅仅指定了一个方法。通常InitializingBean接口的使用是能够被避免的，（不鼓励使用，因为没有必要
解决Centos下vim粘贴内容格式混乱问题 qindongliang1922 centos vim
有时候，我们在向vim打开的一个xml，或者任意文件中，拷贝粘贴的代码时，格式莫名其毛的就混乱了，然后自己一个个再重新，把格式排列好，非常耗时，而且很不爽，那么有没有办法避免呢？答案是肯定的，设置下缩进格式就可以了，非常简单：在用户的根目录下直接vi ~/.vimrc文件然后将set pastetoggle=<F9> 写入这个文件中，保存退出，重新登录，
netty大并发请求问题 tianzhihehe netty
多线程并发使用同一个channel java.nio.BufferOverflowException: null at java.nio.HeapByteBuffer.put(HeapByteBuffer.java:183) ~[na:1.7.0_60-ea] at java.nio.ByteBuffer.put(ByteBuffer.java:832) ~[na:1.7.0_60-ea]
Hadoop NameNode单点问题解决方案之一 AvatarNode wyz2009107220 NameNode
我们遇到的情况 Hadoop NameNode存在单点问题。这个问题会影响分布式平台24*7运行。先说说我们的情况吧。我们的团队负责管理一个1200节点的集群(总大小12PB)，目前是运行版本为Hadoop 0.20，transaction logs写入一个共享的NFS filer(注：NetApp NFS Filer)。经常遇到需要中断服务的问题是给hadoop打补丁。 DataNod

muduo网络库学习之EventLoop（四）：EventLoopThread 类、EventLoopThreadPool 类

你可能感兴趣的:(muduo网络库学习)