php之任务队列

http://blog.s135.com/httpsqs/

 

 

例如：邮件队列、任务队列、消息队列、Feed队列
用户注册成功，而不是直接给用户发送email，而是把新注册的用户的email插入到邮件任务队列中。由服务器给用户发送邮件。发送成功或发送N次失败的将从队列中清除。

 

-------------------------------

如果是普通的网站，如平均每秒产生的队列消息不超过上百，则用低成本数据库+轮询程序，完全可行．

具体思路如下：

1.　当产生消息时，使用MySQL的表保存产生的新队列消息，并记录一些运行参数
2.　服务器上开启cron(Linux),或开启自动刷新的浏览器窗口（Windows）,比如按半分钟运行一次轮询程序
3.　这些轮询程序每次取出一些队列消息，进行处理，处理成功或是处理失败N次后，删除MySQL队列表中的相关记录

如此反复，即可实现．我觉得这个方式的优点是：
1.　实现最为容易，可行性最好
2.　低成本的开发或是平台部署成本　

在我们的生产环境中，这种方式得到了大量实践，表现良好．


当然，如果确实是＂高性能＂，那么这个问题更不问题，既然需要高性能，说明网站的规模不一般，既然规模不一般，还会缺钱吗？　不缺钱，就可以找这方面的专家去解决．

 

 

 

 

 

 

-------------------------------

 

<?php  
/**  
* 使用共享内存的PHP循环内存队列实现  
* 支持多进程, 支持各种数据类型的存储  
* 注: 完成入队或出队操作,尽快使用unset(), 以释放临界区  
*  
* @author [email protected]  
* @created 2009-12-23  
*/  
class SHMQueue  
{  
    private $maxQSize = 0; // 队列最大长度  
      
    private $front = 0; // 队头指针  
    private $rear = 0;  // 队尾指针  
      
    private $blockSize = 256;  // 块的大小(byte)  
    private $memSize = 25600;  // 最大共享内存(byte)  
    private $shmId = 0;  
      
    private $filePtr = './shmq.ptr';  
      
    private $semId = 0;  
    public function __construct()  
    {          
        $shmkey = ftok(__FILE__, 't');  
          
        $this->shmId = shmop_open($shmkey, "c", 0644, $this->memSize );  
        $this->maxQSize = $this->memSize / $this->blockSize;  
          
         // 申請一个信号量  
        $this->semId = sem_get($shmkey, 1);  
        sem_acquire($this->semId); // 申请进入临界区          
          
        $this->init();  
    }  
      
    private function init()  
    {  
        if ( file_exists($this->filePtr) ){  
            $contents = file_get_contents($this->filePtr);  
            $data = explode( '|', $contents );  
            if ( isset($data[0]) && isset($data[1])){  
                $this->front = (int)$data[0];  
                $this->rear  = (int)$data[1];  
            }  
        }  
    }  
      
    public function getLength()  
    {  
        return (($this->rear - $this->front + $this->memSize) % ($this->memSize) )/$this->blockSize;  
    }  
      
    public function enQueue( $value )  
    {  
        if ( $this->ptrInc($this->rear) == $this->front ){ // 队满  
            return false;  
        }  
          
        $data = $this->encode($value);  
        shmop_write($this->shmId, $data, $this->rear );  
        $this->rear = $this->ptrInc($this->rear);  
        return true;  
    }  
          
    public function deQueue()  
    {  
        if ( $this->front == $this->rear ){ // 队空  
            return false;  
        }  
        $value = shmop_read($this->shmId, $this->front, $this->blockSize-1);  
        $this->front = $this->ptrInc($this->front);  
        return $this->decode($value);  
    }  
      
    private function ptrInc( $ptr )  
    {  
        return ($ptr + $this->blockSize) % ($this->memSize);  
    }  
      
    private function encode( $value )  
    {  
        $data = serialize($value) . "__eof";  
        if ( strlen($data) > $this->blockSize -1 ){  
            throw new Exception(strlen($data)." is overload block size!");  
        }  
        return $data;  
    }  
      
    private function decode( $value )  
    {  
        $data = explode("__eof", $value);  
        return unserialize($data[0]);          
    }  
      
    public function __destruct()  
    {  
        $data = $this->front . '|' . $this->rear;  
        file_put_contents($this->filePtr, $data);  
          
        sem_release($this->semId); // 出临界区, 释放信号量  
    }  
}  

使用的样例代码如下:
// 进队操作

$shmq = new SHMQueue();  
$data = 'test data';  
$shmq->enQueue($data);  
unset($shmq);  
// 出队操作  
$shmq = new SHMQueue();  
$data = $shmq->deQueue();  
unset($shmq);

------------------------------