weixin_34236869
weixin_34236869

深入理解Openstack QoS控制实现与实践

 

深入理解Openstack QoS控制实现与实践_第1张图片

0.什么是QoSFrom

Wikipedia:

Quality of service (QoS) is the overall performance of a telephony or computer network, particularly the performance seen by the users of the network. To quantitatively measure quality of service, several related aspects of the network service are often considered, such as error rates, bit rate, throughput, transmission delay, availability, jitter, etc.

简单来说，QoS是一种控制机制，提供针对不同用户或者不同数据流采用相应不同的优先级，或者根据应用程序的要求，保证数据流的性能达到一定的水准。QoS的保证对于容量有限的网络来说是十分重要的，特别是对于流媒体应用，例如VoIP和IPTV等，因为这些应用常常需要固定的传输率，对延时也比较敏感。

QoS通常指网络上的数据流控制，本文讨论的QoS则更广泛些，不仅包含了传统的网络数据流控制(即网络IO控制)，还包括了本地磁盘的读写控制，比如IOPS等。其中包括两种类型：

  • 质量控制：通过提供不同性能的硬件设备来满足不同应用的性能需求，比如存储设备有SATA、SSD、RAID等。
  • 量化控制：针对应用，对其流量进行严格控制，比如IOPS、网络带宽等。

Openstack同时支持以上两种QoS控制，这些组件包括但不限于计算服务Nova、网络服务Neutron、块存储服务Cinder、对象存储Swift等，Ceph虽然不是Openstack的组件之一，但通常作为Openstack的存储后端，因此本文也会对其进行简单的介绍。

本文旨在归纳总结Openstack如何在应用层实现QoS控制，读者如果对底层实现原理感兴趣，可以查阅相关资料。

1.Ceph

Ceph是近年来非常火热的开源统一分布式存储系统，最初是Sage Weil在University of California, Santa Cruz(UCSC)的PhD研究内容，目前由Inktank公司掌控Ceph的开发。Ceph同时支持块存储(LVM、裸硬盘)、对象存储(S3、Swift)、文件系统存储(HDFS、GFS)，并且具有高扩展性、高可靠性、高性能的优点。

Ceph其中最广泛的应用之一是作为Openstack的存储后端，为Openstack提供统一分布式存储服务。Openstack组件中Nova、Glance、Cinder都支持直接对接Ceph，云主机的在线迁移、故障转移、镜像存储等功能都依赖于Ceph提供的统一分布式存储服务。

实际在部署时不同的机房或者机架可能配置不同的存储设备，比如SSD固态存储设备、SATA普通硬盘等，rbd image实例使用不同的存储后端，显然能够提供不同的性能。

我们知道ceph是通过crush算法和crush map决定对象如何分布存储的，cursh map描述了存储设备的层级拓扑(可以是物理拓扑，比如机架、机房、区域等，也可以是逻辑拓扑，比如故障域、性能等)，整个map图是一个树状结构，如图：

 
   
     
    
  1.  ssd 
    2.  
    
  2.                /    |     \ 
    3.  
    
  3.               /     |      \ 
    4.  
    
  4.            rack1  rack2   rack3 
    5.  
    
  5.           /    \   ...    /    \ 
    6.  
    
  6.        host-1  host-2 host-m  host-n 
    7.  
    
  7.        /     \   ...   ...    /    \ 
    8.  
    
  8.      osd1   osd2            osd-m  osd-n 
    9.  
   
 
   
其中中间节点由自定义的bucket type实例构成，通常和物理拓扑名称一致，比如room、rack、host等，叶子节点是真正的存储设备，对应一块硬盘或者分区。根据树的结构，每个存储设备(叶子)有唯一一条路径到root节点，该路径定义为crush location，比如：
 
   
 
   
     
    
  1. root=ssd rack=rack1 host=host-1 
    2.  
   
 
   
crush map rule能够制定某个pool的数据放置策略，rule的格式如下：
 
   
 
   
     
    
  1. rule  { 
    2.  
    
  2.  
    3.  
    
  3.         ruleset  
    4.  
    
  4.         type [ replicated | erasure ] 
    5.  
    
  5.         min_size <min-size> 
    6.  
    
  6.         max_size <max-size> 
    7.  
    
  7.         step take name> 
    8.  
    
  8.         step [choose|chooseleaf] [firstn|indep]   
    9.  
    
  9.         step emit 
    10.  
    
  10. } 
    11.  
   
 
   
其中ruleset为rule的id，type用于区分是存储驱动设备(replicated)还是RAID。min_size为最小副本数，如果副本数小于这个数，crush将不会选这个rule，同理max_size为最大副本数。step take开始选择root(注意图上我们只画了一棵树，但crush map可以有多棵树，因此存在多个root type)，choose表示从子树种选择对应的bucket type，其中N表示选择的数量:
 
   
     
    
  • N == 0, 表示设置为pool副本数量;
    •  
    
  • N > 0 && N < replicas,表示真实的数量;
    •  
    
  • N < 0,表示副本数减去该数的绝对值。
    •  
   
 
   
比如:
 
   
 
   
     
    
  1. step choose firstn 1 type rack 
    2.  
   
 
   
表示从当前位置向下迭代遍历随机选择一个rack类型。
 
   
该step必须位于take或者choose之下。
 
   
chooseleaf和choose类似，唯一不同的是在选择的每个bucket中再从中选择一个叶子节点。
 
   
以官方例子说明：
 
   
 
   
     
    
  1. rule ssd-primary { 
    2.  
    
  2.               ruleset 5 
    3.  
    
  3.               type replicated 
    4.  
    
  4.               min_size 5 
    5.  
    
  5.               max_size 10 
    6.  
    
  6.               step take ssd 
    7.  
    
  7.               step chooseleaf firstn 1 type host 
    8.  
    
  8.               step emit 
    9.  
    
  9.               step take sata 
    10.  
    
  10.               step chooseleaf firstn -1 type host 
    11.  
    
  11.               step emit 
    12.  
    
  12.       } 
    13.  
   
 
   
假设冗余副本数为3，则以上规则会首先从ssd中选择其中一个host，然后在host中选择其中一个osd作为主节点，然后从sata中选择3-1=2个host，分别从当中选择一个osd节点，一共两个osd节点作为副本节点。
 
   
注：
 
   
     
    
  • 主节点负责实际和client通信的节点，而副本节点不会直接和client通信，但会和主节点保持数据同步，当主节点挂了，其中一个副本节点会接管主节点。
    •  
    
  • 在写入数据时，主节点会同步到副本节点，只有当所有的副本节点都写完后，主节点才算写成功，因此ceph采取的是强一致性模型(而Swift是最终一致性模型)
    •  
    
  • 可以通过primary-affinity值设置选择为主节点的概率，值为0表示不会被选择为主节点，值为1表示表示选择为主节点的概率极大(考虑到有多个节点都为1的情况)。
    •  
   
 
   
关于crush map 和rule参考官方文档。
 
   
ceph中不同的pool可以定义不同的crush以及ruleset，从而可以实现不同的pool，选择不同的osd，比如固定某个pool选择ssd，另一个pool选择sata，其中官方也有个例子：
 
   
 
   
     
    
  1. device 0 osd.0 
    2.  
    
  2. device 1 osd.1 
    3.  
    
  3. device 2 osd.2 
    4.  
    
  4. device 3 osd.3 
    5.  
    
  5. device 4 osd.4 
    6.  
    
  6. device 5 osd.5 
    7.  
    
  7. device 6 osd.6 
    8.  
    
  8. device 7 osd.7 
    9.  
    
  9.  
    10.  
    
  10.       host ssd-server-1 { 
    11.  
    
  11.               id -1 
    12.  
    
  12.               alg straw 
    13.  
    
  13.               hash 0 
    14.  
    
  14.               item osd.0 weight 1.00 
    15.  
    
  15.               item osd.1 weight 1.00 
    16.  
    
  16.       } 
    17.  
    
  17.  
    18.  
    
  18.       host ssd-server-2 { 
    19.  
    
  19.               id -2 
    20.  
    
  20.               alg straw 
    21.  
    
  21.               hash 0 
    22.  
    
  22.               item osd.2 weight 1.00 
    23.  
    
  23.               item osd.3 weight 1.00 
    24.  
    
  24.       } 
    25.  
    
  25.  
    26.  
    
  26.       host sata-server-1 { 
    27.  
    
  27.               id -3 
    28.  
    
  28.               alg straw 
    29.  
    
  29.               hash 0 
    30.  
    
  30.               item osd.4 weight 1.00 
    31.  
    
  31.               item osd.5 weight 1.00 
    32.  
    
  32.       } 
    33.  
    
  33.  
    34.  
    
  34.       host sata-server-2 { 
    35.  
    
  35.               id -4 
    36.  
    
  36.               alg straw 
    37.  
    
  37.               hash 0 
    38.  
    
  38.               item osd.6 weight 1.00 
    39.  
    
  39.               item osd.7 weight 1.00 
    40.  
    
  40.       } 
    41.  
    
  41.  
    42.  
    
  42.       root sata { 
    43.  
    
  43.               id -5 
    44.  
    
  44.               alg straw 
    45.  
    
  45.               hash 0 
    46.  
    
  46.               item sata-server-1 weight 2.00 
    47.  
    
  47.               item sata-server-2 weight 2.00 
    48.  
    
  48.       } 
    49.  
    
  49.  
    50.  
    
  50.       root ssd { 
    51.  
    
  51.               id -6 
    52.  
    
  52.               alg straw 
    53.  
    
  53.               hash 0 
    54.  
    
  54.               item ssd-server-1 weight 2.00 
    55.  
    
  55.               item ssd-server-2 weight 2.00 
    56.  
    
  56.       } 
    57.  
    
  57.  
    58.  
    
  58.     
    59.  
    
  59.       
    60.  
    
  60.       rule sata { 
    61.  
    
  61.               ruleset 1 
    62.  
    
  62.               type replicated 
    63.  
    
  63.               min_size 0 
    64.  
    
  64.               max_size 10 
    65.  
    
  65.               step take platter 
    66.  
    
  66.               step chooseleaf firstn 0 type host 
    67.  
    
  67.               step emit 
    68.  
    
  68.       } 
    69.  
    
  69.  
    70.  
    
  70.       rule ssd { 
    71.  
    
  71.               ruleset 2 
    72.  
    
  72.               type replicated 
    73.  
    
  73.               min_size 0 
    74.  
    
  74.               max_size 4 
    75.  
    
  75.               step take ssd 
    76.  
    
  76.               step chooseleaf firstn 0 type host 
    77.  
    
  77.               step emit 
    78.  
    
  78.       } 
    79.  
   
 
   
拓扑图如下:
 
   
 
   
     
    
  1.   ssd             |             sata 
    2.  
    
  2.          /        \         |          /        \ 
    3.  
    
  3.         /          \        |         /          \ 
    4.  
    
  4.        /            \       |        /            \ 
    5.  
    
  5. ssd-server-1   ssd-server-2 | sata-server-1  sata-server-2 
    6.  
    
  6.    /     \       /      \   |   /     \        /     \ 
    7.  
    
  7.   /       \     /        \  |  /       \      /       \ 
    8.  
    
  8. osd0     osd1 osd2     osd3 | osd4     osd5   osd6     osd7 
    9.  
   
 
   
我们定义两个rule，假设冗余副本数为3，一个是ssd，它会从ssd中(即左边的树中)中选择osd，另一个是sata，从sata中(即右边的树种)选择osd。
 
   
我们创建两个pool，并关联ruleset：
 
   
 
   
     
    
  1. ceph osd pool set sata crush_ruleset 1 
    2.  
    
  2. ceph osd pool set ssd crush_ruleset 2 
    3.  
   
 
   
通过以上方式我们实现了不同性能的ceph pool，实现QoS质量控制。
 
   
那ceph是否支持量化控制呢，rbd目前好像并不支持控制，但可以通过qemu、kvm等控制读写速率。
 
   
2.Cinder
 
   
介绍完Ceph，接下来终于进入Openstack正题，首先从Cinder谈起。Cinder是Openstack的基础组件之一，提供块存储服务，类似AWS的EBS服务。但是Cinder本身并不提供块服务，而只是一个管理工具，由具体后端实现，后端包括比如LVM、Ceph RBD等，Cinder通过调用对应的驱动来完成volume的生命周期管理。
 
   
下面以Ceph RBD作为存储后端为例，首先介绍如何实现volume的QoS质量控制。Cinder支持多后端存储，不同的后端通过不同的配置组区别开，如：
 
   
 
   
     
    
  1. [sata-ceph] 
    2.  
    
  2. volume_backend_name=sata 
    3.  
    
  3. rbd_pool=sata 
    4.  
    
  4. volume_driver=cinder.volume.drivers.rbd.RBDDriver 
    5.  
    
  5. rbd_ceph_conf=/etc/ceph/ceph.conf 
    6.  
    
  6. ... 
    7.  
    
  7.  
    8.  
    
  8. [ssd-ceph] 
    9.  
    
  9. volume_backend_name=ssd 
    10.  
    
  10. rbd_pool=ssd 
    11.  
    
  11. volume_driver=cinder.volume.drivers.rbd.RBDDriver 
    12.  
    
  12. rbd_ceph_conf=/etc/ceph/ceph.conf 
    13.  
    
  13. ... 
    14.  
   
 
   
以上有两个配置组，分别为sata-ceph和ssd-ceph，这里我们都使用了ceph rbd作为存储后端，实际部署时可以是完全不同的存储后端，比如混合rbd和LVM。以上我们指定了不同pool以及不同的后端名称，后端名称是为了方便后续创建volume type引用。我们由上面关于Ceph中介绍可知，不同的pool可以定义不同的rule从而选择不同特性的硬件，如果能够绑定Ceph pool和volume问题就解决了，值得庆幸的是，Cinder就是这么实现的。
 
   
Cinder自定义volume type，分别创建ssd和sata两个volume type:
 
   
 
   
     
    
  1. cinder type-create ssd 
    2.  
    
  2. cinder type-create sata 
    3.  
   
 
   
创建完后type后绑定volume_backend_name从而实现与ceph pool关联起来:
 
   
 
   
     
    
  1. cinder type-key sata set volume_backend_name=sata 
    2.  
    
  2. cinder type-key ssd set volume_backend_name=ssd 
    3.  
   
 
   
查看extra-specs：
 
   
 
   
     
    
  1. [[email protected].in ~ ]$ cinder extra-specs-list 
    2.  
    
  2. +--------------------------------------+------+-----------------------------------+ 
    3.  
    
  3. |                  ID                  | Name |            extra_specs            | 
    4.  
    
  4. +--------------------------------------+------+-----------------------------------+ 
    5.  
    
  5. | 1a0cb988-58a6-43bf-b4ea-199e0e02239b | sata | {u'volume_backend_name': u'sata'} | 
    6.  
    
  6. | 38344c5c-b61b-4677-9a48-e70d723b8620 | ssd  |  {u'volume_backend_name': u'ssd'} | 
    7.  
    
  7. +--------------------------------------+------+-----------------------------------+ 
    8.  
   
 
   
此时只需要在创建时指定volume type就可以实现创建不同QoS性能的数据卷，比如：
 
   
 
   
     
    
  1. cinder create --volume-type ssd --display-name int32bit-test-ssd 1 
    2.  
   
 
   
以上我们通过自定义volume type并绑定不同的后端实现了对volume访问的QoS质量控制，接下来我们介绍如何通过制定volume type实现不同的QoS量化控制。和前面的步骤类似，首先创建一个high-iops-type volume type:
 
   
 
   
     
    
  1. cinder type-create high-iops-type 
    2.  
   
 
   
cinder通过qos实例对volume进行量化控制，我们需要创建high-iops，设置读最大iops为2000，写最大iopos为1000:
 
   
cinder qos-create high-iops consumer="front-end" read_iops_sec=2000 write_iops_sec=1000
 
   
查看qos列表:
 
   
 
   
     
    
  1. $ cinder qos-list 
    2.  
    
  2. +--------------------------------------+-----------+-----------+---------------------------------------------------------+ 
    3.  
    
  3. |                  ID                  |    Name   |  Consumer |                          specs                          | 
    4.  
    
  4. +--------------------------------------+-----------+-----------+---------------------------------------------------------+ 
    5.  
    
  5. | 4ba70d30-eb36-4267-8ee5-5c9cc2f8af32 | high-iops | front-end | {u'write_iops_sec': u'1000', u'read_iops_sec': u'2000'} | 
    6.  
    
  6. +--------------------------------------+-----------+-----------+---------------------------------------------------------+ 
    7.  
   
 
   
其中consumer的合法值为front-end、back-end、both。front-end表示使用前端控制(hypervisor控制，会在libvirt xml文件中定义), 而back-end表示使用后端控制(cinder drivers,需要driver支持)，both表示前后端同时进行QoS控制。
 
   
最后绑定qos实例和volume type实例:
 
   
 
   
     
    
  1. QOS_SPEC_ID=4ba70d30-eb36-4267-8ee5-5c9cc2f8af32 
    2.  
    
  2. VOLUME_TYPE_ID=26e33f06-e011-4cf7-a397-91a00ef0a233 
    3.  
    
  3. cinder qos-associate $QOS_SPEC_ID $VOLUME_TYPE_ID 
    4.  
   
 
   
查看绑定情况:
 
   
 
   
     
    
  1. $ cinder qos-get-association 4ba70d30-eb36-4267-8ee5-5c9cc2f8af32 
    2.  
    
  2. +------------------+----------------+--------------------------------------+ 
    3.  
    
  3. | Association_Type |      Name      |                  ID                  | 
    4.  
    
  4. +------------------+----------------+--------------------------------------+ 
    5.  
    
  5. |   volume_type    | high-iops-type | 26e33f06-e011-4cf7-a397-91a00ef0a233 | 
    6.  
    
  6. +------------------+----------------+--------------------------------------+ 
    7.  
   
 
   
下面我们创建一个volume验证其功能，我们创建时指定volume type为high-iops-type，并挂载到虚拟机中：
 
   
 
   
     
    
  1. cinder create --volume-type high-iops-type --display-name high-iops-test 1 
    2.  
    
  2. SERVER_ID=1ea33417-b577-45cb-83a0-fc412e421811 
    3.  
    
  3. VOLUME_ID=bb2ccbfb-654a-473e-9f35-ae548c8e59e1 
    4.  
    
  4. nova volume-attach $SERVER_ID $VOLUME_ID 
    5.  
   
 
   
查看libvirt xml文件，截取部分disk信息如下:
 
   
 
   
     
    
  1. 'network' device='disk'> 
    2.  
    
  2.       name='qemu' type='raw' cache='writeback'/> 
    3.  
    
  3.       'admin'> 
    4.  
    
  4.         'ceph' uuid='bdf77f5d-bf0b-1053-5f56-cd76b32520dc'/> 
    5.  
    
  5.        
    6.  
    
  6.       'rbd' name='openstack-00/volume-bb2ccbfb-654a-473e-9f35-ae548c8e59e1'> 
    7.  
    
  7.         name='10.0.103.61' port='6789'/> 
    8.  
    
  8.         name='10.0.103.62' port='6789'/> 
    9.  
    
  9.         name='10.0.103.63' port='6789'/> 
    10.  
    
  10.        
    11.  
    
  11.        
    12.  
    
  12.       'vdc' bus='virtio'/> 
    13.  
    
  13.        
    14.  
    
  14.         2000 
    15.  
    
  15.         1000 
    16.  
    
  16.        
    17.  
    
  17.       bb2ccbfb-654a-473e-9f35-ae548c8e59e1 
    18.  
    
  18.       name='virtio-disk2'/> 
    19.  
    
  19.       'pci' domain='0x0000' bus='0x00' slot='0x08' function='0x0'/> 
    20.  
    
  20.      
    21.  
   
 
   
由xml文件可见在iotune中对读写IOPS的控制。
 
   
以上总结了Openstack Cinder的QoS的控制，接下来将介绍Nova实现机制。
 
   
3.Nova
 
   
Nova是Openstack最核心的服务，提供计算服务，其功能类似AWS EC2。官方描述为:
 
   
Nova is an OpenStack project designed to provide power massively scalable, on demand, self service access to compute resources.
 
   
Nova虽然没有直接方式对QoS质量进行控制，但我们可以通过主机集合(Host Aggregate)实现，比如我们有两个计算节点node-1，node-2，配置SSD磁盘，我们创建对应的主机集合并把两个节点加入到该主机集合中:
 
   
 
   
     
    
  1. nova aggregate-create ssd nova 
    2.  
    
  2. nova aggregate-set-metadata ssd ssd=true 
    3.  
    
  3. nova aggregate-add-host ssd node-1 
    4.  
    
  4. nova aggregate-add-host ssd node-2 
    5.  
   
 
   
创建一个新的flavor并设置key指定绑定的key-value:
 
   
 
   
     
    
  1. nova flavor-create ssd.large 6 8192 80 4 
    2.  
    
  2. nova flavor-key set_key --name=ssd.large --key=ssd --value=true 
    3.  
   
 
   
查看flavor:
 
   
 
   
     
    
  1. $ nova flavor-show ssd.large 
    2.  
    
  2. +----------------------------+-------------------+ 
    3.  
    
  3. | Property                   | Value             | 
    4.  
    
  4. +----------------------------+-------------------+ 
    5.  
    
  5. | OS-FLV-DISABLED:disabled   | False             | 
    6.  
    
  6. | OS-FLV-EXT-DATA:ephemeral  | 0                 | 
    7.  
    
  7. | disk                       | 80                | 
    8.  
    
  8. | extra_specs                | {u'ssd': u'true'} | 
    9.  
    
  9. | id                         | 6                 | 
    10.  
    
  10. | name                       | ssd.large         | 
    11.  
    
  11. | os-flavor-access:is_public | True              | 
    12.  
    
  12. | ram                        | 8192              | 
    13.  
    
  13. | rxtx_factor                | 1.0               | 
    14.  
    
  14. | swap                       |                   | 
    15.  
    
  15. | vcpus                      | 4                 | 
    16.  
    
  16. +----------------------------+-------------------+ 
    17.  
   
 
   
此时当用户指定ssd.large flavor时，调度器将筛选具有ssd=true标签的计算节点，其余不满足条件的主机将被过滤掉, 最后在node-1和node-2中选取作为虚拟机的宿主机。
 
   
同样地，Nova可通过flavor的Extra Specs实现QoS量化控制,以下内容直接参考官方文档-compute flavors：
 
   
比如限制IO最大读写速率为10MB/s:
 
   
 
   
     
    
  1. openstack flavor set FLAVOR-NAME \ 
    2.  
    
  2.     --property quota:read_bytes_sec=10240000 \ 
    3.  
    
  3.     --property quota:write_bytes_sec=10240000 
    4.  
   
 
   
除了IO控制，还支持CPU以及内存限制：
 
   
CPU
 
   
 
   
     
    
  1. openstack flavor set FLAVOR-NAME \ 
    2.  
    
  2.     --property quota:cpu_quota=10000 \ 
    3.  
    
  3.     --property quota:cpu_period=20000 
    4.  
   
 
   
内存
 
   
 
   
     
    
  1. openstack flavor set FLAVOR-NAME \ 
    2.  
    
  2.     --property quota:memory_shares_level=custom \ 
    3.  
    
  3.     --property quota:memory_shares_share=15 
    4.  
   
 
   
设置虚拟机最大的disk写入数据为10MB/s：
 
   
 
   
     
    
  1. openstack flavor set FLAVOR-NAME \ 
    2.  
    
  2.     --property quota:disk_write_bytes_sec=10485760 
    3.  
   
 
   
另外，除了QoS控制，Flavor的强大之处远不止这些，还支持用户自定义CPU拓扑:
 
   
 
   
     
    
  1. openstack flavor set FLAVOR-NAME \ 
    2.  
    
  2.     --property hw:cpu_sockets=FLAVOR-SOCKETS \ 
    3.  
    
  3.     --property hw:cpu_cores=FLAVOR-CORES \ 
    4.  
    
  4.     --property hw:cpu_threads=FLAVOR-THREADS \ 
    5.  
    
  5.     --property hw:cpu_max_sockets=FLAVOR-SOCKETS \ 
    6.  
    
  6.     --property hw:cpu_max_cores=FLAVOR-CORES \ 
    7.  
    
  7.     --property hw:cpu_max_threads=FLAVOR-THREADS 
    8.  
   
 
   
以及NUMA 拓扑:
 
   
 
   
     
    
  1. openstack flavor set FLAVOR-NAME \ 
    2.  
    
  2.     --property hw:numa_nodes=FLAVOR-NODES \ 
    3.  
    
  3.     --property hw:numa_cpus.N=FLAVOR-CORES \ 
    4.  
    
  4.     --property hw:numa_mem.N=FLAVOR-MEMORY 
    5.  
   
 
   
4.Swift
 
   
Openstack Swift提供对象存储服务，功能类似AWS S3以及Ceph RGW，Swift可以通过配置不同的Storage Policies来实现不同性能的后端存储。具体可参看官方文档Stroage Policie.
 
   
5.Neutron
 
   
Neutron是OpenStack项目中负责提供网络服务的组件，它基于软件定义网络(SDN)的思想，实现了网络虚拟化的资源管理。Neutron支持对虚拟网卡进行带宽流量限制，主要通过QoS Policy实现，需要在neutron server端配置项service_plugins中开启qos插件，参考Neutron QoS。
 
   
以下内容主要参考官方文档实例。首先创建一个Qos Policy:
 
   
 
   
     
    
  1. neutron qos-policy-create bw-limiter 
    2.  
   
 
   
设置带宽：
 
   
 
   
     
    
  1. neutron qos-bandwidth-limit-rule-create bw-limiter --max-kbps 3000 \ 
    2.  
    
  2.   --max-burst-kbps 300 
    3.  
   
 
   
通过neutron port-list找到需要限制带宽的端口(虚拟网卡):
 
   
 
   
     
    
  1. $ neutron port-list 
    2.  
    
  2.  
    3.  
    
  3. +--------------------------------------+----------------------------------+ 
    4.  
    
  4. | id                                   | fixed_ips                        | 
    5.  
    
  5. +--------------------------------------+----------------------------------+ 
    6.  
    
  6. | 0271d1d9-1b16-4410-bd74-82cdf6dcb5b3 | { ... , "ip_address": "10.0.0.1"}| 
    7.  
    
  7. | 88101e57-76fa-4d12-b0e0-4fc7634b874a | { ... , "ip_address": "10.0.0.3"}| 
    8.  
    
  8. | e04aab6a-5c6c-4bd9-a600-33333551a668 | { ... , "ip_address": "10.0.0.2"}| 
    9.  
    
  9. +--------------------------------------+----------------------------------+ 
    10.  
   
 
   
关联port和QoS Policy:
 
   
 
   
     
    
  1. neutron port-update 88101e57-76fa-4d12-b0e0-4fc7634b874a --qos-policy bw-limiter 
    2.  
   
 
   
移除port和Qos Policy的关联:
 
   
 
   
     
    
  1. neutron port-update 88101e57-76fa-4d12-b0e0-4fc7634b874a --no-qos-policy 
    2.  
   
 
   
创建port时可以指定QoS Policy:
 
   
 
   
     
    
  1. neutron port-create private --qos-policy-id bw-limiter 
    2.  
   
 
   
总结
 
   
本文详细介绍了Openstack基础服务的QoS控制，包括质量控制和量化控制，涉及的内容包括:
 
   
     
    
  1. Ceph通过crush map和ruleset选取不同性能的后端存储设备
    2.  
    
  2. Cinder支持多后端存储，Volume type绑定具体的后端从而实现不同性能的后端选择，并且可以自定义QoS实现数据卷的IO读写限制。
    3.  
    
  3. Nova可以通过Host Aggregate的Metadata以及Flavor Extra Specs控制调度器选取符合某些特性的(比如SSD)计算节点，通过Flavor Extra Specs实现虚拟机的IO读写限制。
    4.  
    
  4. Swift 支持多Policy，通过Storage Policies可以实现不同性能的后端存储设备。
    5.  
    
  5. Neutron通过Qos Policy完成对虚拟网卡的带宽限制。
    6.  
   
 
   
由此可见，Openstack同时支持计算、存储和网络的QoS控制，通过QoS控制可以满足不同应用对不同资源的异构需求。
 
   
 
    

        
    
 
    

        
    
 
    
 作者：付广平 
     
 
    
 
    

      来源：51CTO 
    
 
   
 
  
 
 
 


                            

                        

                    

                    
                    

                    
                    
                    

                

                

                    
                

            

        

    

    

        
你可能感兴趣的:(java,后端,swift)

        

            

                
    
                    
  • Long类型前后端数据不一致
                        igotyback
前端
                        
    响应给前端的数据浏览器控制台中response中看到的Long类型的数据是正常的到前端数据不一致前后端数据类型不匹配是一个常见问题，尤其是当后端使用Java的Long类型（64位）与前端JavaScript的Number类型（最大安全整数为2^53-1，即16位）进行数据交互时，很容易出现精度丢失的问题。这是因为JavaScript中的Number类型无法安全地表示超过16位的整数。为了解决这个问
    
                    
    • 
                    
  • LocalDateTime 转 String
                        igotyback
java开发语言
                        
    importjava.time.LocalDateTime;importjava.time.format.DateTimeFormatter;publicclassMain{publicstaticvoidmain(String[]args){//获取当前时间LocalDateTimenow=LocalDateTime.now();//定义日期格式化器DateTimeFormatterformat
    
                    
    • 
                    
  • Linux下QT开发的动态库界面弹出操作（SDL2）
                        13jjyao
QT类qt开发语言sdl2linux
                        
    需求：操作系统为linux，开发框架为qt，做成需带界面的qt动态库，调用方为java等非qt程序难点：调用方为java等非qt程序，也就是说调用方肯定不带QApplication::exec()，缺少了这个，QTimer等事件和QT创建的窗口将不能弹出(包括opencv也是不能弹出)；这与qt调用本身qt库是有本质的区别的思路：1.调用方缺QApplication::exec()，那么我们在接口
    
                    
    • 
                    
  • 使用 FinalShell 进行远程连接（ssh 远程连接 Linux 服务器）
                        编程经验分享
开发工具服务器sshlinux
                        
    目录前言基本使用教程新建远程连接连接主机自定义命令路由追踪前言后端开发，必然需要和服务器打交道，部署应用，排查问题，查看运行日志等等。一般服务器都是集中部署在机房中，也有一些直接是云服务器，总而言之，程序员不可能直接和服务器直接操作，一般都是通过ssh连接来登录服务器。刚接触远程连接时，使用的是XSHELL来远程连接服务器，连接上就能够操作远程服务器了，但是仅用XSHELL并没有上传下载文件的功能
    
                    
    • 
                    
  • DIV+CSS+JavaScript技术制作网页（旅游主题网页设计与制作）云南大理
                        STU学生网页设计
网页设计期末网页作业html静态网页html5期末大作业网页设计web大作业
                        
    ️精彩专栏推荐作者主页:【进入主页—获取更多源码】web前端期末大作业：【HTML5网页期末作业(1000套)】程序员有趣的告白方式：【HTML七夕情人节表白网页制作(110套)】文章目录二、网站介绍三、网站效果▶️1.视频演示2.图片演示四、网站代码HTML结构代码CSS样式代码五、更多源码二、网站介绍网站布局方面：计划采用目前主流的、能兼容各大主流浏览器、显示效果稳定的浮动网页布局结构。网站程
    
                    
    • 
                    
  • 【华为OD机试真题2023B卷 JAVA&JS】We Are A Team
                        若博豆
java算法华为javascript
                        
    华为OD2023（B卷）机试题库全覆盖，刷题指南点这里WeAreATeam时间限制：1秒|内存限制：32768K|语言限制：不限题目描述：总共有n个人在机房，每个人有一个标号（1<=标号<=n），他们分成了多个团队，需要你根据收到的m条消息判定指定的两个人是否在一个团队中，具体的：1、消息构成为：abc，整数a、b分别代
    
                    
    • 
                    
  • 关于城市旅游的HTML网页设计——(旅游风景云南 5页)HTML+CSS+JavaScript
                        二挡起步
web前端期末大作业javascripthtmlcss旅游风景
                        
    ⛵源码获取文末联系✈Web前端开发技术描述网页设计题材，DIV+CSS布局制作,HTML+CSS网页设计期末课程大作业|游景点介绍|旅游风景区|家乡介绍|等网站的设计与制作|HTML期末大学生网页设计作业，Web大学生网页HTML：结构CSS：样式在操作方面上运用了html5和css3，采用了div+css结构、表单、超链接、浮动、绝对定位、相对定位、字体样式、引用视频等基础知识JavaScrip
    
                    
    • 
                    
  • HTML网页设计制作大作业（div+css） 云南我的家乡旅游景点 带文字滚动
                        二挡起步
web前端期末大作业web设计网页规划与设计htmlcssjavascriptdreamweaver前端
                        
    Web前端开发技术描述网页设计题材，DIV+CSS布局制作,HTML+CSS网页设计期末课程大作业游景点介绍|旅游风景区|家乡介绍|等网站的设计与制作HTML期末大学生网页设计作业HTML：结构CSS：样式在操作方面上运用了html5和css3，采用了div+css结构、表单、超链接、浮动、绝对定位、相对定位、字体样式、引用视频等基础知识JavaScript：做与用户的交互行为文章目录前端学习路线
    
                    
    • 
                    
  • node.js学习
                        小猿L
node.jsnode.js学习vim
                        
    node.js学习实操及笔记温故node.js，node.js学习实操过程及笔记~node.js学习视频node.js官网node.js中文网实操笔记githubcsdn笔记为什么学node.js可以让别人访问我们编写的网页为后续的框架学习打下基础，三大框架vuereactangular离不开node.jsnode.js是什么官网：node.js是一个开源的、跨平台的运行JavaScript的运行
    
                    
    • 
                    
  • Low Power概念介绍-Voltage Area
                        飞奔的大虎

                        
    随着智能手机，以及物联网的普及，芯片功耗的问题最近几年得到了越来越多的重视。为了实现集成电路的低功耗设计目标，我们需要在系统设计阶段就采用低功耗设计的方案。而且，随着设计流程的逐步推进，到了芯片后端设计阶段，降低芯片功耗的方法已经很少了，节省的功耗百分比也不断下降。芯片的功耗主要由静态功耗（staticleakagepower）和动态功耗(dynamicpower)构成。静态功耗主要是指电路处于等
    
                    
    • 
                    
  • Java 重写(Override)与重载(Overload)
                        叨唧唧的

                        
    Java重写(Override)与重载(Overload)重写(Override)重写是子类对父类的允许访问的方法的实现过程进行重新编写,返回值和形参都不能改变。即外壳不变，核心重写！重写的好处在于子类可以根据需要，定义特定于自己的行为。也就是说子类能够根据需要实现父类的方法。重写方法不能抛出新的检查异常或者比被重写方法申明更加宽泛的异常。例如：父类的一个方法申明了一个检查异常IOExceptio
    
                    
    • 
                    
  • 简单了解 JVM
                        记得开心一点啊
jvm
                        
    目录♫什么是JVM♫JVM的运行流程♫JVM运行时数据区♪虚拟机栈♪本地方法栈♪堆♪程序计数器♪方法区/元数据区♫类加载的过程♫双亲委派模型♫垃圾回收机制♫什么是JVMJVM是JavaVirtualMachine的简称，意为Java虚拟机。虚拟机是指通过软件模拟的具有完整硬件功能的、运行在一个完全隔离的环境中的完整计算机系统（如：JVM、VMwave、VirtualBox）。JVM和其他两个虚拟机
    
                    
    • 
                    
  • 1分钟解决 -bash: mvn: command not found，在Centos 7中安装Maven
                        Energet!c
开发语言
                        
    1分钟解决-bash:mvn:commandnotfound，在Centos7中安装Maven检查Java环境1下载Maven2解压Maven3配置环境变量4验证安装5常见问题与注意事项6总结检查Java环境Maven依赖Java环境，请确保系统已经安装了Java并配置了环境变量。可以通过以下命令检查：java-version如果未安装，请先安装Java。1下载Maven从官网下载：前往Apach
    
                    
    • 
                    
  • Java企业面试题3
                        马龙强_
java
                        
    1.break和continue的作用(智*图)break：用于完全退出一个循环（如for,while）或一个switch语句。当在循环体内遇到break语句时，程序会立即跳出当前循环体，继续执行循环之后的代码。continue：用于跳过当前循环体中剩余的部分，并开始下一次循环。如果是在for循环中使用continue，则会直接进行条件判断以决定是否执行下一轮循环。2.if分支语句和switch分
    
                    
    • 
                    
  • JVM、JRE和 JDK：理解Java开发的三大核心组件
                        Y雨何时停T
Javajava
                        
    Java是一门跨平台的编程语言，它的成功离不开背后强大的运行环境与开发工具的支持。在Java的生态中，JVM（Java虚拟机）、JRE（Java运行时环境）和JDK（Java开发工具包）是三个至关重要的核心组件。本文将探讨JVM、JDK和JRE的区别，帮助你更好地理解Java的运行机制。1.JVM：Java虚拟机（JavaVirtualMachine）什么是JVM？JVM，即Java虚拟机，是Ja
    
                    
    • 
                    
  • Java面试题精选：消息队列(二)
                        芒果不是芒
Java面试题精选javakafka
                        
    一、Kafka的特性1.消息持久化：消息存储在磁盘，所以消息不会丢失2.高吞吐量：可以轻松实现单机百万级别的并发3.扩展性：扩展性强，还是动态扩展4.多客户端支持：支持多种语言（Java、C、C++、GO、）5.KafkaStreams（一个天生的流处理）:在双十一或者销售大屏就会用到这种流处理。使用KafkaStreams可以快速的把销售额统计出来6.安全机制：Kafka进行生产或者消费的时候会
    
                    
    • 
                    
  • 白骑士的Java教学基础篇 2.5 控制流语句
                        白骑士所长
Java教学java开发语言
                        
    欢迎继续学习Java编程的基础篇！在前面的章节中，我们了解了Java的变量、数据类型和运算符。接下来，我们将探讨Java中的控制流语句。控制流语句用于控制程序的执行顺序，使我们能够根据特定条件执行不同的代码块，或重复执行某段代码。这是编写复杂程序的基础。通过学习这一节内容，你将掌握如何使用条件语句和循环语句来编写更加灵活和高效的代码。条件语句条件语句用于根据条件的真假来执行不同的代码块。if语句‘
    
                    
    • 
                    
  • python语法——三目运算符
                        HappyRocking
pythonpython三目运算符
                        
    在java中，有三目运算符，如：intc=(a>b)?a:b表示c取两者中的较大值。但是在python，不能直接这样使用，估计是因为冒号在python有分行的关键作用。那么在python中，如何实现类似功能呢？可以使用ifelse语句，也是一行可以完成，格式为：aifbelsec表示如果b为True，则表达式等于a，否则等于c。如：c=(aif(a>b)elseb)同样是完成了取最大值的功能。
    
                    
    • 
                    
  • ArrayList 源码解析
                        程序猿进阶
Java基础ArrayListListjava面试性能优化架构设计idea
                        
    ArrayList是Java集合框架中的一个动态数组实现，提供了可变大小的数组功能。它继承自AbstractList并实现了List接口，是顺序容器，即元素存放的数据与放进去的顺序相同，允许放入null元素，底层通过数组实现。除该类未实现同步外，其余跟Vector大致相同。每个ArrayList都有一个容量capacity，表示底层数组的实际大小，容器内存储元素的个数不能多于当前容量。当向容器中添
    
                    
    • 
                    
  • Java爬虫框架（一）--架构设计
                        狼图腾-狼之传说
java框架java任务html解析器存储电子商务
                        
    一、架构图那里搜网络爬虫框架主要针对电子商务网站进行数据爬取，分析，存储，索引。爬虫：爬虫负责爬取，解析，处理电子商务网站的网页的内容数据库：存储商品信息索引：商品的全文搜索索引Task队列：需要爬取的网页列表Visited表：已经爬取过的网页列表爬虫监控平台：web平台可以启动，停止爬虫，管理爬虫，task队列，visited表。二、爬虫1.流程1)Scheduler启动爬虫器，TaskMast
    
                    
    • 
                    
  • Java：爬虫框架
                        dingcho
Javajava爬虫
                        
    一、ApacheNutch2【参考地址】Nutch是一个开源Java实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。Nutch致力于让每个人能很容易,同时花费很少就可以配置世界一流的Web搜索引擎.为了完成这一宏伟的目标,Nutch必须能够做到:每个月取几十亿网页为这些网页维护一个索引对索引文件进行每秒上千次的搜索提供高质量的搜索结果简单来说Nutch支持分
    
                    
    • 
                    
  • python怎么将png转为tif_png转tif
                        weixin_39977276

                        
    发国外的文章要求图片是tif，cmyk色彩空间的。大小尺寸还有要求。比如网上大神多，找到了一段代码，感谢！https://www.jianshu.com/p/ec2af4311f56https://github.com/KevinZc007/image2Tifimportjava.awt.image.BufferedImage;importjava.io.File;importjava.io.Fi
    
                    
    • 
                    
  • springboot+vue项目实战一-创建SpringBoot简单项目
                        苹果酱0567
面试题汇总与解析springboot后端java中间件开发语言
                        
    这段时间抽空给女朋友搭建一个个人博客，想着记录一下建站的过程，就当做笔记吧。虽然复制zjblog只要一个小时就可以搞定一个网站，或者用cms系统，三四个小时就可以做出一个前后台都有的网站，而且想做成啥样也都行。但是就是要从新做，自己做的意义不一样，更何况，俺就是专门干这个的，嘿嘿嘿要做一个网站，而且从零开始，首先呢就是技术选型了，经过一番思量决定选择-SpringBoot做后端，前端使用Vue做一
    
                    
    • 
                    
  • JavaScript 中，深拷贝（Deep Copy）和浅拷贝（Shallow Copy）
                        跳房子的前端
前端面试javascript开发语言ecmascript
                        
    在JavaScript中，深拷贝（DeepCopy）和浅拷贝（ShallowCopy）是用于复制对象或数组的两种不同方法。了解它们的区别和应用场景对于避免潜在的bugs和高效地处理数据非常重要。以下是对深拷贝和浅拷贝的详细解释，包括它们的概念、用途、优缺点以及实现方式。1.浅拷贝（ShallowCopy）概念定义：浅拷贝是指创建一个新的对象或数组，其中包含了原对象或数组的基本数据类型的值和对引用数
    
                    
    • 
                    
  • uniapp map组件自定义markers标记点
                        以对_
uni-app学习记录uni-appjavascript前端
                        
    需求是根据后端返回数据在地图上显示标记点，并且根据数据状态控制标记点颜色，标记点背景通过两张图片实现控制{{item.options.labelName}}exportdefault{data(){return{storeIndex:0,locaInfo:{longitude:120.445172,latitude:36.111387},markers:[//标点列表{id:1,//标记点idin
    
                    
    • 
                    
  • JAVA·一个简单的登录窗口
                        MortalTom
java开发语言学习
                        
    文章目录概要整体架构流程技术名词解释技术细节资源概要JavaSwing是Java基础类库的一部分，主要用于开发图形用户界面（GUI）程序整体架构流程新建项目，导入sql.jar包（链接放在了文末），编译项目并运行技术名词解释一、特点丰富的组件提供了多种可视化组件，如按钮（JButton）、文本框（JTextField）、标签（JLabel）、下拉列表（JComboBox）等，可以满足不同的界面设计
    
                    
    • 
                    
  • 笋丁网页自动回复机器人V3.0.0免授权版源码
                        希希分享
软希网58soho_cn源码资源笋丁网页自动回复机器人
                        
    笋丁网页机器人一款可设置自动回复，默认消息，调用自定义api接口的网页机器人。此程序后端语言使用Golang，内存占用最高不超过30MB，1H1G服务器流畅运行。仅支持Linux服务器部署，不支持虚拟主机，请悉知！使用自定义api功能需要有一定的建站基础。源码下载：https://download.csdn.net/download/m0_66047725/89754250更多资源下载：关注我。安
    
                    
    • 
                    
  • WebMagic：强大的Java爬虫框架解析与实战
                        Aaron_945
Javajava爬虫开发语言
                        
    文章目录引言官网链接WebMagic原理概述基础使用1.添加依赖2.编写PageProcessor高级使用1.自定义Pipeline2.分布式抓取优点结论引言在大数据时代，网络爬虫作为数据收集的重要工具，扮演着不可或缺的角色。Java作为一门广泛使用的编程语言，在爬虫开发领域也有其独特的优势。WebMagic是一个开源的Java爬虫框架，它提供了简单灵活的API，支持多线程、分布式抓取，以及丰富的
    
                    
    • 
                    
  • 博客网站制作教程
                        2401_85194651
javamaven
                        
    首先就是技术框架：后端：Java+SpringBoot数据库：MySQL前端：Vue.js数据库连接：JPA(JavaPersistenceAPI)1.项目结构blog-app/├──backend/│├──src/main/java/com/example/blogapp/││├──BlogApplication.java││├──config/│││└──DatabaseConfig.java
    
                    
    • 
                    
  • 00. 这里整理了最全的爬虫框架（Java + Python）
                        有一只柴犬
爬虫系列爬虫javapython
                        
    目录1、前言2、什么是网络爬虫3、常见的爬虫框架3.1、java框架3.1.1、WebMagic3.1.2、Jsoup3.1.3、HttpClient3.1.4、Crawler4j3.1.5、HtmlUnit3.1.6、Selenium3.2、Python框架3.2.1、Scrapy3.2.2、BeautifulSoup+Requests3.2.3、Selenium3.2.4、PyQuery3.2
    
                    
    • 
                                
  • [星球大战]阿纳金的背叛
                                    comsci

                                    
     
      本来杰迪圣殿的长老是不同意让阿纳金接受训练的......... 
 
    但是由于政治原因,长老会妥协了...这给邪恶的力量带来了机会 
 
    所以......现代的地球联邦接受了这个教训...绝对不让某些年轻人进入学院 
 
   
    
                                
    • 
                                
  • 看懂它，你就可以任性的玩耍了！
                                    aijuans
JavaScript
                                    
              javascript作为前端开发的标配技能，如果不掌握好它的三大特点：1.原型 2.作用域 3. 闭包 ,又怎么可以说你学好了这门语言呢？如果标配的技能都没有撑握好，怎么可以任性的玩耍呢？怎么验证自己学好了以上三个基本点呢，我找到一段不错的代码，稍加改动，如果能够读懂它，那么你就可以任性了。 
function jClass(b
    
                                
    • 
                                
  • Java常用工具包 Jodd
                                    Kai_Ge
javajodd
                                    
    Jodd 是一个开源的 Java 工具集， 包含一些实用的工具类和小型框架。简单，却很强大！  写道   Jodd = Tools + IoC + MVC + DB + AOP + TX + JSON + HTML < 1.5 Mb  
Jodd 被分成众多模块，按需选择，其中 
 
  工具类模块有：  
  
   jodd-core    &nb
    
                                
    • 
                                
  • SpringMvc下载
                                    120153216
springMVC
                                    
    @RequestMapping(value = WebUrlConstant.DOWNLOAD)
	public void download(HttpServletRequest request,HttpServletResponse response,String fileName) {
		OutputStream os = null;
		InputStream is = null;

    
                                
    • 
                                
  • Python 标准异常总结
                                    2002wmj
python
                                    
    Python标准异常总结  
    AssertionError 断言语句（assert）失败   AttributeError 尝试访问未知的对象属性   EOFError 用户输入文件末尾标志EOF（Ctrl+d）   FloatingPointError 浮点计算错误   GeneratorExit generator.close()方法被调用的时候   ImportError 导入模块失
    
                                
    • 
                                
  • SQL函数返回临时表结构的数据用于查询
                                    357029540
SQL Server
                                    
    这两天在做一个查询的SQL，这个SQL的一个条件是通过游标实现另外两张表查询出一个多条数据，这些数据都是INT类型，然后用IN条件进行查询，并且查询这两张表需要通过外部传入参数才能查询出所需数据，于是想到了用SQL函数返回值，并且也这样做了，由于是返回多条数据，所以把查询出来的INT类型值都拼接为了字符串，这时就遇到问题了，在查询SQL中因为条件是INT值，SQL函数的CAST和CONVERST都
    
                                
    • 
                                
  • java 时间格式化 | 比较大小| 时区 个人笔记
                                    7454103
javaeclipsetomcatcMyEclipse
                                    
    个人总结！ 不当之处多多包含！ 
 
  引用   1.0 如何设置 tomcat 的时区： 
         位置：(catalina.bat---JAVA_OPTS  下面加上) 
         set JAVA_OPT
    
                                
    • 
                                
  • 时间获取Clander的用法
                                    adminjun
Clander时间
                                    
    /** 
   * 得到几天前的时间 
   * @param d 
   * @param day 
   * @return 
   */ 
  public static Date getDateBefore(Date d,int day){ 
   Calend
    
                                
    • 
                                
  • JVM初探与设置
                                    aijuans
java
                                    
    JVM是Java Virtual Machine（Java虚拟机）的缩写，JVM是一种用于计算设备的规范，它是一个虚构出来的计算机，是通过在实际的计算机上仿真模拟各种计算机功能来实现的。Java虚拟机包括一套字节码指令集、一组寄存器、一个栈、一个垃圾回收堆和一个存储方法域。 JVM屏蔽了与具体操作系统平台相关的信息，使Java程序只需生成在Java虚拟机上运行的目标代码（字节码）,就可以在多种平台
    
                                
    • 
                                
  • SQL中ON和WHERE的区别
                                    avords

                                    
    SQL中ON和WHERE的区别       
数据库在通过连接两张或多张表来返回记录时，都会生成一张中间的临时表，然后再将这张临时表返回给用户。   www.2cto.com     在使用left jion时，on和where条件的区别如下：    1、 on条件是在生成临时表时使用的条件，它不管on中的条件是否为真，都会返回左边表中的记录。  
    
                                
    • 
                                
  • 说说自信
                                    houxinyou
工作生活
                                    
    自信的来源分为两种,一种是源于实力,一种源于头脑.实力是一个综合的评定,有自身的能力,能利用的资源等.比如我想去月亮上,要身体素质过硬,还要有飞船等等一系列的东西.这些都属于实力的一部分.而头脑不同,只要你头脑够简单就可以了!同样要上月亮上,你想,我一跳,1米,我多跳几下,跳个几年,应该就到了!什么?你说我会往下掉?你笨呀你!找个东西踩一下不就行了吗? 
  
  
无论工作还
    
                                
    • 
                                
  • WEBLOGIC事务超时设置
                                    bijian1013
weblogicjta事务超时
                                    
            系统中统计数据，由于调用统计过程，执行时间超过了weblogic设置的时间，提示如下错误： 
统计数据出错!
原因：The transaction is no longer active - status: 'Rolling Back. [Reason=weblogic.transaction.internal
    
                                
    • 
                                
  • 两年已过去，再看该如何快速融入新团队
                                    bingyingao
java互联网融入架构新团队
                                    
    偶得的空闲，翻到了两年前的帖子 
该如何快速融入一个新团队，有所感触，就记下来，为下一个两年后的今天做参考。 
 
    时隔两年半之后的今天，再来看当初的这个博客，别有一番滋味。而我已经于今年三月份离开了当初所在的团队，加入另外的一个项目组，2011年的这篇博客之后的时光，我很好的融入了那个团队，而直到现在和同事们关系都特别好。大家在短短一年半的时间离一起经历了一
    
                                
    • 
                                
  • 【Spark七十七】Spark分析Nginx和Apache的access.log
                                    bit1129
apache
                                    
    Spark分析Nginx和Apache的access.log，第一个问题是要对Nginx和Apache的access.log文件进行按行解析，按行解析就的方法是正则表达式： 
  
Nginx的access.log解析正则表达式 
  
val PATTERN = """([^ ]*) ([^ ]*) ([^ ]*) (\\[.*\\]) (\&q
    
                                
    • 
                                
  • Erlang patch
                                    bookjovi
erlang
                                    
    Totally five patchs committed to erlang otp, just small patchs. 
IMO, erlang really is a interesting programming language, I really like its concurrency feature. 
but the functional programming style 
    
                                
    • 
                                
  • log4j日志路径中加入日期
                                    bro_feng
javalog4j
                                    
    要用log4j使用记录日志，日志路径有每日的日期，文件大小5M新增文件。 
实现方式 
log4j: 
<appender name="serviceLog"
		class="org.apache.log4j.RollingFileAppender">
      	<param name="Encoding" v
    
                                
    • 
                                
  • 读《研磨设计模式》-代码笔记-桥接模式
                                    bylijinnan
java设计模式
                                    
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ 
 
 



/**
 * 个人觉得关于桥接模式的例子，蜡笔和毛笔这个例子是最贴切的：http://www.cnblogs.com/zhenyulu/articles/67016.html
 * 笔和颜色是可分离的，蜡笔把两者耦合在一起了：一支蜡笔只有一种
    
                                
    • 
                                
  • windows7下SVN和Eclipse插件安装
                                    chenyu19891124
eclipse插件
                                    
    今天花了一天时间弄SVN和Eclipse插件的安装，今天弄好了。svn插件和Eclipse整合有两种方式，一种是直接下载插件包，二种是通过Eclipse在线更新。由于之前Eclipse版本和svn插件版本有差别，始终是没装上。最后在网上找到了适合的版本。所用的环境系统：windows7JDK：1.7svn插件包版本：1.8.16Eclipse：3.7.2工具下载地址：Eclipse下在地址：htt
    
                                
    • 
                                
  • [转帖]工作流引擎设计思路
                                    comsci
设计模式工作应用服务器workflow企业应用
                                    
     作为国内的同行，我非常希望在流程设计方面和大家交流，刚发现篇好文(那么好的文章，现在才发现，可惜)，关于流程设计的一些原理，个人觉得本文站得高，看得远，比俺的文章有深度，转载如下 
 
================================================================================= 
 
自开博以来不断有朋友来探讨工作流引擎该如何
    
                                
    • 
                                
  • Linux 查看内存，CPU及硬盘大小的方法
                                    daizj
linuxcpu内存硬盘大小
                                    
    一、查看CPU信息的命令 
 
[root@R4 ~]# cat /proc/cpuinfo |grep "model name" && cat /proc/cpuinfo |grep "physical id" 
model name : Intel(R) Xeon(R) CPU X5450 @ 3.00GHz 
model name : 
    
                                
    • 
                                
  • linux 踢出在线用户
                                    dongwei_6688
linux
                                    
    两个步骤： 
1.用w命令找到要踢出的用户，比如下面： 
  
[root@localhost ~]# w
 18:16:55 up 39 days,  8:27,  3 users,  load average: 0.03, 0.03, 0.00
USER     TTY      FROM              LOGIN@   IDLE   JCPU   PCPU WHAT
    
                                
    • 
                                
  • 放手吧,就像不曾拥有过一样
                                    dcj3sjt126com

                                    
    内容提要：   
静悠悠编著的《放手吧就像不曾拥有过一样》集结“全球华语世界最舒缓心灵”的精华故事，触碰生命最深层次的感动，献给全世界亿万读者。《放手吧就像不曾拥有过一样》的作者衷心地祝愿每一位读者都给自己一个重新出发的理由，将那些令你痛苦的、扛起的、背负的，一并都放下吧！把憔悴的面容换做一种清淡的微笑，把沉重的步伐调节成春天五线谱上的音符，让自己踏着轻快的节奏，在人生的海面上悠然漂荡，享受宁静与
    
                                
    • 
                                
  • php二进制安全的含义
                                    dcj3sjt126com
PHP
                                    
    PHP里，有string的概念。
string里，每个字符的大小为byte（与PHP相比，Java的每个字符为Character，是UTF8字符，C语言的每个字符可以在编译时选择）。
byte里，有ASCII代码的字符，例如ABC，123，abc，也有一些特殊字符，例如回车，退格之类的。
特殊字符很多是不能显示的。或者说，他们的显示方式没有标准，例如编码65到哪儿都是字母A，编码97到哪儿都是字符
    
                                
    • 
                                
  • Linux下禁用T440s，X240的一体化触摸板(touchpad)
                                    gashero
linuxThinkPad触摸板
                                    
    自打1月买了Thinkpad T440s就一直很火大，其中最让人恼火的莫过于触摸板。 
  
Thinkpad的经典就包括用了小红点(TrackPoint)。但是小红点只能定位，还是需要鼠标的左右键的。但是自打T440s等开始启用了一体化触摸板，不再有实体的按键了。问题是要是好用也行。 
  
实际使用中，触摸板一堆问题，比如定位有抖动，以及按键时会有飘逸。这就导致了单击经常就
    
                                
    • 
                                
  • graph_dfs
                                    hcx2013
Graph
                                    
    package edu.xidian.graph;

class MyStack {
	private final int SIZE = 20;
	private int[] st;
	private int top;

	public MyStack() {
		st = new int[SIZE];
		top = -1;
	}

	public void push(i
    
                                
    • 
                                
  • Spring4.1新特性——Spring核心部分及其他
                                    jinnianshilongnian
spring 4.1
                                    
    目录 
Spring4.1新特性——综述 
Spring4.1新特性——Spring核心部分及其他 
Spring4.1新特性——Spring缓存框架增强 
Spring4.1新特性——异步调用和事件机制的异常处理 
Spring4.1新特性——数据库集成测试脚本初始化 
Spring4.1新特性——Spring MVC增强 
Spring4.1新特性——页面自动化测试框架Spring MVC T
    
                                
    • 
                                
  • 配置HiveServer2的安全策略之自定义用户名密码验证
                                    liyonghui160com

                                    
      
  
具体从网上看 
  
http://doc.mapr.com/display/MapR/Using+HiveServer2#UsingHiveServer2-ConfiguringCustomAuthentication 
  
 
  
   
   LDAP Authentication using OpenLDAP 
   Setting 
    
                                
    • 
                                
  • 一位30多的程序员生涯经验总结
                                    pda158
编程工作生活咨询
                                    
    1.客户在接触到产品之后，才会真正明白自己的需求。 
　　这是我在我的第一份工作上面学来的。只有当我们给客户展示产品的时候，他们才会意识到哪些是必须的。给出一个功能性原型设计远远比一张长长的文字表格要好。 2.只要有充足的时间，所有安全防御系统都将失败。 
　　安全防御现如今是全世界都在关注的大课题、大挑战。我们必须时时刻刻积极完善它，因为黑客只要有一次成功，就可以彻底打败你。   3.
    
                                
    • 
                                
  • 分布式web服务架构的演变
                                    自由的奴隶
linuxWeb应用服务器互联网
                                    
    最开始，由于某些想法，于是在互联网上搭建了一个网站，这个时候甚至有可能主机都是租借的，但由于这篇文章我们只关注架构的演变历程，因此就假设这个时候已经是托管了一台主机，并且有一定的带宽了，这个时候由于网站具备了一定的特色，吸引了部分人访问，逐渐你发现系统的压力越来越高，响应速度越来越慢，而这个时候比较明显的是数据库和应用互相影响，应用出问题了，数据库也很容易出现问题，而数据库出问题的时候，应用也容易
    
                                
    • 
                                
  • 初探Druid连接池之二——慢SQL日志记录
                                    xingsan_zhang
日志连接池druid慢SQL
                                    
    由于工作原因，这里先不说连接数据库部分的配置，后面会补上，直接进入慢SQL日志记录。 
  
1.applicationContext.xml中增加如下配置： 
<bean abstract="true" id="mysql_database" class="com.alibaba.druid.pool.DruidDataSourc
    
                                
    • 
                

            

        

    




    

        

            按字母分类：
            ABCDEFGHIJKLMNOPQRSTUVWXYZ其他