一. 预备知识
并发编程
同步 ：先执行前面的，然后再执行后面的代码，按顺序依次执行。
异步 ：后面的代码不需要等待前面代码执行完成后才执行。处理比较耗时的操作，可以使用异步：网络请求,数据库操作,文件操作。
并行：线程数量 <= CPU数量
并发：线程数量 > CPU数量
所谓并发编程就是让程序中有多个部分能够并发或同时执行，并发编程带来的好处不言而喻，其中最为关键的两点是提升了执行效率和改善了用户体验。下面简单阐述一下Python中实现并发编程的3种方式：
1.多线程：Python中通过`threading`模块的`Thread`类来支持多线程编程。Python解释器通过GIL（全局解释器锁）来防止多个线程同时执行本地字节码，这个锁对于CPython（Python解释器的官方实现）是必须的，因为CPython的内存管理并不是线程安全的。因为GIL的存在，Python的多线程并不能利用CPU的多核特性。
协程：线程中的，一个进程可以有多个线程， 一个线程可以有多个协程。不能使用多核。
2.多进程：使用多进程可以有效的解决GIL的问题，Python中的`multiprocessing`模块提供了`Process`类来实现多进程，由于进程间的内存是相互隔离的（操作系统对进程的保护），进程间通信（共享数据）必须使用管道、套接字等方式，这一点从编程的角度来讲是比较麻烦的，为此，Python的`multiprocessing`模块提供了一个名为`Queue`的类，它基于管道和锁机制提供了多个进程共享的队列。
3.异步编程（异步I/O）：所谓异步编程是通过调度程序从任务队列中挑选任务，调度程序以交叉的形式执行这些任务，我们并不能保证任务将以某种顺序去执行，因为执行顺序取决于队列中的一项任务是否愿意将CPU处理时间让位给另一项任务。异步编程通常通过多任务协作处理的方式来实现，由于执行时间和顺序的不确定，因此需要通过callback（回调函数v6.0之后已取消）或者`Future`对象来获取任务执行的结果。目前我们使用的Python 3通过`asyncio`模块以及`await`和`async`关键字（Python 3.5中引入，Python 3.7中正式成为关键字）提供了对异步I/O的支持。
asyncio协程
import asyncio
async def fetch ( host) :
"""从指定的站点抓取信息(协程函数)"""
print ( f'Start fetching {host}\n' )
reader, writer = await asyncio. open_connection( host, 80 )
writer. write( b'GET / HTTP/1.1\r\n' )
writer. write( f'Host: {host}\r\n' . encode( ) )
writer. write( b'\r\n' )
await writer. drain( )
line = await reader. readline( )
while line != b'\r\n' :
print ( line. decode( ) . rstrip( ) )
line = await reader. readline( )
print ( '\n' )
writer. close( )
def main ( ) :
"""主函数"""
urls = ( 'www.sohu.com' , 'www.douban.com' , 'www.163.com' )
loop = asyncio. get_event_loop( )
tasks = [ fetch( url) for url in urls]
loop. run_until_complete( asyncio. wait( tasks) )
loop. close( )
if __name__ == 'main' :
main( )
三种方式的使用场景
我们对三种方式的使用场景做一个简单的总结。
以下情况需要使用多线程：
1. 程序需要维护许多共享的状态（尤其是可变状态），Python中的列表、字典、集合都是线程安全的，所以使用线程而不是进程维护共享状态的代价相对较小。
2. 程序会花费大量时间在I/O操作上，没有太多并行计算的需求且不需占用太多的内存。
I/O操作: 网络请求,数据库操作,文件操作
以下情况需要使用多进程：
1. 程序执行计算密集型任务（如：字节码操作、数据处理、科学计算）。
2. 程序的输入可以并行的分成块，并且可以将运算结果合并。
3. 程序在内存使用方面没有任何限制且不强依赖于I/O操作（如：读写文件、套接字等）。
最后，如果程序不需要真正的并发性或并行性，而是更多的依赖于异步处理和回调时，异步I/O就是一种很好的选择。另一方面，当程序中有大量的等待与休眠时，也应该考虑使用异步I/O。
I/O模式和事件驱动
对于一次I/O操作（以读操作为例），数据会先被拷贝到操作系统内核的缓冲区中，然后从操作系统内核的缓冲区拷贝到应用程序的缓冲区（这种方式称为标准I/O或缓存I/O，大多数文件系统的默认I/O都是这种方式），最后交给进程。所以说，当一个读操作发生时（写操作与之类似），它会经历两个阶段：(1)等待数据准备就绪；(2)将数据从内核拷贝到进程中。
由于存在这两个阶段，因此产生了以下几种I/O模式：
1.阻塞 I/O（blocking I/O）：进程发起读操作，如果内核数据尚未就绪，进程会阻塞等待 直到内核数据就绪并拷贝到进程的内存中。
2.非阻塞 I/O（non-blocking I/O）：进程发起读操作，如果内核数据尚未就绪，进程不阻塞而是收到内核返回的错误信息，进程收到错误信息可以再次发起读操作，一旦内核数据准备就绪，就立即将数据拷贝到了用户内存中，然后返回。
3.多路I/O复用（ I/O multiplexing）：监听多个I/O对象，当I/O对象有变化（数据就绪）的时候就通知用户进程。多路I/O复用的优势并不在于它单个I/O操作能处理得更快，而是在于能处理更多的I/O操作。
4.异步I/O（asynchronous I/O）：进程发起读操作后就可以去做别的事情了，内核收到异步读操作后会立即返回，所以用户进程不阻塞，当内核数据准备就绪时，内核发送一个信号给用户进程，告诉它读操作完成了。
通常，我们编写一个处理用户请求的服务器程序时，有以下三种方式可供选择：
1.每收到一个请求，创建一个新的进程，来处理该请求；
2.每收到一个请求，创建一个新的线程，来处理该请求；
3.每收到一个请求，放入一个事件列表，让主进程通过非阻塞I/O方式来处理请求
第1种方式实现比较简单，但由于创建进程开销比较大，会导致服务器性能比较差；
第2种方式，由于要涉及到线程的同步，有可能会面临竞争、死锁等问题；
第3种方式，就是所谓事件驱动的方式，它利用了多路I/O复用和异步I/O的优点，虽然代码逻辑比前面两种都复杂，但能达到最好的性能，这也是目前大多数网络服务器采用的方式。
同步异步，阻塞非阻塞的区别：
同步, 异步: 客户端调用服务器接口时
阻塞, 非阻塞: 服务端发生等待
阻塞 -> 非阻塞
同步 -> 异步
性能优秀的系统一般是:异步非阻塞的方式（Tornado）
异步非阻塞并不是消灭阻塞，而是将阻塞的任务放到不同的执行单元去执行
二. Tornado异步化
在前面的例子中，我们并没有对`RequestHandler`中的`get`或`post`方法进行异步处理，这就意味着，一旦在`get`或`post`方法中出现了耗时间的操作，不仅仅是当前请求被阻塞，按照Tornado框架的工作模式，其他的请求也会被阻塞，所以我们需要对耗时间的操作进行异步化处理。
在Tornado稍早一些的版本中，可以用装饰器实现请求方法的异步化或协程化来解决这个问题。
import tornado. web
import asyncio
import tornado. gen
class MainHandler ( tornado. web. RequestHandler) :
@tornado. gen. coroutine
def get ( self) :
yield from asyncio. sleep( 10 )
self. render( 'index.html' )
import tornado. web
import asyncio
class MainHandler ( tornado. web. RequestHandler) :
async def get ( self) :
await asyncio. sleep( 10 )
self. render( 'index.html' )
练习： 异步百度搜索
class GetUrlHandler ( tornado. web. RequestHandler) :
async def get ( self) :
wd = self. get_argument( 'wd' )
client = AsyncHTTPClient( )
response = await client. fetch( 'http://www.baidu.com/s?wd=%s' % wd)
self. write( response. body)
class GetUrlHandler ( tornado. web. RequestHandler) :
def get ( self) :
wd = self. get_argument( 'wd' )
http_client = HTTPClient( )
response = http_client. fetch( 'http://www.baidu.com/s?wd=%s' % wd)
self. write( response. body)
三. ab网站性能压力测试
网站性能压力测试是服务器网站性能调优过程中必不可缺少的一环。只有让服务器处在高压情况下，才能真正体现出软件、硬件等各种设置不当所暴露出的问题。
性能测试工具目前最常见的有以下几种：ab、http_load、webbench、siege
ab是apache自带的压力测试工具。ab非常实用，它不仅可以对apache服务器进行网站访问压力测试，也可以对或其它类型的服务器进行压力测试。比如nginx、tomcat、IIS等。
一、ab的原理
ab的原理：ab命令会创建多个并发访问线程，模拟多个访问者同时对某一URL地址进行访问。它的测试目标是基于URL的，因此，它既可以用来测试apache的负载压力，也可以测试nginx、lighthttp、tomcat、IIS等其它Web服务器的压力。
ab命令对发出负载的计算机要求很低，它既不会占用很高CPU，也不会占用很多内存。但却会给目标服务器造成巨大的负载，其原理类似CC攻击。自己测试使用也需要注意，否则一次上太多的负载。可能造成目标服务器资源耗完，严重时甚至导致死机。
二、ab的安装
三、ab参数说明
参数说明：
-n 在测试会话中所执行的请求个数。默认时，仅执行一个请求。
-c 一次产生的请求个数。默认是一次一个。
-t 测试所进行的最大秒数。其内部隐含值是-n 50000，它可以使对服务器的测试限制在一个固定的总时间以内。默认时，没有时间限制。
-p 包含了需要POST的数据的文件。
-T POST数据所使用的Content-type头信息。
-v 设置显示信息的详细程度-4或更大值会显示头信息，3或更大值可以显示响应代码(404,200等),2或更大值可以显示警告和其他信息。
-V 显示版本号并退出。
-w 以HTML表的格式输出结果。默认时，它是白色背景的两列宽度的一张表。
-i 执行HEAD请求，而不是GET。
-x 设置属性的字符串。
-X 对请求使用代理服务器。
-y 设置属性的字符串。
-z 设置属性的字符串。
-C 对请求附加一个Cookie:行。其典型形式是name=value的一个参数对，此参数可以重复。
-H 对请求附加额外的头信息。此参数的典型形式是一个有效的头信息行，其中包含了以冒号分隔的字段和值的对(如,"Accept-Encoding:zip/zop;8bit")。
-A 对服务器提供BASIC认证信任。用户名和密码由一个:隔开，并以base64编码形式发送。无论服务器是否需要(即,是否发送了401认证需求代码)，此字符串都会被发送。
-h 显示使用方法。
-d 不显示"percentage served within XX [ms] table"的消息(为以前的版本提供支持)。
-e 产生一个以逗号分隔的(CSV)文件，其中包含了处理每个相应百分比的请求所需要(从1%到100%)的相应百分比的(以微妙为单位)时间。由于这种格式已经“二进制化”，所以比'gnuplot'格式更有用。
-g 把所有测试结果写入一个'gnuplot'或者TSV(以Tab分隔的)文件。此文件可以方便地导入到Gnuplot,IDL,Mathematica,Igor甚至Excel中。其中的第一行为标题。
-i 执行HEAD请求，而不是GET。
-k 启用HTTP KeepAlive功能，即在一个HTTP会话中执行多个请求。默认时，不启用KeepAlive功能。
-q 如果处理的请求数大于150，ab每处理大约10%或者100个请求时，会在stderr输出一个进度计数。此-q标记可以抑制这些信息。
四、ab性能指标
2、并发连接数（The number of concurrent connections）
3、并发用户数（Concurrency Level）
4、用户平均请求等待时间（Time per request）
5、服务器平均请求等待时间（Time per request:across all concurrent requests）
五、ab实际使用
ab -c 10 -n 100 http://www.baidu.com/
其中：
-c 10 表示并发用户数为10
-n 100 表示请求总数为100
http://www.baidu.com 表示请求的目标URL
这行表示同时处理100个请求并运行10次index.php文件。
六、测试结果分析（*表示重要参数）
Requests per second: apache测试出的吞吐率
Server Software表示被测试的Web服务器软件名称。
Server Hostname表示请求的URL主机名。
Server Port表示被测试的Web服务器软件的监听端口。
Document Path表示请求的URL中的根绝对路径，通过该文件的后缀名，我们一般可以了解该请求的类型。
Document Length表示HTTP响应数据的正文长度。
Concurrency Level表示并发用户数，这是我们设置的参数之一。
*Time taken for tests 表示所有这些请求被处理完成所花费的总时间。
Complete requests 表示总请求数量，这是我们设置的参数之一。
Failed requests 表示失败的请求数量，这里的失败是指请求在连接服务器、发送数据等环节发生异常，以及无响应后超时的情况。如果接收到的HTTP响应数据的头信息中含有2XX以外的状态码，则会在测试结果中显示另一个名为“Non-2xx responses”的统计项，用于统计这部分请求数，这些请求并不算在失败的请求中。
Total transferred 表示所有请求的响应数据长度总和，包括每个HTTP响应数据的头信息和正文数据的长度。注意这里不包括HTTP请求数据的长度，仅仅为web服务器流向用户PC的应用层数据总长度。
HTML transferred表示所有请求的响应数据中正文数据的总和，也就是减去了Total transferred中HTTP响应数据中的头信息的长度。
*Requests per second 吞吐率
*Time per request 用户平均请求等待时间
*Time per requet(across all concurrent request)服务器平均请求等待时间，
Transfer rate表示这些请求在单位时间内从服务器获取的数据长度
Percentage of requests served within a certain time（ms）这部分数据用于描述每个请求处理时间的分布情况，比如测试，80%的请求处理时间都不超过6ms，这个处理时间是指前面的Time per request，即对于单个用户而言，平均每个请求的处理时间。
四. 聊天室应用
HTML5 WebSocket
WebSocket 是 HTML5 开始提供的一种在单个 TCP 连接上进行全双工通讯的协议。
WebSocket 使得客户端和服务器之间的数据交换变得更加简单，允许服务端主动向客户端推送数据。在 WebSocket API 中，浏览器和服务器只需要完成一次握手，两者之间就直接可以创建持久性的连接，并进行双向数据传输。
在 WebSocket API 中，浏览器和服务器只需要做一个握手的动作，然后，浏览器和服务器之间就形成了一条快速通道。两者之间就直接可以数据互相传送。
tornado使用websocket
class ChatHandler ( tornado. websocket. WebSocketHandler) :
user_list = [ ]
def open ( self, * args: str , ** kwargs: str ) :
self. user_list. append( self)
for user in self. user_list:
username = self. get_secure_cookie( 'username' ) . decode( )
user. write_message( '%s enter room' % username)
def on_message ( self, message) :
for user in self. user_list:
username = self. get_secure_cookie( 'username' ) . decode( )
user. write_message( '%s:%s' % ( username, message) )
def on_close ( self) :
self. user_list. remove( self)
for user in self. user_list:
username = self. get_secure_cookie( 'username' ) . decode( )
user. write_message( '%s leave room' % ( username) )
html5使用websocket
< htmllang = " en" > < head> < metacharset = " UTF-8" > < title> title > < scriptsrc = " https://code.jquery.com/jquery-3.0.0.min.js" > script > head > < body> < p> p > < divid = " chat" style =" width : 300px; height : 300px; border : 1px solid #000000; " > div > < inputtype = " text" name = " content" id = " content" > < inputtype = " button" id = " btn" value = " 提交" > < script>
< ! -- 建立连接-- >
var websocket = new WebSocket ( 'ws://127.0.0.1:80/chat/' )
< ! -- 获取后端返回的数据-- >
websocket. onmessage = function ( e) {
console. log ( e. data)
$ ( '#chat' ) . append ( ' )
$ ( '#chat' ) . append ( e. data)
}
$ ( '#btn' ) . click ( function ( ) {
< ! -- 向后端发送数据-- >
var content = $ ( '#content' ) . val ( )
websocket. send ( content)
} ) ;
script > body >
你可能感兴趣的:(qfxx,Tornado框架的学习)
python抓取网页内容401应该用哪个库_python3使用requests模块爬取页面内容入门
坂田月半
python的爬虫相关模块有很多，除了requests模块，再如urllib和pycurl以及tornado等。相比而言，requests模块是相对简单易上手的。通过文本，大家可以迅速学会使用python的requests模块爬取页码内容。1.Requests唯一的一个非转基因的PythonHTTP库，人类可以安全享用。官网：http://cn.python-requests.org/zh_CN/
用python写1个简单的聊天服务器3-TCP服务器选择
watsy
python ios开发
有了文章2的分析以后下面需要做的事情是选择1个TCP服务器。自己写1个TCP服务器考虑到快速实现，不现实。最终有3个框架twistedgeventtornadogoogle了一下资料以后。考虑geventtornado比较理想的目标是gevent，不过测试1天，作为tcp服务器时候。read函数并没有补丁为非阻塞方法。放弃剩下的就是tornadogoogle一下tornadotcp服务器资料，发现
使用Tornado部署Flask项目
二进制杯莫停
# Tornado tornado flask python
Tornado不仅仅是一个WEB框架，也可以是一个WEB服务器。在Tornado中我们可以使用wsgi模块下的WSGIContainer类运行其他WSGI应用如：Fask,Bottle,Django。首先我们写一个最小的Flask应用#hello.pyfromflaskimportFlaskapp=Flask(__name__)@app.route("/")defhello():return"He
Python 协程 & 异步编程 (asyncio) 入门介绍
linmeiyun
后端 python python 爬虫 学习 开发语言 机器学习
在近期的编码工作过程中遇到了async和await装饰的函数，查询资料后了解到这种函数是基于协程的异步函数。这类编程方式称为异步编程，常用在IO较频繁的系统中，如：Tornadoweb框架、文件下载、网络爬虫等应用。协程能够在IO等待时间就去切换执行其他任务，当IO操作结束后再自动回调，那么就会大大节省资源并提供性能。接下来便简单的讲解一下异步编程相关概念以及案例演示。1.协程简介1.1协程的含义
pythontcp服务器框架_Python Tornado框架（TCP层）
weixin_39724441
pythontcp服务器框架
Tornado在TCP层里的工作机制上一节是关于应用层的协议HTTP，它依赖于传输层协议TCP，例如服务器是如何绑定端口的？HTTP服务器的handle_stream是在什么时候被调用的呢？本节聚焦在TCP层次的实现，以便和上节的程序流程衔接起来。首先是关于TCP协议。这是一个面向连接的可靠交付的协议。由于是面向连接，所以在服务器端需要分配内存来记忆客户端连接，同样客户端也需要记录服务器。由于保证
Python：Django 和 Tornado 的关系
ac-er8888
python django tornado
Django和Tornado是两个用于Python编程语言的非常流行的web框架，但它们在设计理念、应用场景和性能特性上有显著的不同。DjangoDjango是一个高级别的PythonWeb框架，它鼓励快速开发和干净、实用的设计。Django遵循MVC（模型-视图-控制器）设计模式，但Django社区更喜欢将其称为MTV（模型-模板-视图），因为它稍微改变了这些组件之间的交互方式。Django提供
tornado获取请求参数
youhebuke225
tornado tornado python 开发语言
在Tornado框架中，获取请求参数（包括查询字符串参数、表单数据、JSON数据等）可以通过RequestHandler类提供的方法来完成。以下是一些常用的方法来获取不同类型的请求参数：1.获取查询字符串参数查询字符串参数是附加在URL后面的键值对，用于传递信息。例如，在URLhttp://example.com/page?key1=value1&key2=value2中，key1和key2是参数
python gui web_python无法使用gui两个Python web框架：Django & Tornado比较
weixin_39762666
python gui web
在各种语言平台中，python涌现的web框架恐怕是最多的；猜想原因应该是在py中构造框架十分简单，使得轮子不断被发明。这里记述一下我了解过的两个pyweb框架，供大家参考，希望能起他山之石的作用。DjangoDjango应该是最出名的py框架，GoogleAppEngine甚至Erlang都有框架受它影响。Django是走大而全的方向，它最出名的是其全自动化的管理后台：只需要使用起ORM，做简单
python网页展示框架_Python网页框架：Django和Tornado
weixin_39832965
python网页展示框架
原标题：Python网页框架：Django和TornadoPython部落组织翻译，禁止转载，欢迎转发软件开发者杂志，CPOL，2013年10月29日学习Django和Tornado这篇文章的作者是MichaelD'Agosta，也首次被发表在软件开发者杂志的第201308期中。你可以在软件开发者杂志上找到更多文章。前言很久之前，随处可见的是把“服务端页面”放到一起，并将它们和一个数据库连接起来，
Python Web 框架：Django, Tornado
buptshirly
tornado python
原文连接https://zhuanlan.zhihu.com/p/25978330DjangoDjango是一个高级的PythonWeb框架，支持快速开发，简洁、实用的设计。如果你正在建一个和电子商务网站相似的应用，那你应该选择用Django框架。它能使你快速完成工作，也不必担心太多的技术选择。它能提供从模版引擎到ORM所需的一切东西。用Django构建你的app的时候，你必须要遵循Django的
Python3学习（六十一）：Python对Tornado请求与响应的数据处理
猪笨是念来过倒
Python python tornado
获取查询字符串参数get_query_argument(name,default=_ARG_DEFAULT,strip=True)从请求的查询字符串中返回指定参数name的值，如果出现多个同名参数，则返回最后一个的值；default为路由中未传name参数时返回的默认值，如default未设置，则会抛出tornado.web.MissingArgumentError异常；strip表示是否过滤掉左
Python基础进阶知识点
小小毛球球
Python学习 算法 青少年编程 python c语言 学习
一、Web开发同步框架：Django、Flask；异步框架：Tornado、Sanic；Tornado框架；Git版本控制；HTTP方法以及响应码；关系型数据库：MySQL、PostgreSQL、Oracle；非关系型数据库：Redis、Mongo；日志；项目的部署；实战练习。二、爬虫爬虫应用领域；爬虫的合法性：Robots.txt；HTTP请求：请求行、请求头，请求体；响应：响应码、响应头、响应
（2018-05-25.Python从Zero到One）8、（Tornado）关于tornado__1.2.3httpserver
lyh165
2.3httpserver上一节我们说在tornado.web.Application.listen()（示例代码中的app.listen(8000)）的方法中，创建了一个http服务器示例并绑定到给定端口，我们能不能自己动手来实现这一部分功能呢？现在我们修改上一示例代码如下：#coding:utf-8importtornado.webimporttornado.ioloopimporttorna
Android程序员的Java后台学习建议
Androidgiao
作为一个原生Android开发，一路走来经历了Java、Kotlin的洗礼；在“原生要凉”的氛围下学习Cordova、ReactNative、Weex、Flutter等跨平台框架；之后又在“大前端”的口号下延伸到React、Vue等前端框架的学习；最终面对“全栈”的诱惑，又撸起了SpringBoot的Javaweb开发。image.pngAndroid开发作为“安身立命”的资本，在面对如今“移动要
Python学习
1eb034fb5715
Tornado是一个PythonWeb框架和异步网络库，通过使用非阻塞网络I/O，Tornado可以扩展到数万个开放连接，WebSockets等需要与每个用户建立长期连接的应用程序。
放假归来？
宇_盟
粽子节放假回来上班第一天，没有太多的任务。但压力却是很大，职级职等的申请，新框架的学习，代码评审的准备，以及对我侄女的想念。听到一个妹子在说职级职等的事情，我的心就乱了。有点嫉妒别人有所成就，有点羡慕别人的能力。我发现，一天当中，会发生很多不顺心或者不顺利的事情，或者让人纠结的事情：1、看到别的女生能力强，能够对工作对技术有自己的想法和计划，就很忧桑；2、代码有bug时，或者出现很弱智的问题时，就
【小沐学前端】Golang实现Web服务器
爱看书的小沐
Web golang go语言 web server web服务器 服务器
Web服务器系列相关文章编写如下：【Web开发】Node.js实现Web服务器（http模块）【Web开发】Node.js实现Web服务器（express模块）【Web开发】Python实现Web服务器（Flask入门）【Web开发】Python实现Web服务器（Flask测试）【Web开发】Python实现Web服务器（Tornado入门）【Web开发】Python实现Web服务器（Tornad
Python的7种数据类型
运维仙人
Python
摘录于《Python高效开发实战:Django、Tornado、Flask、Twisted》书籍，回顾知识点，供大家参考。1、Number类型移位计算：将数字3转为2进制表示：11往右移一位为：1往左移一位为：110总结为：往左移几位就补多少个0，往右移动几位就是从右往左第几为抹掉。2、Sequence类型簇3、String类型4、Tuple类型5、List类型6、Set类型7、Dictionar
pip下载第三方库失败的问题（查了几个小时，终于解决问题！！）
henu-于笨笨
pytorch环境配置 pip python 深度学习
新安装conda之后，pip出现的问题1.pip版本低，cmd一直提示你提升版本，查询了百度上面很多方法，给出了一条命令语句python-mpipinstall--upgradepip没用，无法解决问题2.出现大量的警告和报错百度查询的办法是配置环境变量，没用3.使用最新版本和最新版本+清华源的镜像下载还是报错最终解决，改用豆瓣源镜像，并加上信任动作pipinstalltornado-ihttp:
Netty（1）线程模型
有机后浪
Netty netty java 多线程
前言对于Netty框架的学习前置知识点：线程模型目录线程模型概述传统阻塞IO线程模型Reactor基本思想单Reactor单线程单Reactor多线程主从Reactor多线程总结线程模型概述在学习Netty线程模型之前，先要搞清楚各个线程模型的发展过程，再进行Netty线程模型的了解现有的线程模型：传统阻塞IO线程模型（也就是BIO）Reactor模式其中Reactor模式根据Reactor的数量
Tornado提纲
月守护
Tornado tornado
pipinstalltornado源码安装https://pypi.python.org/packages/source/t/tornado/tornado-4.3.tar.gz注：Toanado系列内容都是和Django比对学习，默认有django基础Toanado不像Django那样，在创建对应项目之后，很多东西自动生成了，Toanado就像一个普通的第三方库一样，你可以导入使用，但很多东西都
（大纲42）Python08tornado 第2节、初识Tornado
lyh165
8、Tornado2、初识Tornado1.2.0初识Tornado1.2.1安装1.2.2HelloItcast1.2.3httpserver1.2.4options1.2.5练习
Python学习之路-Tornado基础:部署
geobuins
python 学习 tornado
Python学习之路-Tornado基础:部署部署Tornado简介为了充分利用多核CPU，并且为了减少同步代码中的阻塞影响，在部署Tornado的时候需要开启多个进程（最好为每个CPU核心开启一个进程）因为Tornado自带的服务器性能很高，所以我们只需开启多个Tornado进程。为了对外有统一的接口，并且可以分发用户的请求到不同的Tornado进程上，我们用Nginx来进行代理。supervi
Python学习之路-Tornado基础:异步与WebSocket
geobuins
python 学习 tornado
Python学习之路-Tornado基础:异步与WebSocket认识异步同步我们用两个函数来模拟两个客户端请求，并依次进行处理：#coding:utf-8defreq_a():"""模拟请求a"""print('开始处理请求req_a')print('完成处理请求req_a')defreq_b():"""模拟请求b"""print('开始处理请求req_b')print('完成处理请求req_b
Python学习之路-Tornado基础:数据库
geobuins
python 学习 tornado
Python学习之路-Tornado基础:数据库简介与Django框架相比，Tornado没有自带ORM，对于数据库需要自己去适配。我们使用MySQL数据库。在Tornado3.0版本以前提供tornado.database模块用来操作MySQL数据库，而从3.0版本开始，此模块就被独立出来，作为torndb包单独提供。torndb只是对MySQLdb的简单封装，不支持Python3。连接初始化我
Python学习之路-Tornado基础:安全应用
geobuins
python 学习 tornado
Python学习之路-Tornado基础:安全应用Cookie对于RequestHandler，除了在初始Tornado中讲到的之外，还提供了操作cookie的方法。设置set_cookie(name,value,domain=None,expires=None,path=‘/’,expires_days=None)参数说明：参数名说明namecookie名valuecookie值domain提交
三分钟了解 Python3 的异步 Web 框架 FastAPI
又拍云 UPYUN
api API JAVA JDK Netbeans
快速编码，功能完善。从启动到部署，实例详解异步py3框架选择FastAPI的原因。FastAPI介绍FastAPI与其它Python-Web框架的区别在FastAPI之前，Python的Web框架使用的是django、flask、tornado三种Web框架。django自带admin，可快速构建，但是比较笨重。如果是mvc形式的开发，很多已经封装好了，的确蛮合适。但如果是restful风格设计，
pythonpecan教程_python后台Flask 快速入门
weixin_39524574
pythonpecan教程
全栈工程师开发手册(作者：栾鹏)在pythonweb框架的世界里充满了选择。有Django，Flask，Pyramid，Tornado，Bottle，Diesel，Pecan，Falcon等等的来吸引开发者的注意。作为一个开发者，你想要从中选择一个框架来帮你完成项目，并且能继续做大事情。关于读者该选择哪个框架，这里不做选择，本文带大家入门flask框架。安装Flaskpipinstallflask
自己动手写个微型 CSDN 吧，还能实现网页版 Blink，No.1
梦想橡皮擦
橡皮擦，一个逗趣的互联网高级网虫。新的系列，让我们一起进入Django世界。十九、微微型CSDN项目Django框架的学习之旅还在继续，预计再有10篇以上才可以封笔，果然框架系列专栏是最难写的。接下来的几篇博客将基于Django框架完成一个微型的CSDN博客项目，要实现的核心功能是发布博客以及发布Blink，还会实现博客中的评论与友情链接功能。该项目特别适合作为大学期末项目，如果你看到了本项目，要
计算机设计大赛 深度学习 植物识别算法系统
iuerfee
python
文章目录0前言2相关技术2.1VGG-Net模型2.2VGG-Net在植物识别的优势(1)卷积核，池化核大小固定(2)特征提取更全面(3)网络训练误差收敛速度较快3VGG-Net的搭建3.1Tornado简介(1)优势(2)关键代码4InceptionV3神经网络4.1网络结构5开始训练5.1数据集5.2关键代码5.3模型预测6效果展示6.1主页面展示6.2图片预测6.3三维模型可视化7最后0前言
书其实只有三类
西蜀石兰
类
一个人一辈子其实只读三种书，知识类、技能类、修心类。
知识类的书可以让我们活得更明白。类似十万个为什么这种书籍，我一直不太乐意去读，因为单纯的知识是没法做事的，就像知道地球转速是多少一样（我肯定不知道），这种所谓的知识，除非用到，普通人掌握了完全是一种负担，维基百科能找到的东西，为什么去记忆？
知识类的书，每个方面都涉及些，让自己显得不那么没文化，仅此而已。社会认为的学识渊博，肯定不是站在
《TCP/IP 详解，卷1：协议》学习笔记、吐槽及其他
bylijinnan
tcp
《TCP/IP 详解，卷1：协议》是经典，但不适合初学者。它更像是一本字典，适合学过网络的人温习和查阅一些记不清的概念。
这本书，我看的版本是机械工业出版社、范建华等译的。这本书在我看来，翻译得一般，甚至有明显的错误。如果英文熟练，看原版更好：
http://pcvr.nl/tcpip/
下面是我的一些笔记，包括我看书时有疑问的地方，也有对该书的吐槽，有不对的地方请指正：
1.
Linux—— 静态IP跟动态IP设置
eksliang
linux IP
一.在终端输入
vi /etc/sysconfig/network-scripts/ifcfg-eth0
静态ip模板如下：
DEVICE="eth0" #网卡名称
BOOTPROTO="static" #静态IP（必须）
HWADDR="00:0C:29:B5:65:CA" #网卡mac地址
IPV6INIT=&q
Informatica update strategy transformation
18289753290
更新策略组件： 标记你的数据进入target里面做什么操作，一般会和lookup配合使用，有时候用0,1,1代表 forward rejected rows被选中，rejected row是输出在错误文件里，不想看到reject输出，将错误输出到文件，因为有时候数据库原因导致某些column不能update，reject就会output到错误文件里面供查看，在workflow的
使用Scrapy时出现虽然队列里有很多Request但是却不下载，造成假死状态
酷的飞上天空
request
现象就是：
程序运行一段时间，可能是几十分钟或者几个小时，然后后台日志里面就不出现下载页面的信息，一直显示上一分钟抓取了0个网页的信息。
刚开始已经猜到是某些下载线程没有正常执行回调方法引起程序一直以为线程还未下载完成，但是水平有限研究源码未果。
经过不停的google终于发现一个有价值的信息，是给twisted提出的一个bugfix
连接地址如下http://twistedmatrix.
利用预测分析技术来进行辅助医疗
蓝儿唯美
医疗
2014年，克利夫兰诊所（Cleveland Clinic）想要更有效地控制其手术中心做膝关节置换手术的费用。整个系统每年大约进行2600例此类手术，所以，即使降低很少一部分成本，都可以为诊 所和病人节约大量的资金。为了找到适合的解决方案，供应商将视野投向了预测分析技术和工具，但其分析团队还必须花时间向医生解释基于数据的治疗方案意味着 什么。
克利夫兰诊所负责企业信息管理和分析的医疗
java 线程(一)：基础篇
DavidIsOK
java 多线程 线程
&nbs
Tomcat服务器框架之Servlet开发分析
aijuans
servlet
最近使用Tomcat做web服务器，使用Servlet技术做开发时，对Tomcat的框架的简易分析：
疑问： 为什么我们在继承HttpServlet类之后，覆盖doGet(HttpServletRequest req, HttpServetResponse rep)方法后，该方法会自动被Tomcat服务器调用，doGet方法的参数有谁传递过来？怎样传递？
分析之我见： doGet方法的
揭秘玖富的粉丝营销之谜 与小米粉丝社区类似
aoyouzi
揭秘玖富的粉丝营销之谜
玖富旗下悟空理财凭借着一个微信公众号上线当天成交量即破百万，第七天成交量单日破了1000万;第23天时，累计成交量超1个亿……至今成立不到10个月，粉丝已经超过500万，月交易额突破10亿，而玖富平台目前的总用户数也已经超过了1800万，位居P2P平台第一位。很多互联网金融创业者慕名前来学习效仿，但是却鲜有成功者，玖富的粉丝营销对外至今仍然是个谜。
近日，一直坚持微信粉丝营销
Java web的会话跟踪技术
百合不是茶
url会话 Cookie会话 Seession会话 Java Web 隐藏域会话
会话跟踪主要是用在用户页面点击不同的页面时,需要用到的技术点
会话:多次请求与响应的过程
1,url地址传递参数,实现页面跟踪技术
格式:传一个参数的
url?名=值
传两个参数的
url?名=值 &名=值
关键代码
web.xml之Servlet配置
bijian1013
java web.xml Servlet配置
定义：
<servlet>
<servlet-name>myservlet</servlet-name>
<servlet-class>com.myapp.controller.MyFirstServlet</servlet-class>
<init-param>
<param-name>
利用svnsync实现SVN同步备份
sunjing
SVN 同步 E000022 svnsync 镜像
1. 在备份SVN服务器上建立版本库
svnadmin create test
2. 创建pre-revprop-change文件
cd test/hooks/
cp pre-revprop-change.tmpl pre-revprop-change
3. 修改pre-revprop-
【分布式数据一致性三】MongoDB读写一致性
bit1129
mongodb
本系列文章结合MongoDB，探讨分布式数据库的数据一致性，这个系列文章包括：
数据一致性概述与CAP
最终一致性(Eventually Consistency)
网络分裂(Network Partition)问题
多数据中心(Multi Data Center)
多个写者(Multi Writer)最终一致性
一致性图表(Consistency Chart)
数据
Anychart图表组件-Flash图转IMG普通图的方法
白糖_
Flash
问题背景：项目使用的是Anychart图表组件，渲染出来的图是Flash的，往往一个页面有时候会有多个flash图，而需求是让我们做一个打印预览和打印功能，让多个Flash图在一个页面上打印出来。
那么我们打印预览的思路是获取页面的body元素，然后在打印预览界面通过$("body").append(html)的形式显示预览效果，结果让人大跌眼镜：Flash是
Window 80端口被占用 WHY?
bozch
端口占用 window
平时在启动一些可能使用80端口软件的时候，会提示80端口已经被其他软件占用，那一般又会有那些软件占用这些端口呢？
下面坐下总结：
1、web服务器是最经常见的占用80端口的，例如：tomcat , apache , IIS , Php等等；
2
编程之美-数组的最大值和最小值-分治法（两种形式）
bylijinnan
编程之美
import java.util.Arrays;
public class MinMaxInArray {
/**
* 编程之美 数组的最大值和最小值 分治法
* 两种形式
*/
public static void main(String[] args) {
int[] t={11,23,34,4,6,7,8,1,2,23};
int[]
Perl正则表达式
chenbowen00
正则表达式 perl
首先我们应该知道 Perl 程序中，正则表达式有三种存在形式，他们分别是：
匹配：m/<regexp>;/ （还可以简写为 /<regexp>;/ ，略去 m）
替换：s/<pattern>;/<replacement>;/
转化：tr/<pattern>;/<replacemnt>;
[宇宙与天文]行星议会是否具有本行星大气层以外的权力呢?
comsci
举个例子: 地球,地球上由200多个国家选举出一个代表地球联合体的议会,那么现在地球联合体遇到一个问题,地球这颗星球上面的矿产资源快要采掘完了....那么地球议会全体投票,一致通过一项带有法律性质的议案,既批准地球上的国家用各种技术手段在地球以外开采矿产资源和其它资源........
&
Oracle Profile 使用详解
daizj
oracle profile 资源限制
Oracle Profile 使用详解 转
一、目的：
Oracle系统中的profile可以用来对用户所能使用的数据库资源进行限制，使用Create Profile命令创建一个Profile，用它来实现对数据库资源的限制使用，如果把该profile分配给用户，则该用户所能使用的数据库资源都在该profile的限制之内。
二、条件：
创建profile必须要有CREATE PROFIL
How HipChat Stores And Indexes Billions Of Messages Using ElasticSearch & Redis
dengkane
elasticsearch Lucene
This article is from an interview with Zuhaib Siddique, a production engineer at HipChat, makers of group chat and IM for teams.
HipChat started in an unusual space, one you might not
循环小示例，菲波拉契序列，循环解一元二次方程以及switch示例程序
dcj3sjt126com
c 算法
# include <stdio.h>
int main(void)
{
int n;
int i;
int f1, f2, f3;
f1 = 1;
f2 = 1;
printf("请输入您需要求的想的序列：");
scanf("%d", &n);
for (i=3; i<n; i
macbook的lamp环境
dcj3sjt126com
lamp
sudo vim /etc/apache2/httpd.conf
/Library/WebServer/Documents
是默认的网站根目录
重启Mac上的Apache服务
这个命令很早以前就查过了，但是每次使用的时候还是要在网上查：
停止服务：sudo /usr/sbin/apachectl stop
开启服务：s
java ArrayList源码 下
shuizhaosi888
ArrayList源码
版本 jdk-7u71-windows-x64
JavaSE7 ArrayList源码上：http://flyouwith.iteye.com/blog/2166890
/**
* 从这个列表中移除所有c中包含元素
*/
public boolean removeAll(Collection<?> c) {
Spring Security（08）——intercept-url配置
234390216
Spring Security intercept-url 访问权限 访问协议 请求方法
intercept-url配置
目录
1.1 指定拦截的url
1.2 指定访问权限
1.3 指定访问协议
1.4 指定请求方法
1.1 &n
Linux环境下的oracle安装
jayung
oracle
linux系统下的oracle安装
本文档是Linux(redhat6.x、centos6.x、redhat7.x) 64位操作系统安装Oracle 11g(Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production)，本文基于各种网络资料精心整理而成，共享给有需要的朋友。如有问题可联系：QQ：52-7
hotspot虚拟机
leichenlei
java HotSpot jvm 虚拟机 文档
JVM参数
http://docs.oracle.com/javase/6/docs/technotes/guides/vm/index.html
JVM工具
http://docs.oracle.com/javase/6/docs/technotes/tools/index.html
JVM垃圾回收
http://www.oracle.com
读《Node.js项目实践：构建可扩展的Web应用》 ——引编程慢慢变成系统化的“砌砖活”
noaighost
Web node.js
读《Node.js项目实践：构建可扩展的Web应用》
——引编程慢慢变成系统化的“砌砖活”
眼里的Node.JS
初初接触node是一年前的事，那时候年少不更事。还在纠结什么语言可以编写出牛逼的程序，想必每个码农都会经历这个月经性的问题：微信用什么语言写的？facebook为什么推荐系统这么智能，用什么语言写的？dota2的外挂这么牛逼，用什么语言写的？……用什么语言写这句话，困扰人也是阻碍
快速开发Android应用
rensanning
android
Android应用开发过程中，经常会遇到很多常见的类似问题，解决这些问题需要花时间，其实很多问题已经有了成熟的解决方案，比如很多第三方的开源lib，参考
Android Libraries 和
Android UI/UX Libraries。
编码越少，Bug越少，效率自然会高。
但可能由于 根本没听说过、听说过但没用过、特殊原因不能用、自己已经有了解决方案等等原因，这些成熟的解决
理解Java中的弱引用
tomcat_oracle
java 工作 面试
不久之前，我
面试了一些求职Java高级开发工程师的应聘者。我常常会面试他们说，“你能给我介绍一些Java中得弱引用吗？”，如果面试者这样说，“嗯，是不是垃圾回收有关的？”，我就会基本满意了，我并不期待回答是一篇诘究本末的论文描述。 然而事与愿违，我很吃惊的发现，在将近20多个有着平均5年开发经验和高学历背景的应聘者中，居然只有两个人知道弱引用的存在，但是在这两个人之中只有一个人真正了
xshdch
jsp
http://back-888888.iteye.com/blog/1181202
关于<c:out value=""/>标签的使用，其中有一个属性是escapeXml默认是true(将html标签当做转移字符，直接显示不在浏览器上面进行解析)，当设置escapeXml属性值为false的时候就是不过滤xml，这样就能在浏览器上解析html标签，
&nb
