Asyncio

利用aiohttp实现异步爬虫

  asyncio可以实现单线程并发IO操作，是Python中常用的异步处理模块。
山阴少年·2018-09-13 17:32

API Star：一个 Python 3 的 API 框架

首先，该框架包含Python新特点，如类型提示和asyncio。而且它再进一步
Python开发者·2018-09-11 20:00

基于 asyncio 的Python异步爬虫框架

aspiderAwebscrapingmicro-frameworkbasedonasyncio.轻量异步爬虫框架aspider，基于asyncio，目的是让编写单页面爬虫更方便更迅速，利用异步特性让爬虫更快
howie6879·2018-09-11 00:00

《流畅的Python》11-用concurrent.futures (期物)处理并发

这个概念的作用很大,是concurrent.futures模块和asyncio包(第18章讨论)的基础。期物是译者自创的词，类似于期货，期权，字面上可以简单理解为要执行而未执行的操作。
Joovo·2018-09-09 00:34

asyncio简单入门（二）

请求网页方法一：importasyncioimportrequestsasyncdefmain():loop=asyncio.get_event_loop()future1=loop.run_in_executor
肥宅_Sean·2018-08-30 11:53

一个简单的基于async/aiohttp的爬虫

importasyncioimportaiohttpfromlxmlimportetreeimportqueueurlQ=queue.Queue()f=open("title22.txt","w",encoding
fiery_heart·2018-08-21 22:18

利用协程asyncio爬取搜狗美女图片（二）——实战

上节我们详细的介绍了asyncio库的应用（链接https://blog.csdn.net/MG1723054/article/details/81778460），本节我们将其应用到实战之中。
MG1723054·2018-08-18 09:22

基于asyncio、aiohttp、xpath的异步爬虫

今天介绍一下基于asyncio和aiohttp的异步爬虫的编写，解析html用的是xpath。
wyzane·2018-08-17 00:00

python后台——asyncio，aiohttp入门教程，多进程+asyncio

全栈工程师开发手册（作者：栾鹏）架构系列文章注意:python的异步返回有时是通过异常expection向上冒泡的,在异步函数中使用trycatch有时无法捕获某些异常的,异常会作为返回结果直接返回给上一层很多朋友对异步编程都处于“听说很强大”的认知状态。鲜有在生产项目中使用它。而使用它的同学，则大多数都停留在知道如何使用Tornado、Twisted、Gevent这类异步框架上，出现各种古怪的问
数据架构师·2018-08-07 21:26

Awesome Asyncio 《碉堡的Asyncio·中文版》

原文链接：https://yq.aliyun.com/articles/651998转一篇关于Asyncio的资源帖。
weixin_33726318·2018-08-07 11:00

python aiohttp asyncio 异步请求

转自：https://github.com/xianhu/LearnPython#_*_coding:utf-8_*_"""python_aiohttp.pybyxianhu"""importasyncioimportaiohttp
295631788·2018-08-03 16:39

【Python】基于asyncio的聊天服务器

机器环境win10python3.6关键点自定义消息协议解决粘包问题：消息头+消息体（4I+ns），消息头定长4个字节定义session类，管理连接进来的socket连接定义handler类，管理消息触发对应的处理方法Server端代码session.py__all__=['Session']classSession(object):def__init__(self):self.clients={
Immok·2018-07-31 22:54

【Python】基于asyncio的websocket服务器

机器环境win10python3.6pipinstallws4py代码ws_server.pyimportasynciofromws4py.server.tulipserverimport*fromws4py.async_websocketimportWebSocketloop
Immok·2018-07-30 17:09

异步爬取网站的图片

importrequestsimportasyncioimportaiohttpimportrandomimportsysimportosdefget_proxy():resp=requests.get
hsc_1·2018-07-30 17:51

python 协程

pythonasyncio网络模型有很多中，为了实现高并发也有很多方案，多线程，多进程。无论多线程和多进程，IO的调度更多取决于系统，而协程的方式，调度来自用户，用户可以在函数中yield一个状态。
JackLiu16·2018-07-24 00:46

Python3 异步--aiohttp

Python3异步--aiohttpasyncio可以实现单线程并发IO操作。如果仅用在客户端，发挥的威力不大。
yhyang·2018-07-19 16:40

Python3 异步IO--async/await

Python3异步IO--async/await用asyncio提供的@asyncio.coroutine可以把一个generator标记为coroutine类型，然后在coroutine内部用yieldfrom
yhyang·2018-07-19 16:07

Python3 异步IO--asyncio

Python3异步IO--asyncioasyncio是Python3.4版本引入的标准库，直接内置了对异步IO的支持。asyncio的编程模型就是一个消息循环。
yhyang·2018-07-19 16:31

python asyncio aiohttp 异步下载 完整例子

asyncio基础:pythonasyncio协程之前完整的说明了并发下载例子:并发下载使用了aiohttp,注意,下面写文件没有使用异步写入.一般情况下可以配合ThreadPoolExecutor来结合写入文件
dashoumeixi·2018-07-19 15:17

Tokio，Rust异步编程实践之路

http://www.cnblogs.com/hymenz/p/9334297.html缘起在许多编程语言里，我们都非常乐于去研究在这个语言中所使用的异步网络编程的框架，比如说Python的Gevent、asyncio
weixin_30456039·2018-07-19 10:00

Python-web系统初始化的设计与实现

Motor是一个异步非阻塞的MongoDB驱动程序，很好地支持了Tornado和asyncio的应用。
严北·2018-07-16 23:33

python asyncio 协程

异步介绍就不说了.基础:python协程python生成器协程yieldyieldfrom异步基于事件循环事件循环基础在线程中运行与关闭事件循环:动态添加协程关闭协程补充材料[如不想了解完全不会影响asyncio
dashoumeixi·2018-07-12 23:13

aiohttp 使用教程

另外我已经对aiohttp和asyncio进行了封装，可以参考我的github地址：https://github.com/web-trump/ahttp由于上下文的缘故，请求代码必须在一个异步的函数中进行
起不了名儿·2018-07-12 21:07

学习python asyncio

异步IO即发起一个IO操作不用等它结束，可以继续做其他事情，当他结束时，会收到通知。我们这里之所以要使用异步IO是因为我们的软件执行过程中很多时候都是在不断通过网络读取数据，因为从网络获取数据的过程延迟相当大，这些等待数据时间我们不能让CPU闲着，浪费资源，导致利用率下降，而且我们的程序无论是RemoteListen还是LocalSlave都不只是从一边读取数据，比如LocalSlave，既要从R
Han_L·2018-07-08 20:43

详解python异步编程之asyncio(百万并发)

asyncio是python3.4版本引入到标准库，pyth
三只松鼠·2018-07-07 11:09

正确使用Python3.5+的aiohttp异步协程

if __name__ == '__main__':    app.run(threaded=True)flask提供web页面import asyncioimpo
wenguonideshou·2018-07-06 23:18

python 并发 ThreadPoolExecutor

asyncio基础asyncio协程asyncio并发下载asyncio,aiohttp爬虫->这里写了一些原理和使用asyncio需要注意的东西,对asyncio有些基础的可以看看pythonasyncioaiohttp
dashoumeixi·2018-07-05 22:30

asyncio：高性能异步模块使用介绍

本文是作者「无名小妖」的第3篇原创投稿，文章重点探讨Python3中的asyncio库，这是官方推荐实现高并发的模块。如果你喜欢技术写作并且愿意分享，可投稿给我(公众号菜单有联系方式)。
Python之禅·2018-07-03 07:00

asyncio async使用

importtimeimportasyncionow=lambda:time.time()asyncdefdo_some_work(x):print('Waiting:',x)start=now()coroutine
Do_More·2018-07-01 10:00

python3.4+ asyncio的简单使用

在python3.4之后，增加了对异步io的支持，引入了asyncio的模块支持，下面就简单的使用一下asyncio,1.无回调函数的简单使用：首先我们先模拟一个请求http的操作，定义一个协程：#coding
chile-yang·2018-07-01 10:39

廖雪峰python实战项目_Day1

app.pyimportlogging;logging.basicConfig(level=logging.INFO)importasyncio,os,json,timefromdatetimeimportdatetimefromaiohttpimportwebdefindex
bird333·2018-06-17 23:56

协程的理解（二）-python3.4中asyncio

asyncio是Python3.4引入的标准库，直接内置了对异步IO的支持。
wt321088·2018-06-15 16:00

强大的异步爬虫 with aiohttp

看到现在网络上大多讲的都是requests、scrapy，却没有说到爬虫中的神器：aiohttpaiohttp介绍aiohttp是什么，官网上有这样一句话介绍：AsyncHTTPclient/serverforasyncioan
天痕坤·2018-06-13 21:28

python aiohttp与aiohttp

初步使用#-*-coding:utf-8-*-importasyncioimportaiohttp#async以及await关键字将函数异步化,首先异步获取相应，然后异步读取响应的内容asyncdeffetch
yayun---·2018-06-13 19:40

python异步编程之asyncio（百万并发）

asyncio是python3.4版本引入到标准库，pyth
三只松鼠·2018-06-12 17:00

python 获取域名的IP、注册时间、过期时间

importrequestsimportjsonimportasyncioimportaiohttpfrombs4importBeautifulSoupimportdatetimeresult1={"baidu
295631788·2018-06-12 14:21

最新实用Python异步爬虫代理池（开源）

GitHub:chenjiandongx项目地址https://github.com/chenjiandongx/async-proxy-poolAsyncProxyPool异步爬虫代理池，以Pythonasyncio
Python中文社区·2018-05-25 08:00

老司机，了解一下

import requests as reqfrom bs4 import BeautifulSoupimport lxmlimport reimport osimport aiohttpimport asynciou
双歧杆菌·2018-05-24 12:14

基于asyncio编写一个telegram爬虫机器人

而asyncio的异步非阻塞特性能够完美的解决这一问题。这篇文章在记录如何使用aiotg进行telegram开发的同时，也会说明一些aiohttp的使用方法,这里是项目源码。
yangsoon·2018-05-22 00:00

详解Python中的四种队列

在Python文档中搜索队列（queue）会发现，Python标准库中包含了四种队列，分别是queue.Queue/asyncio.Queue/multiprocessing.Queue/collections.deque
simpleapples·2018-05-21 14:51

Python学习笔记__20.4章 aiohttp

#这是学习廖雪峰老师python教程的学习笔记1、概览asyncio可以实现单线程并发IO操作。如果仅用在客户端，发挥的威力不大。
胖子飞鱼·2018-05-17 01:36

Python学习笔记__20.2章 asyncio

#这是学习廖雪峰老师python教程的学习笔记1、概览asyncio是Python3.4版本引入的标准库，直接内置了对异步IO的支持asyncio的编程模型就是一个消息循环。
胖子飞鱼·2018-05-17 00:37

Python爬取基于m3u8协议的ts文件并合并

大概能理解,却还是无法自己用到自己项目中,这里自己研究实现一个网页嗅探HTML5播放控件中基于m3u8协议ts格式视频资源的项目,并未考虑过复杂情况,毕竟只是练练手.源码#coding=utf-8importasyncioimportmultiprocessingimportosimportreimporttimefrommathimportfl
彼时思默·2018-05-15 16:39

sanic异步框架使用精解

首先是Python3.4版本引入了asyncio，这让Python有了支持异步IO的标准库，而后3.5版本又提供了两个新的关键字async/await，目的是为了更好地标识异步IO，让异步编程看起来更加友好
hugoren·2018-04-28 10:29

sanic异步框架之中文文档

首先是Python3.4版本引入了asyncio，这让Python有了支持异步IO的标准库，而后3.5版本又提供了两个新的关键字async/await，目的是为了更好地标识异步IO，让异步编程看起来更加友好
君惜丶·2018-04-27 10:06

用python3的多进程和协程处理MySQL的数据

python3的多进程+协程处理MySQL的数据，主要逻辑是拉取MySQL的数据，然后使用flashtext匹配关键字，在存回MySQL，代码如下(async_mysql.py)：importtimeimportasyncioimportrandomfromconcurrent.futuresimportProcessPoolExecutorasPoolimportaiomysqlfro
低调诺·2018-04-26 17:58

sanic异步框架之中文文档

首先是Python3.4版本引入了asyncio，这让Python有了支持异步IO的标准库，而后3.5版本又提供了两个新的关键字async/await，目的是为了更好地标识异步IO，让异步编程看起来更加友好
君惜·2018-04-26 00:00

python 破解wifi密码

#coding:utf-8 importtime#时间 importpywifi#破解wifi frompywifiimportconst#引用一些定义 fromasyncio.tasksimportsleep
迷茫十字路·2018-04-24 00:00

swoole_event_add实现异步

swoole_event_add属于AsyncIO，必须运行在CLI模式。
飞鸿影·2018-04-22 09:00

python 微服务方案

在python3.6中，官方的异步协程库asyncio正式成为标准。在保留便捷性的同时对性能有了很大的提升,已经出现许多的异步框架使用asyncio。使用较早的异
nicajonh·2018-04-17 17:09
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他