weixin_34128237
weixin_34128237

Python学习笔记 - aiohttp

上一个笔记总结了asyncio的一些知识点，这次就来应用一下。如果使用协程的方式来写爬虫，网络相关的请求就要将requests库替换成aiohttp这个库。

  • 官方文档
  • 中文文档

一. 效率对比

  1. 用上次写的爬虫，先爬一些壁纸链接

    urls = [
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-729560.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-724055.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716644.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716643.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716645.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686220.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686212.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-652608.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639894.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639893.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639892.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639890.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639888.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-468197.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467016.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467012.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467009.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467007.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467005.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466997.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466998.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466993.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466994.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466995.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-729560.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-724055.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716644.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716643.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716645.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686220.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686212.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-652608.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639894.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639893.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639892.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639890.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639888.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-468197.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467016.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467012.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467009.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467007.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467005.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466997.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466998.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466993.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466994.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466995.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466992.jpg",
    "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466989.jpg"
]
复制代码

  2. 用协程的方式下载这些图片

    • 安装aiohttp库

    • 根据文档，aiohttp库发起请求使用的是aiohttp.ClientSession()，文档建议不用每次请求都创建一个session会话，所以这里就只创建一个：

      async def main():
    async with aiohttp.ClientSession() as session:
        pass
复制代码

    • 定义下载图片的协程函数和创建储存路径的函数：

      # 下载图片
async def download_img(session, url):
    image_name = url.split('/')[-1]
    async with session.get(url, headers=headers) as response:
        with open('%s/%s' % (get_store_path('city'), image_name), 'wb') as fd:
            while True:
                chunk = await response.content.read(200)
                if not chunk:
                    break
                fd.write(chunk)
复制代码
      # 获取图片储存路径，如果没有则创建
def get_store_path(dir_name):
    current_path = os.path.abspath('.')
    target_path = os.path.join(current_path, 'wallpaper/%s' % dir_name)
    folder = os.path.exists(target_path)
    if not folder:
        os.makedirs(target_path)

    return target_path
复制代码

    • 补全main函数

      async def main(loop):
    async with aiohttp.ClientSession() as session:
        tasks = [loop.create_task(download_img(session, url)) for url in urls]
        await asyncio.wait(tasks)
        
loop = asyncio.get_event_loop()
loop.run_until_complete(main(loop))
loop.close()
复制代码

    • 计算下载耗时：

      if __name__ == '__main__':
    t1 = time.time()
    loop = asyncio.get_event_loop()
    loop.run_until_complete(main(loop))
    loop.close()
    print('耗时：%fs' % (time.time() - t1))
复制代码

    • 结果：

      26张图片用时1.476328s

  3. 使用多进程方式下载

     import requests
 import multiprocessing
 import os
 import time


 urls = [
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-729560.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-724055.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716644.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716643.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716645.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686220.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686212.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-652608.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639894.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639893.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639892.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639890.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639888.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-468197.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467016.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467012.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467009.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467007.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467005.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466997.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466998.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466993.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466994.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466995.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-729560.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-724055.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716644.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716643.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-716645.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686220.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-686212.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-652608.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639894.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639893.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639892.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639890.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-639888.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-468197.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467016.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467012.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467009.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467007.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-467005.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466997.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466998.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466993.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466994.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466995.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466992.jpg",
     "https://alpha.wallhaven.cc/wallpapers/thumb/small/th-466989.jpg"
 ]

 req_session = requests.Session()
 req_session.headers['user-agent'] = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36'


 def get_store_path(dir_name):
     current_path = os.path.abspath('.')
     target_path = os.path.join(current_path, 'wallpaper/%s' % dir_name)
     folder = os.path.exists(target_path)
     if not folder:
         os.makedirs(target_path)

     return target_path


 def download_img(url):
     img = req_session.get(url, stream=True)
     image_name = url.split('/')[-1]
     with open('%s/%s' % (get_store_path('city'), image_name), 'wb') as fd:
         for chunk in img.iter_content(chunk_size=128):
             fd.write(chunk)


 def main():
     p = multiprocessing.Pool()
     [p.apply_async(download_img, args=(url,)) for url in urls]
     p.close()
     p.join()

 if __name__ == '__main__':
     t1 = time.time()
     main()
     print('耗时：%fs' % (time.time() - t1))

复制代码

    结果

两种我都执行了多次，差不多都在1.4~2.7s之间，可以看到协程还是很强大的，仅仅用单线程就做到了类似多进程的效果。

转载于:https://juejin.im/post/5c4ff008f265da617831cb68

你可能感兴趣的:(Python学习笔记 - aiohttp)

  • Python学习笔记-Day05 snape00
    Python学习笔记Day_05-构造程序逻辑作者的话学完前面的几个章节后，我觉得有必要在这里带大家做一些练习来巩固之前所学的知识，虽然迄今为止我们学习的内容只是Python的冰山一角，但是这些内容已经足够我们来构建程序中的逻辑。对于编程语言的初学者来说，在学习了Python的核心语言元素（变量、类型、运算符、表达式、分支结构、循环结构等）之后，必须做的一件事情就是尝试用所学知识去解决现实中的问题
  • python学习笔记第5节-类和函数 梁鋐俐
    我们在前面的学习中学会了一个叫type（）的函数，用它来判断变量的类型，变量和它当下存储的数据绑定在一起。例如a=[4,5,6,7]print(type(a)）输出a=range（10，20，2）print（type（a））输出a=Trueprint（type（a））输出a={‘a54’：56}print（type（a））输出a={‘a54’，56}print（type（a））输出a=‘tyuio
  • Python学习笔记--列表、字典、集合、元组 小黄酥 Pythonpython学习笔记
    Python学习笔记43-列表#列表主要是用来存储多个数据.列表是有序的集合list_1=[]#创建一个空的列表list_2=[12,34,56,True,'abc']#创建一个列表#列表的访问，通过下标访问列表中的元素，下标默认从0开始，0表示第一个元素，-1表示最后一个元素list_3=[1,2,3,False,True,'abc']print(list_3[0])#1print(list_3
  • aiohttp: AttributeError: ‘NoneType‘ object has no attribute ‘get_extra_info‘ zzzzls~ Pythonpythonaiohttpasyncio
    使用Proxyman分析aiohttp请求时遇到如上错误:报错环境系统:macPython:Python3.8.11aiohttp:3.8.0抓包软件:Proxyman解决方案:修改***/python3.8/site-packages/aiohttp/connector.py1211行:#注释如下行#runtime_has_start_tls=self._loop_supports_start_
  • python学习笔记08_赋值运算、逻辑运算、表达式、短路原则 flamingocc
    python笔记081.赋值运算符num+=1等价于num=num+1num-=1等价于num=num-1num*=1等价于num=num*1num/=1等价于num=num/1num//2等价于num=num//2num%=2等价于num/2的余数num**2等价于num=num*num2.逻辑运算符逻辑运算符包含：not、and、or2.1and的用法：(且、并且)写法：条件1and条件2eg
  • Python学习笔记（三）：列表的定义、访问及修改 RANDY_Sw Python入门python
    今天学习了有关列表的定义、访问及修改的方法，在此整理一下。列表的定义与访问name_list=['zhangsan','lisi','wangwu']#创建一个列表name_list[0]='xiaobai'#修改列表中的单个元素print(name_list)#遍历的方式打印列表1foriteminname_list:print(item)#遍历的方式打印列表2i=0foriinrange(le
  • 基础爬虫 requests selenium aiohttp BeautifulSoup pyQuery Xpath&CssSelector 肯定是疯了
    http://47.101.52.166/blog/back/python/%E7%88%AC%E8%99%AB.html请求requestsseleniumaiohttp*处理BeautifulSouppyQueryXpath&CssSelector*存储pymysqlPyMongoredisaiomysql*Scrapy
  • python爬虫面试真题及答案_Python面试题爬虫篇(附答案) 朴少 python爬虫面试真题及答案
    0|1第一部分必答题注意：第31题1分，其他题均每题3分。1，了解哪些基于爬虫相关的模块？-网络请求：urllib，requests，aiohttp-数据解析：re，xpath，bs4，pyquery-selenium-js逆向：pyexcJs2，常见的数据解析方式？-re、lxml、bs43，列举在爬虫过程中遇到的哪些比较难的反爬机制？-动态加载的数据-动态变化的请求参数-js加密-代理-coo
  • python3.6 asyncio_Python3.6 AttributeError:模块“asyncio”没有属性“run” weixin_39608478 python3.6asyncio
    importasyncioimportaiohttpurls=['http://www.google.com','http://www.yandex.ru','http://www.python.org']asyncdefcall_url(url):print('Starting{}'.format(url))response=awaitaiohttp.ClientSession().get(ur
  • Python学习笔记36：进阶篇(二十五)pygame的使用之事件监听控制切歌和暂停，继续播放 明月望秋思 学习pythonpygamepython学习
    前言基础模块的知识通过这么长时间的学习已经有所了解，更加深入的话需要通过完成各种项目，在这个过程中逐渐学习，成长。我们的下一步目标是完成pythoncrashcourse中的外星人入侵项目，这是一个2D游戏项目。在这之前，我们先简单学习一下pygame模块。私信我发送消息python资料，领取pythoncrashcourse中文版PDF。pygamePygame是一个开源的Python多媒体开发
  • python工资条教程_python学习笔记--工资条发放软件 weixin_39873191 python工资条教程
    1#!/usr/bin/envpython2#-*-coding:UTF-8-*-3importsmtplib4fromemail.mime.textimportMIMEText5mailto_list=['[email protected]']#收件人(列表)6mail_host="smtp.163.com"#使用的邮箱的smtp服务器地址，这里是163的smtp地址7mail_user="[email protected]
  • Python学习笔记二(布尔值及类型检查) StaticKing Python入门Python
    字符串赋值与布尔值及类型检查布尔值(bool)假：False真：Truea1='a'a2='a'print(a1==a2)print(a1!=a2)TrueFalse布尔值也属于整型，True相当于1False相当于0print(True+
  • 日常避坑指南：如何正确使用 aiohttp 上传文件，避免文件被提前关闭 程序员的开发手册 Python教程爬虫抓取pythonaiohttp避坑文件上传
    在日常开发中，我们经常会遇到需要上传文件到服务器的场景。如果你选择使用aiohttp进行异步请求，上传文件的方式需要特别注意，否则可能会遇到一些令人头疼的问题——比如文件被提前关闭，导致上传失败。这篇文章将为你详细解析这个问题，并提供有效的解决方案，帮助你在开发过程中少踩坑。问题背景在某次项目开发中，我需要通过aiohttp异步请求将文件上传至服务器。按照惯例，我写了如下代码：withopen(f
  • Python学习笔记_第八章：异常 雨住多一横
    什么是异常Python用异常对象来表示异常情况，遇到错误后会引发异常。如果异常对象未被处理或捕捉，程序就会用所谓的回溯终止执行按自己的方式出错raise语句使用一个类(Exception及其子类)或者类实例调用raise语句可以引发异常。Python内建异常可以在exceptions模块中找到，可以使用dir列出模块内容>>>dir(exceptions)['ArithmeticError','A
  • Python学习笔记之：本地文件的读取 你怎么这么奇怪 Python学习笔记
    读取文件#桌面上的第一个txtf=open(r"C:\Users\Administrator\Desktop\test.txt")print(f.read())以test.txt文件为例，该文件存储路径为桌面打印读取文件内容f.read()print(f.readline())读
  • python学习笔记五（面向对象实战版） 小满胜 万全 Python学习学习笔记
    传送门：python及pycharm安装配置_pycharm和python配置-CSDN博客Python学习笔记（一）-CSDN博客Python学习笔记（二）-CSDN博客Python学习笔记三（面向对象）-CSDN博客Python学习笔记四（面向对象）-CSDN博客前言：在前面两章，我们学习了python的基本概念和一些重要的知识点，由于这个部分非常重要，而代码学习之道最重要的就是自己要动手写代
  • Python学习笔记一（基础知识） 小满胜 万全 Python学习学习python
    PS：这篇文章是以一个学习者的角度来汇总知识点以及教程，对于想学习Python的入门者也会比较友好，想学习python可以先收藏，我会慢慢持续更新。学艺不精，如有纰漏，敬请指正。需要安装配置python和Pycharm软件可以移步这篇文章，有详细的教程。传送门：python及pycharm安装配置-CSDN博客Python学习笔记（二）-CSDN博客Python学习笔记三（面向对象）-CSDN博客
  • Python学习笔记07 正文01 python学习笔记
    第十三章，面向对象初识对象生活中数据的组织学校开学，要求学生填写自己的基础信息，一人发一张白纸，让学生自己填我叫林军杰，今年31岁.来自山东省，我是男的，中国人内容混乱改为登记表，打印出来让学生自行填写：姓名林军杰姓别男国籍中国籍贯山东省年龄31整洁明了程序中数据的组织在程序中简单使用变量来记录学生信息student_1={"姓名"："周杰轮"，"性别"："男"，"国籍"："中国"，"籍贯"："台
  • Python学习笔记03 正文01 python学习笔记
    第五章、Python函数函数介绍函数函数：是组织好的，可重复使用的，用来实现特定功能的代码段name="itheima"length=len(name)print(length)输出结果：7为什么随时都可以使用len()统计长度？因为，len()是Python内置的函数：是提前写好的可以重复使用实现统计长度这一特定功能的代码段我们使用过的：input()、print()、str()、int()等都
  • Python学习笔记 —— 文件处理模块 miles-zh pythonpython
    Excel文件openpyxl读/写Excel文件，https://pypi.org/project/openpyxlxlwt创建Excel文件，设置单元格样式，https://pypi.org/project/xlwtxlrd读取Excel文件，https://pypi.org/project/xlrdxlutils修改Excel文件，https://pypi.org/project/xluti
  • 【Python学习笔记】Python logging模块的学习 Augenstern K Pythonpython学习笔记
    Pythonlogging模块基础介绍作用与功能基本用法引入模块创建并配置记录器的基本步骤代码演示日志级别日志消息格式用法介绍代码示例日志的输出位置代码示例日志记录的高级功能对日志记录进行过滤和处理在多个模块中使用同一个日志记录器总结当谈到日志记录时，logging库是Python中最常用的工具之一。它提供了许多功能和选项，使开发人员能够灵活地记录和管理应用程序的日志信息。引入logging作为P
  • Python学习笔记(1)——环境安装与变量 ThinkerChenYi python学习笔记Python学习笔记
    python环境安装-python2还是python3python2只支持到2020年，并且python2和3有不少用法差异。要是刚学完python2不久就发现过时了这就很尴尬了，所以推荐使用python3-安装环境推荐：Anaconda+pychamAnaconda是一个python的科学计算包，python环境，常用模块以及工具都包含在里面，省心省力官网：https://www.anacond
  • 2.25python笔记 高阶编程 13351
    @[TOC](2.25学堂在线python学习笔记高阶编程)#高阶编程1.利用二分法查找一个字符是否在某个字符串当中基线条件：当s=''时，返回False当len(s)=1且s==char时返回True当len(s)>1且s[mid]>char时，返回isIn(char,s[:mid])否则当s[mid]1:ifs[mid]>char:print(s)returnisIn(char,s[:mid]
  • ComfyUI添加IP白名单功能 寂夜江潮 后端tcp/ippython网络协议
    AI生图很火，相信你对ComfyUI不陌生，查看ComfyUI的源码可以发现它是使用aiohttp来作为服务端的。那么我们在使用ComfyUI的时候可能需要做一些安全的限制，接下来我们将探讨如何在ComfyUI中添加IP白名单功能，以确保只有特定的用户可以访问我们的服务。什么是IP白名单？IP白名单是一种安全措施，用于限制只有特定的IP地址可以访问网络服务。这种方法非常适合那些只希望向特定用户或内
  • Python学习笔记——逻辑运算符not,and,or phoebe’ python
    运算优先级：not>and>or三个都从左往右解析，区别如下not：返回布尔型(TrueorFalse)>>>not7False>>>not0Trueand:有0(False)则返回0(False)，否则返回后一个变量(常数)>>>3and0and10>>>1and2and33>>>Falseand1Falseor:返回第一个不为0(False)的变量(常数)>>>FalseorTrueTrue>
  • python学习笔记——三目运算符与逻辑运算符 phily123 python学习笔记python
    一、三目运算符python中用ifelse来替代其他编程语言的？：三目运算符，并且用法不同。ifa>b:c=aelse:c=bpython中：c=aifa>belsebc语言中：c=a>b?a:b二、逻辑运算符python中逻辑运算符用andornot:20and10#结果是1020or10#结果是200or10#结果是10not10#结果是Falsenot0#结果是Truec语言中逻辑运算符用&
  • 接口自动化测试框架开发(pytest+allure+aiohttp+ 用例自动生成) .咖啡加剁椒. 软件测试pytest软件测试自动化测试功能测试程序人生职场和发展
    近期准备优先做接口测试的覆盖，为此需要开发一个测试框架，经过思考，这次依然想做点儿不一样的东西。接口测试是比较讲究效率的，测试人员会希望很快能得到结果反馈，然而接口的数量一般都很多，而且会越来越多，所以提高执行效率很有必要接口测试的用例其实也可以用来兼做简单的压力测试，而压力测试需要并发接口测试的用例有很多重复的东西，测试人员应该只需要关注接口测试的设计，这些重复劳动最好自动化来做pytest和a
  • Python课后习题第十章 水中小船
    '''10-1Python学习笔记：在文本编辑器中新建一个文件，写几句话来总结一下你至此学到的Python知识，其中每一行都以“InPythonyoucan”打头。将这个文件命名为learning_python.txt，并将其存储到为完成本章练习而编写的程序所在的目录中。编写一个程序，它读取这个文件，并将你所写的内容打印三次：第一次打印时读取整个文件；第二次打印时遍历文件对象；第三次打印时将各行存
  • python表示乘方的运算符_Python学习笔记Day3 - Python运算符 weixin_39684454 python表示乘方的运算符
    1.Python类型转换常用数据类型转换2.Python算术运算符Python算术运算符2.1加法(+)运算符m=10n=97sum1=m+nx=7.2y=15.3sum2=x+yprint("sum1=%d,sum2=%.2f"%(sum1,sum2))运行结果：sum1=107,sum2=22.50拼接字符串当+用于数字时表示加法，但是当+用于字符串时，它还有拼接字符串(将两个字符串连接为一个
  • Python学习笔记之os.path.join() 爱叫啥叫啥去
    路径拼接os.path.join()函数os.path.join()函数用于路径拼接文件路径os.path.join()函数中可以传入多个路径：a、会从第一个以"/"开头的参数开始拼接，之前的参数全部丢弃b、在上一种情况确保情况下，若出现"./"开头的参数，会从"./"开头的参数的上一个参数开始拼接join()函数语法：‘sep’.join(seq)参数说明：sep:分隔符。可以为空seq：要连接
  • ios内付费 374016526 ios内付费
    近年来写了很多IOS的程序，内付费也用到不少，使用IOS的内付费实现起来比较麻烦，这里我写了一个简单的内付费包，希望对大家有帮助。   具体使用如下: 这里的sender其实就是调用者，这里主要是为了回调使用。 [KuroStoreApi kuroStoreProductId:@"产品ID" storeSender:self storeFinishCallBa
  • 20 款优秀的 Linux 终端仿真器 brotherlamp linuxlinux视频linux资料linux自学linux教程
      终端仿真器是一款用其它显示架构重现可视终端的计算机程序。换句话说就是终端仿真器能使哑终端看似像一台连接上了服务器的客户机。终端仿真器允许最终用户用文本用户界面和命令行来访问控制台和应用程序。（LCTT 译注：终端仿真器原意指对大型机-哑终端方式的模拟，不过在当今的 Linux 环境中，常指通过远程或本地方式连接的伪终端，俗称“终端”。） 你能从开源世界中找到大量的终端仿真器，它们
  • Solr Deep Paging(solr 深分页) eksliang solr深分页solr分页性能问题
    转载请出自出处：http://eksliang.iteye.com/blog/2148370 作者：eksliang(ickes) blg:http://eksliang.iteye.com/ 概述 长期以来，我们一直有一个深分页问题。如果直接跳到很靠后的页数，查询速度会比较慢。这是因为Solr的需要为查询从开始遍历所有数据。直到Solr的4.7这个问题一直没有一个很好的解决方案。直到solr
  • 数据库面试题 18289753290 面试题 数据库
    1.union ,union all 网络搜索出的最佳答案： union和union all的区别是,union会自动压缩多个结果集合中的重复结果，而union all则将所有的结果全部显示出来，不管是不是重复。 Union：对两个结果集进行并集操作，不包括重复行，同时进行默认规则的排序； Union All：对两个结果集进行并集操作，包括重复行，不进行排序； 2.索引有哪些分类？作用是
  • Android TV屏幕适配 酷的飞上天空 android
    先说下现在市面上TV分辨率的大概情况 两种分辨率为主 1.720标清，分辨率为1280x720. 屏幕尺寸以32寸为主，部分电视为42寸 2.1080p全高清，分辨率为1920x1080 屏幕尺寸以42寸为主，此分辨率电视屏幕从32寸到50寸都有   适配遇到问题，已1080p尺寸为例： 分辨率固定不变，屏幕尺寸变化较大。 如：效果图尺寸为1920x1080，如果使用d
  • Timer定时器与ActionListener联合应用 永夜-极光 java
    功能:在控制台每秒输出一次   代码: package Main; import javax.swing.Timer; import java.awt.event.*; public class T { private static int count = 0; public static void main(String[] args){
  • Ubuntu14.04系统Tab键不能自动补全问题解决 随便小屋 Ubuntu 14.04
    Unbuntu 14.4安装之后就在终端中使用Tab键不能自动补全，解决办法如下：   1、利用vi编辑器打开/etc/bash.bashrc文件（需要root权限） sudo vi /etc/bash.bashrc  接下来会提示输入密码 2、找到文件中的下列代码 #enable bash completion in interactive shells #if
  • 学会人际关系三招 轻松走职场 aijuans 职场
    要想成功，仅有专业能力是不够的，处理好与老板、同事及下属的人际关系也是门大学问。如何才能在职场如鱼得水、游刃有余呢？在此，教您简单实用的三个窍门。 　　第一，多汇报 最近，管理学又提出了一个新名词“追随力”。它告诉我们，做下属最关键的就是要多请示汇报，让上司随时了解你的工作进度，有了新想法也要及时建议。不知不觉，你就有了“追随力”，上司会越来越了解和信任你。 　　第二，勤沟通 团队的力
  • 《O2O：移动互联网时代的商业革命》读书笔记 aoyouzi 读书笔记
    移动互联网的未来：碎片化内容+碎片化渠道=各式精准、互动的新型社会化营销。   O2O：Online to OffLine 线上线下活动 O2O就是在移动互联网时代，生活消费领域通过线上和线下互动的一种新型商业模式。   手机二维码本质：O2O商务行为从线下现实世界到线上虚拟世界的入口。   线上虚拟世界创造的本意是打破信息鸿沟，让不同地域、不同需求的人
  • js实现图片随鼠标滚动的效果 百合不是茶 JavaScript滚动属性的获取图片滚动属性获取页面加载
    1,获取样式属性值 top 与顶部的距离 left 与左边的距离 right 与右边的距离 bottom 与下边的距离 zIndex 层叠层次     例子:获取左边的宽度,当css写在body标签中时 <div id="adver" style="position:absolute;top:50px;left:1000p
  • ajax同步异步参数async bijian1013 jqueryAjaxasync
            开发项目开发过程中，需要将ajax的返回值赋到全局变量中，然后在该页面其他地方引用，因为ajax异步的原因一直无法成功，需将async:false，使其变成同步的。         格式： $.ajax({ type: 'POST', ur
  • Webx3框架（1） Bill_chen eclipsespringmaven框架ibatis
    Webx是淘宝开发的一套Web开发框架，Webx3是其第三个升级版本；采用Eclipse的开发环境，现在支持java开发； 采用turbine原型的MVC框架，扩展了Spring容器，利用Maven进行项目的构建管理，灵活的ibatis持久层支持，总的来说，还是一套很不错的Web框架。 Webx3遵循turbine风格，velocity的模板被分为layout/screen/control三部
  • 【MongoDB学习笔记五】MongoDB概述 bit1129 mongodb
    MongoDB是面向文档的NoSQL数据库，尽量业界还对MongoDB存在一些质疑的声音，比如性能尤其是查询性能、数据一致性的支持没有想象的那么好，但是MongoDB用户群确实已经够多。MongoDB的亮点不在于它的性能，而是它处理非结构化数据的能力以及内置对分布式的支持(复制、分片达到的高可用、高可伸缩)，同时它提供的近似于SQL的查询能力，也是在做NoSQL技术选型时，考虑的一个重要因素。Mo
  • spring/hibernate/struts2常见异常总结 白糖_ Hibernate
    Spring ①ClassNotFoundException: org.aspectj.weaver.reflect.ReflectionWorld$ReflectionWorldException 缺少aspectjweaver.jar，该jar包常用于spring aop中   ②java.lang.ClassNotFoundException: org.sprin
  • jquery easyui表单重置(reset)扩展思路 bozch formjquery easyuireset
    在jquery easyui表单中 尚未提供表单重置的功能，这就需要自己对其进行扩展。 扩展的时候要考虑的控件有： combo,combobox,combogrid,combotree,datebox,datetimebox 需要对其添加reset方法，reset方法就是把初始化的值赋值给当前的组件，这就需要在组件的初始化时将值保存下来。 在所有的reset方法添加完毕之后，就需要对fo
  • 编程之美-烙饼排序 bylijinnan 编程之美
    package beautyOfCoding; import java.util.Arrays; /* *《编程之美》的思路是：搜索+剪枝。有点像是写下棋程序：当前情况下，把所有可能的下一步都做一遍；在这每一遍操作里面，计算出如果按这一步走的话，能不能赢（得出最优结果）。 *《编程之美》上代码有很多错误，且每个变量的含义令人费解。因此我按我的理解写了以下代码： */
  • Struts1.X 源码分析之ActionForm赋值原理 chenbowen00 struts
    struts1在处理请求参数之前，首先会根据配置文件action节点的name属性创建对应的ActionForm。如果配置了name属性，却找不到对应的ActionForm类也不会报错，只是不会处理本次请求的请求参数。 如果找到了对应的ActionForm类，则先判断是否已经存在ActionForm的实例，如果不存在则创建实例，并将其存放在对应的作用域中。作用域由配置文件action节点的s
  • [空天防御与经济]在获得充足的外部资源之前,太空投资需有限度 comsci 资源
          这里有一个常识性的问题:       地球的资源,人类的资金是有限的,而太空是无限的.....       就算全人类联合起来,要在太空中修建大型空间站,也不一定能够成功,因为资源和资金,技术有客观的限制.... &
  • ORACLE临时表—ON COMMIT PRESERVE ROWS daizj oracle临时表
    ORACLE临时表 转 临时表：像普通表一样，有结构，但是对数据的管理上不一样，临时表存储事务或会话的中间结果集，临时表中保存的数据只对当前 会话可见，所有会话都看不到其他会话的数据，即使其他会话提交了，也看不到。临时表不存在并发行为，因为他们对于当前会话都是独立的。 创建临时表时，ORACLE只创建了表的结构（在数据字典中定义），并没有初始化内存空间，当某一会话使用临时表时，ORALCE会
  • 基于Nginx XSendfile+SpringMVC进行文件下载 denger 应用服务器Webnginx网络应用lighttpd
        在平常我们实现文件下载通常是通过普通 read-write方式，如下代码所示。 @RequestMapping("/courseware/{id}") public void download(@PathVariable("id") String courseID, HttpServletResp
  • scanf接受char类型的字符 dcj3sjt126com c
    /* 2013年3月11日22:35:54 目的：学习char只接受一个字符 */ # include <stdio.h> int main(void) { int i; char ch; scanf("%d", &i); printf("i = %d\n", i); scanf("%
  • 学编程的价值 dcj3sjt126com 编程
    发一个人会编程, 想想以后可以教儿女, 是多么美好的事啊, 不管儿女将来从事什么样的职业, 教一教, 对他思维的开拓大有帮助   像这位朋友学习:   http://blog.sina.com.cn/s/articlelist_2584320772_0_1.html   VirtualGS教程 (By @林泰前): 几十年的老程序员，资深的
  • 二维数组（矩阵）对角线输出 飞天奔月 二维数组
    今天在BBS里面看到这样的面试题目,   1，二维数组（N*N），沿对角线方向，从右上角打印到左下角如N=4： 4*4二维数组  { 1 2 3 4 } { 5 6 7 8 } { 9 10 11 12 } {13 14 15 16 } 打印顺序  4 3 8 2 7 12 1 6 11 16 5 10 15 9 14 13 要
  • Ehcache（08）——可阻塞的Cache——BlockingCache 234390216 并发ehcacheBlockingCache阻塞
    可阻塞的Cache—BlockingCache          在上一节我们提到了显示使用Ehcache锁的问题，其实我们还可以隐式的来使用Ehcache的锁，那就是通过BlockingCache。BlockingCache是Ehcache的一个封装类，可以让我们对Ehcache进行并发操作。其内部的锁机制是使用的net.
  • mysqldiff对数据库间进行差异比较 jackyrong mysqld
      mysqldiff该工具是官方mysql-utilities工具集的一个脚本，可以用来对比不同数据库之间的表结构，或者同个数据库间的表结构    如果在windows下，直接下载mysql-utilities安装就可以了，然后运行后，会跑到命令行下： 1） 基本用法    mysqldiff --server1=admin:12345
  • spring data jpa 方法中可用的关键字 lawrence.li javaspring
    spring data jpa 支持以方法名进行查询/删除/统计。 查询的关键字为find 删除的关键字为delete/remove (>=1.7.x) 统计的关键字为count (>=1.7.x)   修改需要使用@Modifying注解 @Modifying @Query("update User u set u.firstna
  • Spring的ModelAndView类 nicegege spring
    项目中controller的方法跳转的到ModelAndView类，一直很好奇spring怎么实现的？ /* * Copyright 2002-2010 the original author or authors. * * Licensed under the Apache License, Version 2.0 (the "License"); * yo
  • 搭建 CentOS 6 服务器(13) - rsync、Amanda rensanning centos
    （一）rsync Server端 # yum install rsync # vi /etc/xinetd.d/rsync service rsync { disable = no flags = IPv6 socket_type = stream wait
  • Learn Nodejs 02 toknowme nodejs
    （1）npm是什么 npm is the package manager for node 官方网站：https://www.npmjs.com/ npm上有很多优秀的nodejs包，来解决常见的一些问题，比如用node-mysql，就可以方便通过nodejs链接到mysql，进行数据库的操作 在开发过程往往会需要用到其他的包，使用npm就可以下载这些包来供程序调用 &nb
  • Spring MVC 拦截器 xp9802 spring mvc
    Controller层的拦截器继承于HandlerInterceptorAdapter HandlerInterceptorAdapter.java  1  public   abstract   class  HandlerInterceptorAdapter  implements  HandlerIntercep
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他