Python异步请求案例

2021-08-11 08:35:26 阅读：152 来源： 互联网

标签：异步 get Python await number Number 案例 Cost time

import asyncio
import aiohttp
import time


def test(number):
  start = time.time()

  async def get(url):
    session = aiohttp.ClientSession(connector=aiohttp.TCPConnector(limit=64, verify_ssl=False))
    response = await session.get(url)
    await response.text()
    await session.close()
    return response
  
  async def request():
    url = 'https://static1.scrape.center/'
    await get(url)

  tasks = [asyncio.ensure_future(request()) for _ in range(number)]
  loop = asyncio.get_event_loop()
  loop.run_until_complete(asyncio.wait(tasks))

  end = time.time()
  print('Number:', number, 'Cost time:', end - start)


for number in [1, 3, 5, 10]:
  test(number)

结果如下：

Number: 1 Cost time: 0.4136490821838379
Number: 3 Cost time: 0.17262792587280273
Number: 5 Cost time: 0.17714190483093262
Number: 10 Cost time: 0.16022205352783203

摘自拉勾教育《52讲轻松搞定网络爬虫》之异步爬虫的原理和解析

标签：异步,get,Python,await,number,Number,案例,Cost,time
来源： https://www.cnblogs.com/zhzhang/p/15126640.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9

Python异步请求案例