返回顶部
首页 > 资讯 > 后端开发 > Python >python线程池有什么优点
  • 803
分享到

python线程池有什么优点

2023-06-14 21:06:18 803人浏览 独家记忆

Python 官方文档:入门教程 => 点击学习

摘要

这篇文章给大家分享的是有关python线程池有什么优点的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。Python是什么意思Python是一种跨平台的、具有解释性、编译性、互动性和面向对象的脚本语言,其最初的设计是

这篇文章给大家分享的是有关python线程池有什么优点的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

Python是什么意思

Python是一种跨平台的、具有解释性、编译性、互动性和面向对象的脚本语言,其最初的设计是用于编写自动化脚本,随着版本的不断更新和新功能的添加,常用于用于开发独立的项目和大型项目。

1、使用好处

提高性能:由于减去了大量新建终止线程的费用,重用了线程资源;

适用场景:适用于处理大量突发请求或需要大量线程完成任务,但实际任务处理时间短。

防御功能:可以有效避免系统因线程过多而导致系统负载过大而相应变慢的问题。

代码优势:使用线程池的语法比创建自己的线程更简单。

2、实例

"""@file   : 004-线程池的使用.py@author : xiaolu@email  : luxiaoNLP@163.com@time   : 2021-02-01"""import concurrent.futuresimport requestsfrom bs4 import BeautifulSoup  def craw(url):    # 爬取网页内容    r = requests.get(url)    return r.text  def parse(html):    # 解析其中的内容    soup = BeautifulSoup(html, "html.parser")    links = soup.find_all("a", class_="post-item-title")    return [(link["href"], link.get_text()) for link in links]   # 那链接和标题拿出来  if __name__ == '__main__':    # 待爬取的网页链接    urls = [        "https://www.cnblogs.com/sitehome/p/{}".fORMat(page) for page in range(1, 50 + 1)    ]            # craw    with concurrent.futures.ThreadPoolExecutor() as pool:        htmls = pool.map(craw, urls)        htmls = list(zip(urls, htmls))        for url, html in htmls:            print(url, len(html))    print("craw over")        # parse    with concurrent.futures.ThreadPoolExecutor() as pool:        futures = {}        for url, html in htmls:            future = pool.submit(parse, html)            futures[future] = url            # for future, url in futures.items():        #     print(url, future.result())            for future in concurrent.futures.as_completed(futures):            url = futures[future]            print(url, future.result())

知识点补充:

线程池的使用

线程池的基类是 concurrent.futures 模块中的 Executor,Executor 提供了两个子类,即 ThreadPoolExecutor 和ProcessPoolExecutor,其中 ThreadPoolExecutor 用于创建线程池,而 ProcessPoolExecutor 用于创建进程池。

如果使用线程池/进程池来管理并发编程,那么只要将相应的 task 函数提交给线程池/进程池,剩下的事情就由线程池/进程池来搞定。

Exectuor 提供了如下常用方法:

submit(fn, *args, **kwargs):将 fn 函数提交给线程池。*args 代表传给 fn 函数的参数,*kwargs 代表以关键字参数的形式为 fn 函数传入参数。

map(func, *iterables, timeout=None, chunksize=1):该函数类似于全局函数 map(func, *iterables),只是该函数将会启动多个线程,以异步方式立即对 iterables 执行 map 处理。

shutdown(wait=True):关闭线程池。

程序将 task 函数提交(submit)给线程池后,submit 方法会返回一个 Future 对象,Future 类主要用于获取线程任务函数的返回值。由于线程任务会在新线程中以异步方式执行,因此,线程执行的函数相当于一个“将来完成”的任务,所以 Python 使用 Future 来代表。

感谢各位的阅读!关于“python线程池有什么优点”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!

--结束END--

本文标题: python线程池有什么优点

本文链接: https://www.lsjlt.com/news/275188.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • python线程池有什么优点
    这篇文章给大家分享的是有关python线程池有什么优点的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。python是什么意思Python是一种跨平台的、具有解释性、编译性、互动性和面向对象的脚本语言,其最初的设计是...
    99+
    2023-06-14
  • Dubbo线程池有哪些优点
    本篇内容介绍了“Dubbo线程池有哪些优点”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!1 基础知识1.1 DUBBO线程模型1.1.1 基...
    99+
    2023-06-15
  • java中线程池的优点有哪些
    本篇文章给大家分享的是有关java中线程池的优点有哪些,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。Java的特点有哪些Java的特点有哪些1.Java语言作为静态面向对象编程...
    99+
    2023-06-14
  • Python自带的线程池和进程池有什么用
    这篇文章主要介绍“Python自带的线程池和进程池有什么用”,在日常操作中,相信很多人在Python自带的线程池和进程池有什么用问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”...
    99+
    2024-04-02
  • redis连接池有什么优点
    redis连接池的优点有:一次读取多个事件绑定的IO数据,减少了IO等待。实现在客户端建立多个链接并且不释放,免去了数据库连接所占用的时间。基于redis,解决应用服务器的cpu和内存压力,并且读取速度快,对较大数据处理快。...
    99+
    2024-04-02
  • golang线程池和协程池有什么区别
    Golang中没有线程池的概念,而是通过协程(goroutine)来实现并发。协程是一种轻量级的线程,由Go语言的运行时环境(run...
    99+
    2023-10-26
    golang
  • java中线程池的优缺点对比
    这篇文章将为大家详细讲解有关java中线程池的优缺点对比,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。Java的优点是什么1. 简单,只需理解基本的概念,就可以编写适合于各种情况的应用程序;...
    99+
    2023-06-14
  • Java线程池的优点及池化技术的应用
    目录1.池化技术2.池化技术应用2.1 线程池2.2 内存池2.3 数据库连接池2.4 HttpClient连接池3.线程池介绍4.线程池优点分析优点1:复用线程,降低资源消耗优点2...
    99+
    2024-04-02
  • Java线程池知识点有哪些
    这篇文章将为大家详细讲解有关Java线程池知识点有哪些,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。1、线程数使用开发规约阿里巴巴开发手册中关于线程和线程池的使用有如下三条强制规约【强制】创建线程或线程池...
    99+
    2023-06-29
  • Linux C下线程池有什么用
    这篇文章主要介绍了Linux C下线程池有什么用,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。线程池也是多线程的处理方式。是将“生产者”线程提出任务添加到“任务队列”,然后一...
    99+
    2023-06-15
  • Android中的线程和线程池有什么作用
    今天小编给大家分享一下Android中的线程和线程池有什么作用的相关知识点,内容详细,逻辑清晰,相信大部分人都还太了解这方面的知识,所以分享这篇文章给大家参考一下,希望大家阅读完这篇文章后有所收获,下面我们一起来了解一下吧。前言从用途上来说...
    99+
    2023-07-04
  • Java线程池优化的方法是什么
    这篇文章主要介绍“Java线程池优化的方法是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Java线程池优化的方法是什么”文章能帮助大家解决问题。升级版线程池的优化新增了4种拒绝策略。分别为:M...
    99+
    2023-06-29
  • tomcat线程池调优的方法是什么
    Tomcat线程池调优的方法包括以下几个方面: 调整线程池大小:根据系统负载和并发请求量来调整线程池大小,确保线程池能够满足系统...
    99+
    2024-03-12
    tomcat
  • 线程池是什么?线程池(ThreadPoolExecutor)使用详解
    点一点,了解更多https://www.csdn.net/ 本篇文章将详细讲解什么是线程池,线程池的参数介绍,线程池的工作流程,使用Executors创建常见的线程池~~~ 目录 点一点,了解更多 文章目录 一、线程池的概念 1.1线...
    99+
    2023-09-03
    java 数据结构 jvm 面试 java-ee
  • python多线程多进程的优缺点是什么
    Python多线程和多进程的优缺点如下:多线程的优点:1. 轻量级:线程的创建和上下文切换比进程要快得多,占用的资源也比较少。2. ...
    99+
    2023-05-30
    多线程多进程 多线程 多进程
  • python线程池(threadpool
    最近碰到个问题,需要telnet登录上千台机器去取主机名;其中有用户名密码交互部分,有需要延迟的部分,大概一次登录一次到处理完要10s,1000台机器串行处理就需要1000×10s,差不多三个小时,这是很难受的事情; 之前用thread的...
    99+
    2023-01-31
    线程 python threadpool
  • python 线程池threadpool
    最近在做一个视频设备管理的项目,设备包括(摄像机,DVR,NVR等),包括设备信息补全,设备状态推送,设备流地址推送等,如果同时导入的设备数量较多,如果使用单线程进行设备检测,那么由于设备数量较多,会带来较大的延时,因此考虑多线程处理此问...
    99+
    2023-01-31
    线程 python threadpool
  • 什么是java线程池
    使用线程池的好处有很多,比如节省系统资源的开销,节省创建和销毁线程的时间等,当我们需要处理的任务较多时,就可以使用线程池,可能还有很多用户不知道Java线程池如何使用?今天给大家分享Java四种线程池的使用方法。线程池介绍:线程池是一种多线...
    99+
    2017-06-28
    java入门 java 线程池
  • java线程池是什么
    java的线程池是什么,有哪些类型,作用分别是什么 (推荐学习:java课程)线程池是一种多线程处理形式,处理过程中将任务添加队列,然后在创建线程后自动启动这些任务,每个线程都使用默认的堆栈大小,以默认的优先级运行,并处...
    99+
    2016-06-22
    java教程 java
  • Android线程池是什么
    本篇内容主要讲解“Android线程池是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Android线程池是什么”吧!我们都知道线程池的用法,一般就是先new一个ThreadPoolExec...
    99+
    2023-06-22
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作