iis服务器助手广告广告
返回顶部
首页 > 资讯 > 精选 >Node高并发的原理是什么
  • 332
分享到

Node高并发的原理是什么

2023-07-04 09:07:23 332人浏览 八月长安
摘要

这篇文章主要介绍“node高并发的原理是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Node高并发的原理是什么”文章能帮助大家解决问题。从头聊起一个常见web应用会做哪些事情运算(执行业务逻辑

这篇文章主要介绍“node高并发的原理是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Node高并发的原理是什么”文章能帮助大家解决问题。

从头聊起

一个常见web应用会做哪些事情

  • 运算(执行业务逻辑、数学运算、函数调用等。主要工作在CPU进行)

  • I/O(如读写文件、读写数据库、读写网络请求等。主要工作在各种I/O设备,如磁盘、网卡等)

一个典型的传统web应用实现

  • 多进程,一个请求fork一个(子)进程 + 阻塞I/O(即blocking I/O或Bio

  • 多线程,一个请求创建一个线程 + 阻塞I/O


多进程WEB应用示例伪代码

listenFd = new Socket(); // 创建监听socketBind(listenFd, 80); // 绑定端口Listen(listenFd);   // 开始监听for ( ; ; ) {    // 接收客户端请求,通过新的socket建立连接    connFd = Accept(listenFd);    // fork子进程    if ((pid = Fork()) === 0) {        // 子进程中        // BIO读取网络请求数据,阻塞,发生进程调度        request = connFd.read();        // BIO读取本地文件,阻塞,发生进程调度        content = ReadFile('test.txt');        // 将文件内容写入响应        Response.write(content);    }}

多线程应用实际上和多进程类似,只不过将一个请求分配一个进程换成了一个请求分配一个线程。线程对比进程更轻量,在系统资源占用上更少,上下文切换(ps:所谓上下文切换,稍微解释一下:单核心CPU的情况下同一时间只能执行一个进程或线程中的任务,而为了宏观上的并行,则需要在多个进程或线程之间按时间片来回切换以保证各进、线程都有机会被执行)的开销也更小;同时线程间更容易共享内存,便于开发

上文中提到了web应用的两个核心要点,一个是进(线)程模型,一个是I/O模型。那阻塞I/O到底是什么?又有哪些其他的I/O模型呢?别着急,首先我们看一下什么是阻塞

什么是阻塞?什么是阻塞I/O?

简而言之,阻塞是指函数调用返回之前,当前进(线)程会被挂起,进入等待状态,在这个状态下,当前进(线)程暂停运行,引起CPU的进(线)程调度。函数只有在内部工作全部执行完成后才会返回给调用者

所以阻塞I/O是,应用程序通过api调用I/O操作后,当前进(线)程将会进入等待状态,代码无法继续往下执行,这时CPU可以进行进(线)程调度,即切换到其他可执行的进(线)程继续执行,当前进(线)程在底层I/O请求处理完后才会返回并可以继续执行

多进(线)程 + 阻塞I/O模型有什么问题?

在了解了什么是阻塞和阻塞I/O后,我们来分析一下传统web应用多进(线)程 + 阻塞I/O模型有什么弊端。

因为一个请求需要分配一个进(线)程,这样的系统在并发量大时需要维护大量进(线)程,且需要进行大量的上下文切换,这都需要大量的CPU、内存等系统资源支撑,所以在高并发请求进来时CPU和内存开销会急剧上升,可能会迅速拖垮整个系统导致服务不可用

nodejs应用实现

接下来我们看看nodejs应用是如何实现的。

  • 事件驱动,单线程(主线程)

  • 非阻塞I/O在官网上可以看到,nodejs最主要的两大特点,一个是单线程事件驱动,一个是“非阻塞”I/O模型。单线程 + 事件驱动比较好理解,前端同学应该都很熟悉js的单线程和事件循环这套机制了,那我们主要来研究一下这个“非阻塞I/O”是怎么一回事。首先来看一段nodejs服务端应用常见的代码,

const net = require('net');const server = net.createServer();const fs = require('fs');server.listen(80);  // 监听端口// 监听事件建立连接server.on('connection', (socket) => {    // 监听事件读取请求数据    socket.on('data', (data) => {    // 异步读取本地文件    fs.readFile('test.txt', (err, data) => {            // 将读取的内容写入响应            socket.write(data);            socket.end();        })    });});

可以看到在nodejs中,我们可以以异步的方式去进行I/O操作,通过API调用I/O操作后会马上返回,紧接着就可以继续执行其他代码逻辑,那为什么nodejs中的I/O是“非阻塞”的呢?回答这个问题之前我们再做一些准备工作,参考nodejs进阶视频讲解:进入学习

read操作基本步骤

首先看下一个read操作需要经历哪些步骤

  • 用户程序调用I/O操作API,内部发出系统调用,进程从用户态转到内核态

  • 系统发出I/O请求,等待数据准备好(如网络I/O,等待数据从网络中到达socket;等待系统从磁盘上读取数据等)

  • 数据准备好后,复制到内核缓冲区

  • 从内核空间复制到用户空间,用户程序拿到数据

接下来我们看一下操作系统中有哪些I/O模型

几种I/O模型

阻塞式I/O

Node高并发的原理是什么


非阻塞式I/O

Node高并发的原理是什么


I/O多路复用(进程可同时监听多个I/O设备就绪)

Node高并发的原理是什么


信号驱动I/O

Node高并发的原理是什么


异步I/O

Node高并发的原理是什么


那么nodejs里到底使用了哪种I/O模型呢?是上图中的“非阻塞I/O”吗?别着急,先接着往下看,我们来了解下nodejs的体系结构

nodejs体系结构,线程、I/O模型分析

Node高并发的原理是什么

最上面一层是就是我们编写nodejs应用代码时可以使用的API库,下面一层则是用来打通nodejs和它所依赖的底层库的一个中间层,比如实现让js代码可以调用底层的c代码库。来到最下面一层,可以看到前端同学熟悉的V8,还有其他一些底层依赖。注意,这里有一个叫libuv的库,它是干什么的呢?从图中也能看出,libuv帮助nodejs实现了底层的线程池、异步I/O等功能。libuv实际上是一个跨平台的C语言库,它在windowslinux等不同平台下会调用不同的实现。我这里主要分析linux下libuv的实现,因为我们的应用大部分时候还是运行在linux环境下的,且平台间的差异性并不会影响我们对nodejs原理的分析和理解。好了,对于nodejs在linux下的I/O模型来说,libuv实际上提供了两种不同场景下的不同实现,处理网络I/O主要由epoll函数实现(其实就是I/O多路复用,在前面的图中使用的是select函数来实现I/O多路复用,而epoll可以理解为select函数的升级版,这个暂时不做具体分析),而处理文件I/O则由多线程(线程池) + 阻塞I/O模拟异步I/O实现


下面是一段我写的nodejs底层实现的伪代码帮助大家理解

listenFd = new Socket();    // 创建监听socketBind(listenFd, 80); // 绑定端口Listen(listenFd);   // 开始监听for ( ; ; ) {    // 阻塞在epoll函数上,等待网络数据准备好    // epoll可同时监听listenFd以及多个客户端连接上是否有数据准备就绪    // clients表示当前所有客户端连接,curFd表示epoll函数最终拿到的一个就绪的连接    curFd = Epoll(listenFd, clients);    if (curFd === listenFd) {        // 监听套接字收到新的客户端连接,创建套接字        int connFd = Accept(listenFd);        // 将新建的连接添加到epoll监听的list        clients.push(connFd);    }    else {        // 某个客户端连接数据就绪,读取请求数据        request = curFd.read();        // 这里拿到请求数据后可以发出data事件进入nodejs的事件循环        ...    }}// 读取本地文件时,libuv用多线程(线程池) + BIO模拟异步I/OThreadPool.run((callback) => {    // 在线程里用BIO读取文件    String content = Read('text.txt');      // 发出事件调用nodejs提供的callback});

通过I/O多路复用 + 多线程模拟的异步I/O配合事件循环机制,nodejs就实现了单线程处理并发请求并且不会阻塞。所以回到之前所说的“非阻塞I/O”模型,实际上nodejs并没有直接使用通常定义上的非阻塞I/O模型,而是I/O多路复用模型 + 多线程BIO。我认为“非阻塞I/O”其实更多是对nodejs编程人员来说的一种描述,从编码方式和代码执行顺序上来讲,nodejs的I/O调用的确是“非阻塞”的。

关于“Node高并发的原理是什么”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识,可以关注编程网精选频道,小编每天都会为大家更新不同的知识点。

--结束END--

本文标题: Node高并发的原理是什么

本文链接: https://www.lsjlt.com/news/344144.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • Node高并发的原理是什么
    这篇文章主要介绍“Node高并发的原理是什么”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Node高并发的原理是什么”文章能帮助大家解决问题。从头聊起一个常见web应用会做哪些事情运算(执行业务逻辑...
    99+
    2023-07-04
  • node能高并发的原因是什么
    本篇内容主要讲解“node能高并发的原因是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“node能高并发的原因是什么”吧! 因为...
    99+
    2024-04-02
  • mongodb事务并发的原理是什么
    MongoDB的事务并发原理是基于多版本并发控制(MVCC)机制。在MongoDB中,每个文档都有一个唯一的_id字段作为标识。当进...
    99+
    2023-08-30
    mongodb
  • 并发编程LongAdder的原理是什么
    本篇内容介绍了“并发编程LongAdder的原理是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!目录一、前言二、LongAdder类的使...
    99+
    2023-06-20
  • mysql中并发控制的原理是什么
    mysql中并发控制的原理是什么,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。1、mysql的逻辑框架mysql逻辑框架图如下:最上层是处...
    99+
    2024-04-02
  • Redis 数据库并发的原理是什么
    本篇文章为大家展示了Redis 数据库并发的原理是什么,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。一、单线程模型Redis客户端对服务端的每次调用都经历了发送命令...
    99+
    2024-04-02
  • springboot处理高并发的方法是什么
    处理高并发的方法有以下几种: 使用缓存:可以将一些热点数据或计算结果缓存起来,减少数据库或其他系统的访问压力。可以使用Sprin...
    99+
    2023-10-23
    springboot
  • mysql高并发是什么
    本篇文章为大家展示了mysql高并发是什么,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。mysql高并发解决方案1.利用水平分库分表,由单点分布到多点数据库中,从而...
    99+
    2024-04-02
  • java高并发处理机制是什么
    Java高并发处理机制是指通过使用多线程、线程池、锁、同步机制等技术来提高Java程序的并发处理能力。在Java中,可以通过以下几种...
    99+
    2023-10-11
    java
  • GO并发模型的实现原理是什么
    这篇文章主要介绍了GO并发模型的实现原理是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇GO并发模型的实现原理是什么文章都会有所收获,下面我们一起来看看吧。前言请记住下面这句话:DO NOT COMMUNI...
    99+
    2023-06-30
  • node中事件机制的原理是什么
    今天就跟大家聊聊有关node中事件机制的原理是什么,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。Publish/Subscribe(发布/订阅模式)...
    99+
    2024-04-02
  • node中的模块系统原理是什么
    本篇内容介绍了“node中的模块系统原理是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!模块系统并不是所有编程语言都有内置的模块系统,J...
    99+
    2023-07-05
  • Redis单线程能支撑高并发的原因是什么
    本篇内容介绍了“Redis单线程能支撑高并发的原因是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!几种...
    99+
    2024-04-02
  • linux高并发的概念是什么
    本文小编为大家详细介绍“linux高并发的概念是什么”,内容详细,步骤清晰,细节处理妥当,希望这篇“linux高并发的概念是什么”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。在linux中,高并发是系统运行过程中...
    99+
    2023-07-04
  • java处理高并发请求的方法是什么
    Java处理高并发请求的方法有很多种,以下是一些常用的方法: 使用线程池:可以使用Java中的线程池技术来管理并发请求。通过创建...
    99+
    2023-10-25
    java
  • Java并发编程中并发机制的底层实现原理是什么
    今天就跟大家聊聊有关Java并发编程中并发机制的底层实现原理是什么,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。Java中的并发机制依赖于JVM的实现和CPU指令,接下来我们深入底层...
    99+
    2023-06-19
  • 高防CDN的原理是什么
    高防CDN的原理是:1、高防CDN需要新的网站服务器ip地址来防御攻击;2、高防CDN能隐藏网站服务器的ip地址,能降低网站服务器会遭受到针对性的攻击;3、高防CDN能根据不同的攻击类型进行调整防护策略,有效拦截清洗攻击,降低攻击对网站的影...
    99+
    2024-04-02
  • php大数据高并发处理的方法是什么
    处理大数据和高并发的方法很多,以下是一些常用的方法:1. 分布式存储和计算:使用分布式存储和计算技术,将数据分散存储在多个节点上,并...
    99+
    2023-09-27
    php
  • Nodejs高并发原理示例详解
    目录导读什么是事件循环事件循环详解每个循环阶段内容详解走进案例解析nextTick 与 setImmediatenextTick 递归的危害setImmediat...
    99+
    2022-11-13
    Nodejs高并发原理 Nodejs 高并发
  • Node中异步编程机制的原理是什么
    这期内容当中小编将会给大家带来有关Node中异步编程机制的原理是什么,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。目前的异步编程主要解决方案有:事件发布/订阅模式Prom...
    99+
    2024-04-02
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作