加入收藏 | 设为首页 | 会员中心 | 我要投稿 西安站长网 (https://www.029zz.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 建站 > 正文

深入理解Node.js 进程与线程(8000字长文彻底搞懂)

发布时间:2019-08-16 05:07:04 所属栏目:建站 来源:koala
导读:副标题#e# 前言 进程与线程是一个程序员的必知概念,面试经常被问及,但是一些文章内容只是讲讲理论知识,可能一些小伙伴并没有真的理解,在实际开发中应用也比较少。本篇文章除了介绍概念,通过Node.js 的角度讲解进程与线程,并且讲解一些在项目中的实战

IPC创建和实现示意图

深入理解Node.js 进程与线程(8000字长文彻底搞懂)

IPC通信管道是如何创建的

深入理解Node.js 进程与线程(8000字长文彻底搞懂)

父进程在实际创建子进程之前,会创建IPC通道并监听它,然后才真正的创建出子进程,这个过程中也会通过环境变量(NODE_CHANNEL_FD)告诉子进程这个IPC通道的文件描述符。子进程在启动的过程中,根据文件描述符去连接这个已存在的IPC通道,从而完成父子进程之间的连接。

Node.js句柄传递

讲句柄之前,先想一个问题,send句柄发送的时候,真的是将服务器对象发送给了子进程?

子进程对象send()方法可以发送的句柄类型

  • net.Socket TCP套接字
  • net.Server TCP服务器,任意建立在TCP服务上的应用层服务都可以享受它带来的好处
  • net.Native C++层面的TCP套接字或IPC管道
  • dgram.Socket UDP套接字
  • dgram.Native C++层面的UDP套接字

send句柄发送原理分析

结合句柄的发送与还原示意图更容易理解。

深入理解Node.js 进程与线程(8000字长文彻底搞懂)

send()方法在将消息发送到IPC管道前,实际将消息组装成了两个对象,一个参数是hadler,另一个是message。message参数如下所示:

  1.     cmd:'NODE_HANDLE', 
  2.     type:'net.Server', 
  3.     msg:message 

发送到IPC管道中的实际上是我们要发送的句柄文件描述符。这个message对象在写入到IPC管道时,也会通过JSON.stringfy()进行序列化。所以最终发送到IPC通道中的信息都是字符串,send()方法能发送消息和句柄并不意味着它能发送任何对象。

连接了IPC通道的子线程可以读取父进程发来的消息,将字符串通过JSON.parse()解析还原为对象后,才触发message事件将消息传递给应用层使用。在这个过程中,消息对象还要被进行过滤处理,message.cmd的值如果以NODE_为前缀,它将响应一个内部事件internalMessage,如果message.cmd值为NODE_HANDLE,它将取出message.type值和得到的文件描述符一起还原出一个对应的对象。

以发送的TCP服务器句柄为例,子进程收到消息后的还原过程代码如下:

  1. function(message,handle,emit){ 
  2.     var self = this; 
  3.      
  4.     var server = new net.Server(); 
  5.     server.listen(handler,function(){ 
  6.       emit(server); 
  7.     }); 

这段还原代码,子进程根据message.type创建对应的TCP服务器对象,然后监听到文件描述符上。由于底层细节不被应用层感知,所以子进程中,开发者会有一种服务器对象就是从父进程中直接传递过来的错觉。

Node进程之间只有消息传递,不会真正的传递对象,这种错觉是抽象封装的结果。目前Node只支持我前面提到的几种句柄,并非任意类型的句柄都能在进程之间传递,除非它有完整的发送和还原的过程。

Node.js多进程架构模型

我们自己实现一个多进程架构守护Demo

深入理解Node.js 进程与线程(8000字长文彻底搞懂)

编写主进程

master.js 主要处理以下逻辑:

  • 创建一个 server 并监听 3000 端口。
  • 根据系统 cpus 开启多个子进程
  • 通过子进程对象的 send 方法发送消息到子进程进行通信
  • 在主进程中监听了子进程的变化,如果是自杀信号重新启动一个工作进程。
  • 主进程在监听到退出消息的时候,先退出子进程在退出主进程
  1. // master.js 
  2. const fork = require('child_process').fork; 
  3. const cpus = require('os').cpus(); 
  4.  
  5. const server = require('net').createServer(); 
  6. server.listen(3000); 
  7. process.title = 'node-master' 
  8.  
  9. const workers = {}; 
  10. const createWorker = () => { 
  11.     const worker = fork('worker.js') 
  12.     worker.on('message', function (message) { 
  13.         if (message.act === 'suicide') { 
  14.             createWorker(); 
  15.         } 
  16.     }) 
  17.     worker.on('exit', function(code, signal) { 
  18.         console.log('worker process exited, code: %s signal: %s', code, signal); 
  19.         delete workers[worker.pid]; 
  20.     }); 
  21.     worker.send('server', server); 
  22.     workers[worker.pid] = worker; 
  23.     console.log('worker process created, pid: %s ppid: %s', worker.pid, process.pid); 
  24.  
  25. for (let i=0; i<cpus.length; i++) { 
  26.     createWorker(); 
  27.  
  28. process.once('SIGINT', close.bind(this, 'SIGINT')); // kill(2) Ctrl-C 
  29. process.once('SIGQUIT', close.bind(this, 'SIGQUIT')); // kill(3) Ctrl- 
  30. process.once('SIGTERM', close.bind(this, 'SIGTERM')); // kill(15) default 
  31. process.once('exit', close.bind(this)); 
  32.  
  33. function close (code) { 
  34.     console.log('进程退出!', code); 
  35.  
  36.     if (code !== 0) { 
  37.         for (let pid in workers) { 
  38.             console.log('master process exited, kill worker pid: ', pid); 
  39.             workers[pid].kill('SIGINT'); 
  40.         } 
  41.     } 
  42.  
  43.     process.exit(0); 

工作进程

(编辑:西安站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读