文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

Node与Python双向通信的实现方法

2023-06-20 16:11

关注

这篇文章主要介绍“Node与Python双向通信的实现方法”,在日常操作中,相信很多人在Node与Python双向通信的实现方法问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Node与Python双向通信的实现方法”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

目录

第三方数据供应商把数据和Python封装到一起,只能通过调用 Python方法来实现数据查询,如果可以通过Node 简单封装下实现 Python 方法调用可以快速上线并节省开发成本。

最简单粗暴的通信方式是 Nodejs调用一下 Python 脚本,然后获取子进程的输出,但是由于每次 Python 启动并加载数据包的过程比较漫长,所以对该过程优化。

进程通信

index.py

# 封装的 Python 包, 体积巨大from mb import MB# 从数据包中查询mbe.get('1.0.1.0')

index.js

const { spawn } = require('child_process');const ls = spawn('python3', ['index.py']);ls.stdout.on('data', (data) => {  console.log(`stdout: ${data}`);});ls.stderr.on('data', (data) => {  console.error(`stderr: ${data}`);});ls.on('close', (code) => {  console.log(`child process exited with code $[code]`);});

通过child_process.spawn来派生 Python 子进程,监听 stdout 输出。上述方式也是官方文档中的示例,目前该示例存在两个问题:

进程双向通信

保证一次数据加载,多次使用的前提是 Python 进程启动后不能退出。Python 进程之所以退出是因为无事可做,所以常见的手段有循环,sleep,监听端口,这些手段可以翻译成同步阻塞任务,同步非阻塞任务,其中代价最小的就是同步非阻塞任务,然后可以想到 Linux 的 select,epoll,简单搜索了下 Python 的 epoll,好像还有原生的包。

index.py - 通过 epoll 监听 stdin

import sysimport fcntlimport selectfrom mb import MBimport jsonmbe = MB('./data')# epoll 模型fd = sys.stdin.fileno()epoll = select.epoll()epoll.register(fd, select.EPOLLIN)try:    while True:        events = epoll.poll(10) # 同步非阻塞        data = ''        for fileno, event in events:            data += sys.stdin.readline() # 通过标准输入获取数据            if data == '' or data == '\n':                continue            items = xxx # 数处理过程            for item in items:                result = mbe.get(item)                sys.stdout.write(json.dumps(result, ensure_ascii=False) +'\n') # 写入到标准输出                sys.stdout.flush() # 缓冲区刷新finally:    epoll.unregister(fd)    epoll.close()

index.js - 通过 stdin 发送数据

const child_process = require('child_process');const child = child_process.spawn('python3', ['./base.py']);let callbacks =  [],     chunks=Buffer.alloc(0),     chunkArr = [],     data = '',     onwork = false; // buffer 无法动态扩容    child.stdout.on('data', (chunk) => {    chunkArr.push(chunk)    if (onwork) return;    onwork = true;    while(chunkArr.length) {        chunks = Buffer.concat([chunks, chunkArr.pop()]);        const length = chunks.length;        let trunkAt = -1;        for(const [k, d] of chunks.entries()) {            if (d == '0x0a') { // 0a 结尾                data += chunks.slice(trunkAt+1, trunkAt=k);                const cb = callbacks.shift();                cb(null, data === 'null' ? null : data )                data = '';            }        }        if (trunkAt < length) {            chunks = chunks.slice(trunkAt+1)        }    }    onwork = false;})setInterval(() => {    if (callbacks.length) child.stdin.write(`\n`); // Nodejs端的标准输入输出没有flush方法,只能 hack, 写入后python无法及时获取到最新}, 500)exports.getMsg = function getMsg(ip, cb) {    callbacks.push(cb)    child.stdin.write(`${ip}\n`); // 把数据写入到子进程的标准输入}

Python 与 Nodejs 通过 stdio 实现通信; Python 通过 epoll 监听 stdin 实现驻留内存,长时间运行。

存在问题

总结

虽然可以实现 Nodejs 和 Python 的双向通信,然后由于上述种种问题,在这里并不推荐使用这种方式,通过 HTTP 或 Socket 方式比这个香多了。

到此,关于“Node与Python双向通信的实现方法”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注编程网网站,小编会继续努力为大家带来更多实用的文章!

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     807人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     351人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     314人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     433人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     221人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯