当前位置: 首页 > news >正文

Python3与Dubbo3.1通讯解决方案(dubbo-python)

【文章非VIP可读,如果发现阅读限制为系统自动修改阅读权限,请留言我改回】

概述

最近AI项目需要java与python通讯,两边都是比较新的版本。因此需要双方进行通讯,在这里记录一下所采用的方案和关键点。

JAVA调用Python

python通常采用flask作为API接口,其调用的模式采用http。而java执行http请求就很简单,目前采用的方式是OkHttpClient来调用。OkHttpClient本身支持池化调用,性能也不错,这里不再赘述,需要时搜一下就很多。

Python调用JAVA

这花了不少的时间,对比了几种方案

1)接口方案选型:

由于java采用的是dubbo微服务,可以调用http网关接口,也可以直接调用dubbo服务。对比优劣如下:

接口方案复杂程度性能编码
HTTP简单,直接对网关低,需要经过网关转发JSON
DUBBO稍麻烦高,直接对dubbo服务Hession

最终采用性能较高的直接调用dubbo服务的方式。在研究过程,还有一种使用telnet的方式调用,需要给dubbo额外配置其它的兼容模式,未考虑。

2)JAVA直接调用Dubbo服务

这里又研究了两种方式:

2.1)SERVER-CLIENT RPC方式

dubbo官方推荐的方式,大概看了一下,需要在server和client端分别部署一套python服务,觉得路径太长,暂不考虑这种

2.2)直接调用Dubbo服务

全网找了一下,发现可用的开源较少。最终定位在dubbo-python上,对应的github

GitHub - apache/dubbo-python2: Python Dubbo Client

看了一下,支持的python还仅是python2,已经过时。想着会不会有人做了python3的适配,找了一下,还真有:

GitHub - huisongyang/dubbo-python3: 基于 python3 的 dubbo client

这位在python2的基础上进行扩展,支持了python3和升级了zk组件。

安装:

pip install python3-dubbo
使用方式:
from dubbo.client import DubboClient, ZkRegister# 支持从Zk中获取服务的provider,支持根据provider的权重选择主机
zk = ZkRegister('127.0.0.1:2181')
dubbo_cli = DubboClient('com.qianmi.pc.api.GoodsQueryProvider', zk_register=zk)# 支持不使用Zk,直接连接指定的远程主机
dubbo_cli = DubboClient('com.qianmi.pc.api.GoodsQueryProvider', host='127.0.0.1:20880')admin_id = 'A000000'
result = dubbo_cli.call('listByIdString', admin_id)
参数兼容性
python-dubbo支持以下Java类型的参数,表格右边一列代表了在Pyton中与指定Java类型所对应的类型
类型JavaPython
布尔类型booleanbool
整型int, longint
浮点类型float, doublefloat
字符串类型java.lang.Stringstr
列表类型Collection & Array[]
自定义的对象类型java.lang.Object↓ 具体使用方法如下所示 ↓

DubboClient是dubber注册的Interface类,也就是@DubboService类implements的接口java类全名

它还支持自定义类型的请求,由于本人只采用简单参数调用,需要可以自行查看github。

以上的没什么特别,可以对比参考选型的方案。这里额外要写的,是本人踩过的坑

3)趟过的坑

3.1)版本找不到

如果像我的项目一样,只是简单的使用Dubbo,未定义version,那么大概率调用就会出错。因为示例的代码默认是找的v1.0.0。直接在DubboService注解里加上固然是可以,那么有没有办法不用加呢?直接在调用时,将版本传空字符串进去就可以了。这样:
 

client = DubboClient('org.yourgroup.service.IYourService', version='', host='192.168.1.1:20880')

3.2)第二次调用不了,进程CPU100%

这个坑有点大,直接跑示例是跑不出来的。因为示例不会长时间运行,只要稍微时间长一点超过1分钟,就会出现系统卡死并不断打印需要连接的主机IP的情况。

本人已修复该问题,解决方案请找到源码dubbo/connection/connections.py
修改_check_conn方法为如下:

    def _check_conn(self, host):"""对连接进行检查,查看是否超时或者已经达到最大的超时次数:param host::return:"""conn = self._connection_pool[host]# 如果未达到最大的超时时间,则不进行任何操作if time.time() - conn.last_active <= TIMEOUT_IDLE:return# 达到最大的超时次数,对此连接进行重连if self.client_heartbeats.get(host, 0) >= TIMEOUT_MAX_TIMES:self._new_connection(host)self.client_heartbeats[host] = 0conn.close()  # 关闭旧的连接logger.debug('{} timeout and reconnected by client.'.format(host))# 未达到最大的超时次数,超时次数+1且发送心跳包else:self.client_heartbeats[host] = self.client_heartbeats.get(host, 0) + 1invoke_id = get_invoke_id()req = CLI_HEARTBEAT_REQ_HEAD + list(bytearray(pack('!q', invoke_id))) + CLI_HEARTBEAT_TAILconn.write(bytearray(req))logger.debug('Send ❤ request for invoke_id {}, host={}'.format(invoke_id, host))

即可解决卡死的问题,主要由触发心跳后代码错误导致。

相关文章:

Python3与Dubbo3.1通讯解决方案(dubbo-python)

【文章非VIP可读&#xff0c;如果发现阅读限制为系统自动修改阅读权限&#xff0c;请留言我改回】 概述 最近AI项目需要java与python通讯&#xff0c;两边都是比较新的版本。因此需要双方进行通讯&#xff0c;在这里记录一下所采用的方案和关键点。 JAVA调用Python python通…...

深入探索 Java 区块链技术:从核心原理到企业级实践

一、Java 与区块链的天然契合 1.1 区块链技术的核心特征 区块链作为一种分布式账本技术&#xff0c;其核心特征包括&#xff1a; 去中心化&#xff1a;通过 P2P 网络实现节点自治&#xff0c;消除对中央机构的依赖。不可篡改性&#xff1a;利用哈希链和共识机制确保数据一旦…...

NV214NV217美光闪存固态NV218NV225

NV214NV217美光闪存固态NV218NV225 在当今数据驱动的时代&#xff0c;固态硬盘&#xff08;SSD&#xff09;的性能直接决定了计算系统的效率上限。美光科技作为全球存储解决方案的领军者&#xff0c;其NV系列产品凭借尖端技术持续刷新行业标准。本文将围绕NV214、NV217、NV218、…...

第三方组件库:element-uiiviewVant

第三方组件库&#xff1a;element-ui 使用方法&#xff1a; 1.引入样式 <!-- 引入element-ui样式 --><link rel"stylesheet" type"text/css" href"http://unpkg.com/view-design/dist/styles/iview.css">2.引入vue <!-- 引入Vue …...

Qt实现 hello world + 内存泄漏(5)

文章目录 实现hello world的两种方式通过图形化的方式通过纯代码的方式1. 新老头文件的说明2.堆或栈上创建对象的选择3.QString的说明 内存泄漏问题 实现hello world的两种方式 通过图形化的方式 通过图形化的方式&#xff0c;在界面上创建出一个控件&#xff0c;显示出hello …...

13:图像处理—畸变矫正详解

1.制作标定板和描述文件 &#xff08;用PS软件打印&#xff09; * 0.00375 mark 点间距 &#xff0c; 不是 点的直径//倒数第二个就是描述文件 gen_caltab(7,7,0.00375,0.5,caltab_30mm.descr,30-30.ps) * 1 比 1 打印 。Photoshop 格式 2.把标定板调正 调正的目的是为了…...

Prompt compress 技术探究-LLMLingua

Prompt summary&#xff1a;是通过精心设计的提示词&#xff08;prompt&#xff09;引导大型语言模型&#xff08;如 GPT-4&#xff09;生成特定风格或结构的摘要。其目标不仅是压缩信息&#xff0c;还包括满足特定的格式要求、风格偏好或任务需求&#xff0c;所以和一般的文本…...

Python|Pyppeteer实现自动登录小红书(32)

前言 本文是该专栏的第32篇,结合优质项目案例持续分享Pyppeteer的干货知识,记得关注。 本文中,笔者以小红书为例,基于Pyppeteer实现自动登录“小红书”。 需要注意的是,对Pyppeteer不太熟悉的同学,可往前翻阅本专栏前面介绍的Pyppeteer知识点,本专栏将带你了解并熟练使…...

Milvus(13):自定义分析器、过滤器

1 自定义分析器 1.1 标准标记符 Milvus 中的standard 令牌分割器根据空格和标点符号分割文本&#xff0c;适用于大多数语言。要配置使用standard 令牌转换器的分析器&#xff0c;请在analyzer_params 中将tokenizer 设置为standard 。 analyzer_params {"tokenizer&quo…...

调试Cortex-M85 MCU启动汇编和链接命令文件 - 解题一则

调试Cortex-M85 MCU启动汇编和链接命令文件 - 解题一则 苏勇 Andrew, 2025-05 最近在Keil中调试一款新的Cortex-M85内核MCU的SDK代码时&#xff0c;从原有其它芯片的工程中引入了汇编语言编写的启动代码和配套的sct文件&#xff0c;结果总是报错&#xff0c;清理到最后&#…...

SpringMVC——第五章:视图View

一、SpringMVC中视图的实现原理 1.Spring MVC视图支持可配置 在Spring MVC中&#xff0c;视图View是支持定制的&#xff0c;例如我们之前在 springmvc.xml 文件中进行了如下的配置&#xff1a; <!--视图解析器--> <bean id"thymeleafViewResolver" class…...

【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.4 数据重复与去重(IDENTITY COLUMN/UNIQUE约束)

&#x1f449; 点击关注不迷路 &#x1f449; 点击关注不迷路 &#x1f449; 点击关注不迷路 文章大纲 PostgreSQL数据分析实战&#xff1a;数据质量分析之数据重复与去重&#xff08;IDENTITY COLUMN/UNIQUE约束&#xff09;3.4 数据重复与去重3.4.1 数据重复的影响与识别3.4.…...

数据分析之药物-基因-代谢物

记录一下最近的数据分析过程&#xff1a; 假如我有一个Dataframe&#xff0c;有两列[Drug, Gene]&#xff0c;我想构造一个矩阵&#xff0c;行名为Drug&#xff0c;列名为Gene&#xff0c;值为0或者1&#xff0c;其中0表示药物的靶点是该基因&#xff0c;0表示不是靶点。 &am…...

【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.2 缺失值检测与处理(NULL值填充/删除策略)

&#x1f449; 点击关注不迷路 &#x1f449; 点击关注不迷路 &#x1f449; 点击关注不迷路 文章大纲 缺失值检测与处理全攻略&#xff1a;NULL值填充与删除策略实战3.2 缺失值检测与处理3.2.1 缺失值类型与业务影响3.2.1.1 缺失值的三种形态3.2.1.2 业务影响分级 3.2.2 缺失值…...

科普简洁版:同态加密——密码学的未来瑰宝

文章目录 一、同态加密的基本概念1.1 什么是同态加密1.2 同态加密的数学本质1.3 同态加密的类型 二、主要同态加密方案详解2.1 ElGamal加密2.2 Paillier加密2.3 Gentry的完全同态加密方案2.4 BGV方案2.5 BFV方案2.6 CKKS方案 三、同态加密的关键技术3.1 噪声管理技术3.2 多项式…...

时序分解 | Matlab基于WOA-MVMD鲸鱼算法优化多元变分模态分解

时序分解 | Matlab基于WOA-MVMD鲸鱼算法优化多元变分模态分解 目录 时序分解 | Matlab基于WOA-MVMD鲸鱼算法优化多元变分模态分解效果一览基本介绍程序设计参考资料 效果一览 基本介绍 WOA-MVMD鲸鱼算法优化多元变分模态分解时间序列信号分解 可直接运行 分解效果好 适合作为创…...

模型部署与提供服务

工具准备 FastApi (提供接口服务) LLamafactory(模型测试) AutoDL-SSH&#xff08;隧道工具&#xff09; 结构目录 app ├── api.sh ├── lawbot_infer.py ├── main.py ├── models.py ├── prompts │ ├── chat.jinja2 │ ├── prediction.jinja2 │…...

【Linux】深入理解程序地址空间

&#x1f31f;&#x1f31f;作者主页&#xff1a;ephemerals__ &#x1f31f;&#x1f31f;所属专栏&#xff1a;Linux 目录 前言 一、什么是程序地址空间 二、深入理解程序地址空间 1. 引例 2. 理解地址转化 3. 再谈程序地址空间 4. 补充知识 总结 前言 在现代操作系…...

基于AWS Marketplace的快速解决方案:从选型到部署实战

1. 引言&#xff1a;为什么选择AWS Marketplace&#xff1f; 在数字化转型的背景下&#xff0c;企业需要快速获取成熟的软件工具和服务以降低开发成本。AWS Marketplace 作为亚马逊云科技的官方应用商店&#xff0c;提供超过万款预配置的第三方和AWS原生解决方案&#xff0c;涵…...

Android 常用输入控件

一 控件名称 TextView二 示例代码 <?xml version="1.0" encoding="utf-8"?> <androidx.coordinatorlayout.widget.CoordinatorLayoutxmlns:android="http://schemas.android.com/apk/res/android"xmlns:app="http://schemas.a…...

ubuntu修改时区和设置24小时格式时间

这里写目录标题 一、修改时区二、设置24小时格式时间endl 一、修改时区 使用timedatectl命令更改当前时区为东八区[rootubuntu24-16:~]# timedatectl list-timezones | grep -i shanghai Asia/Shanghai [rootubuntu24-16:~]# timedatectl set-timezone Asia/Shanghai [rootubu…...

Android之Button、ImageButton、ChipGroup用法

一 控件名称及UI代码 Button、ImageButton、ChipGroup <?xml version="1.0" encoding="utf-8"?> <androidx.coordinatorlayout.widget.CoordinatorLayoutxmlns:android="http://schemas.android.com/apk/res/android"xmlns:app=&qu…...

【中间件】brpc_基础_用户态线程中断

bthread之用户态线程中断 源码 1 简介 interrupt_pthread 核心功能是 通过信号机制中断阻塞的 pthread 线程&#xff0c;以实现线程的协作式中断。 2 核心功能与设计 2.1 信号选择与注册 信号选择&#xff1a;使用 SIGURG 作为中断信号。 原因&#xff1a;SIGURG 通常用于…...

MATLAB中tabulate函数——先验概率的简单估计

load fisheriris X meas(:,1:2); Y species; labels unique(Y); tabulate(Y)ValueCountPercentsetosa5033.33%versicolor5033.33%virginica5033.33%...

修复笔记:SkyReels-V2 项目中的 torch.load 警告

#工作记录 一、问题描述 在运行项目时&#xff0c;出现以下警告&#xff1a; FutureWarning: You are using torch.load with weights_onlyFalse (the current default value), which uses the default pickle module implicitly. It is possible to construct malicious pic…...

[特殊字符] 人工智能大模型之开源大语言模型汇总(国内外开源项目模型汇总) [特殊字符]

Large Language Model (LLM) 即大规模语言模型&#xff0c;是一种基于深度学习的自然语言处理模型&#xff0c;它能够学习到自然语言的语法和语义&#xff0c;从而可以生成人类可读的文本。 所谓 "语言模型"&#xff0c;就是只用来处理语言文字&#xff08;或者符号…...

自监督学习(Self-supervised Learning)李宏毅

目录 Self-supervised Learning简介&#xff1a; BERT : How to use BERT case1&#xff1a;sequence to class 语言积极性OR消极性判断 case2&#xff1a;sequence to sequence句子中的词语词性标注 case3&#xff1a;sequence2 to class两个句子是不是一个为前提一个为…...

数字化时代下,软件测试中的渗透测试是如何保障安全的?

在如今数字化与信息化的时代&#xff0c;软件测试中存在渗透测试&#xff0c;其位置十分重要&#xff0c;它借助模拟恶意攻击的方式&#xff0c;去发现软件系统所存在的漏洞以及安全问题&#xff0c;这是保障软件安全的关键环节&#xff0c;接下来我会对它的各个方面进行详细介…...

内容中台的AI中枢是什么?

智能算法与知识图谱融合引擎 现代内容中台的核心竞争力在于智能算法与知识图谱的深度融合&#xff0c;这种技术组合构建了动态演化的认知网络。通过将机器学习模型与领域知识图谱进行耦合&#xff0c;系统不仅能识别文本、图像、视频等多模态数据的关联特征&#xff0c;还能实…...

PostgreSQL 的 REINDEX 命令

PostgreSQL 的 REINDEX 命令 REINDEX 是 PostgreSQL 中用于重建索引的重要命令&#xff0c;它可以解决索引损坏、索引膨胀或性能下降等问题。 一 REINDEX 基本语法 -- 重建单个索引 REINDEX [ ( option [, ...] ) ] { INDEX | TABLE | SCHEMA } [ CONCURRENTLY ] name REIND…...

GNOME扩展:Bing壁纸

难点 网络请求(Soup) 下载文件(Soup) 读写设置(Gio.Settings) 源码 import GLib from "gi://GLib"; import Gio from gi://Gio; import St from gi://St; import Soup from gi://Soup;import { Extension } from resource:///org/gnome/shell/extensions/extens…...

BUUCTF——Fake XML cookbook

BUUCTF——Fake XML cookbook 进入靶场 只有一个登录框 先弱口令万能密码试一下吧 弱口令和万能密码都失败了 找其他突破口 F12看看 发现xml代码 function doLogin(){var username $("#username").val();var password $("#password").val();if(user…...

【数据结构】线性表--链表

【数据结构】线性表--链表 一.前情回顾二.链表的概念三.链表的实现1.链表结点的结构&#xff1a;2.申请新结点函数&#xff1a;3.尾插函数&#xff1a;4.头插函数&#xff1a;5.尾删函数&#xff1a;6.头删函数&#xff1a;7.在指定结点之前插入&#xff1a;8.在指定结点之后插…...

2022年第十三届蓝桥杯省赛B组Java题解

2022年第十三届蓝桥杯省赛B组Java题解 个人心得&#xff1a; 2022年蓝桥杯省赛Java B组共包含10道题目&#xff0c;其中填空题2道&#xff08;A、B&#xff09;&#xff0c;编程题8道&#xff08;C-J&#xff09;。题目覆盖数论、字符串处理、动态规划、数据结构等核心知识点…...

【操作系统】死锁

1. 定义 死锁是指两个或多个进程&#xff08;或线程&#xff09;在执行过程中&#xff0c;因争夺资源而造成的一种僵局&#xff0c;每个进程都无限期地等待其他进程释放它们所持有的资源。在这种情况下&#xff0c;没有任何进程能够继续执行&#xff0c;除非有外部干预。 2. …...

Ubuntu22.04及以上版本buildroot SIGSTKSZ 报错问题

本文提供一种解决 Buildroot SIGSTKSZ 报错途径 解决途径来源参考&#xff1a;Buildroot error when building with Ubuntu 21.10 其出现原因在于 GNU C Library 2.34 release announcement&#xff1a; Add _SC_MINSIGSTKSZ and _SC_SIGSTKSZ. When _DYNAMIC_STACK_SIZE_SOU…...

postgresql数据库基本操作

1. 连接 PostgreSQL 数据库 首先&#xff0c;使用 psql 命令行工具连接到数据库。如果是本地连接&#xff0c;命令格式如下&#xff1a; psql -U postgres -d <数据库名称> -h <主机地址>其中&#xff1a; -U postgres&#xff1a;表示以 postgres 用户身份登录…...

【运维】构建基于Python的自动化运维平台:用Flask和Celery打造高效管理工具

《Python OpenCV从菜鸟到高手》带你进入图像处理与计算机视觉的大门! 解锁Python编程的无限可能:《奇妙的Python》带你漫游代码世界 随着企业IT基础设施的复杂性不断增加,手动运维已无法满足高效管理的需求。本文详细介绍如何基于Python构建一个自动化运维平台,利用Flask…...

ES6入门---第三单元 模块三:async、await

async function fn(){ //表示异步&#xff1a;这个函数里面有异步任务 let result await xxx //表示后面结果需要等待 } 读取文件里数据实例&#xff1a; const fs require(fs);//简单封装 fs封装成一个promise const readFile function (fileName){return…...

洛谷 P2866 [USACO06NOV] Bad Hair Day S

题目描述 农夫约翰有 N 头奶牛正在过乱头发节。 每一头牛都站在同一排面朝右&#xff0c;它们被从左到右依次编号为 1,2,⋯,N。编号为 i 的牛身高为 hi​。第 N 头牛在最前面&#xff0c;而第 1 头牛在最后面。 对于第 i 头牛前面的第 j 头牛&#xff0c;如果 hi​>hi1​…...

TS 变量类型生成

TS简单类型注解 let count:number 15 let myName:string MIO let isLoading:boolean false let a:null null let b:undefined undefined let s:symbol Symbol()console.log(hello ts)TS数组类型 数组类型两种写法&#xff1a; 问题&#xff1a;数组中只能存在单一类型数…...

工业大模型:从设备诊断到工艺重构

引言 工业大模型正在引发制造业认知革命。据埃森哲研究,到2026年全球工业大模型市场规模将突破280亿美元,其中工艺优化应用占比达42%。本文将系统解析工业大模型的"预训练-领域适配-应用落地"技术路径,并通过设备健康诊断与工艺参数生成的实践案例,展示如何构建…...

【项目篇之统一内存操作】仿照RabbitMQ模拟实现消息队列

我们的操作分为两种&#xff0c;一种是在内存上进行统一的操作&#xff0c;一种是在硬盘上面操作&#xff0c;今天我写的文章是编写了一个MemoryDataCenter类来实现了 在内存上面的统一操作&#xff1a; 实现统一内存操作 如何使用内存来组织数据 创建一个类来统一管理内存上的…...

强化学习机器人模拟器——GridWorld:一个用于强化学习的 Python 环境

GridWorld 是一个为强化学习(Reinforcement Learning, RL)实验设计的多功能 Python 环境。它提供了一个可定制的二维网格,智能体(agent)需要从起始位置导航到目标位置,避开障碍物、穿越泥泞单元格并收集奖励。本篇博客将详细介绍 grid_world.py 代码中实现的 GridWorld 环…...

DeepSeek Copilot idea插件推荐

&#x1f30c; DeepSeek Copilot for IntelliJ IDEA 让 AI 成为你的编程副驾驶&#xff0c;极速生成单元测试 & 代码注释驱动开发&#xff01; &#x1f680; 简介 DeepSeek Copilot 是一款为 IntelliJ IDEA 打造的 AI 编程助手插件&#xff0c;它能够智能分析你的代码逻辑…...

vue-cropper实现图片裁剪

一、什么是vue-cropper&#xff1f; ​​Vue-Cropper​​ 是一个基于 Vue.js 的图片裁剪组件库&#xff0c;专为 Web 应用设计。当你在网上搜索的时候发现还有一个叫cropper的库&#xff0c;下面是他们的区别&#xff1a; 特性cropper.jsvue-cropper框架依赖纯 JavaScript&am…...

MPI,Pthreads和OpenMP等并行实验环境配置

&#xff08;假设你已按照文档前面的步骤正确安装了 VMware 和 Ubuntu 20.04&#xff09; 第一部分&#xff1a;安装 C/OpenMP/Pthreads 环境&#xff08;修正后&#xff09; 打开终端&#xff1a; 在 Ubuntu 中启动终端应用程序。 更新软件包列表&#xff1a; sudo ap…...

Spring AI Advisors API:AI交互的灵活增强利器

Spring AI Advisors API&#xff1a;AI交互的灵活增强利器 前言 在当今的软件开发领域&#xff0c;随着人工智能技术的飞速发展&#xff0c;将AI融入应用程序变得越来越普遍。Spring AI作为一个强大的框架&#xff0c;为开发者提供了便捷的方式来实现这一目标。其中的Advisor…...

排序功法入门指南【江湖算法笔记】

话说江湖风云变幻&#xff0c;各路英雄好汉行走江湖&#xff0c;总得有个名号排行。若问“东邪西毒南帝北丐”谁强谁弱&#xff0c;总得排个座次不是&#xff1f;这排序之道&#xff0c;恰似武功秘籍&#xff0c;练好了能号令群雄&#xff0c;练岔了怕是要被笑掉大牙&#xff0…...

Free Draft Model!Lookahead Decoding加速大语言模型解码新路径

Free Draft Model&#xff01;Lookahead Decoding加速大语言模型解码新路径 大语言模型&#xff08;LLMs&#xff09;在当今AI领域大放异彩&#xff0c;但其自回归解码方式锁死了生成效率。本文将为你解读一种全新的解码算法——Lookahead Decoding&#xff0c;它无需Draft Mo…...