PaddleNLP icon indicating copy to clipboard operation
PaddleNLP copied to clipboard

请问有没有遇到flask+gunicorn+UIE 基于docker封装服务的请求响应时间是本地gunicorn直接起的响应时间的1倍?

Open xsqiii opened this issue 3 years ago • 2 comments

1)PaddleNLP 2.3.4,PaddlePaddle2.3.1 2)系统环境:MacOS,python3.8

基于Flask + gunicorn + UIE框架(uie-nano抽取自定义8种实体类型) 本地gunicorn直接起服务,一句的响应时间约500ms; 配置一致,build docker后进行调用,同一句的响应时间约1s。

请问有遇到过这种问题吗?

xsqiii avatar Aug 01 '22 02:08 xsqiii

测试了一下,并没有出现这个问题,不太确定是不是docker的网络的设置是否有问题?

wawltor avatar Aug 01 '22 11:08 wawltor

1)PaddleNLP 2.3.4,PaddlePaddle2.3.1 2)系统环境:MacOS,python3.8

基于Flask + gunicorn + UIE框架(uie-nano抽取自定义8种实体类型) 本地gunicorn直接起服务,一句的响应时间约500ms; 配置一致,build docker后进行调用,同一句的响应时间约1s。

请问有遇到过这种问题吗? 我也有这样的问题,使用docker部署之后的推理速度变慢。

KyleWang-Hunter avatar Aug 08 '22 01:08 KyleWang-Hunter

我擦 坑啊

xxllp avatar Dec 06 '22 07:12 xxllp

我擦 坑啊

如何解决,大佬 ?

KyleWang-Hunter avatar Dec 06 '22 07:12 KyleWang-Hunter

我擦 坑啊

如何解决,大佬 ?

我还没上手部署呢 放弃了

xxllp avatar Dec 06 '22 14:12 xxllp

This issue is stale because it has been open for 60 days with no activity. 当前issue 60天内无活动,被标记为stale。

github-actions[bot] avatar Feb 05 '23 00:02 github-actions[bot]

This issue was closed because it has been inactive for 14 days since being marked as stale. 当前issue 被标记为stale已有14天,即将关闭。

github-actions[bot] avatar Feb 19 '23 00:02 github-actions[bot]

我擦 坑啊

如何解决,大佬 ?

我还没上手部署呢 放弃了

我最终选择用pytorch版本的uie 来训练部署

xxllp avatar Feb 19 '23 05:02 xxllp