首页 PaddleOCR 帖子详情
cuda版本是否对PaddleOCR tensorrt推理启动速度有影响?
收藏
快速回复
PaddleOCR 问答OCR 527 0
cuda版本是否对PaddleOCR tensorrt推理启动速度有影响?
收藏
快速回复
PaddleOCR 问答OCR 527 0

环境:win10 cuda:11.6 cudnn:8.4 TensorRT:7.2.2.3 Paddle_inference推理库为2.1.1 TensorRT模式下的推理程序的启动速度要七八分钟

而同样的程序在 win10 cuda10.2 cudnn:7.6 TensorRT:7.2.2.3 Paddle_inference推理库为2.1.1 的环境下,推理程序启动只要两分钟就够了。

想请问一下各位,这是cuda的版本影响了TensorRT模式下的推理启动速度吗?

0
收藏
回复
需求/bug反馈?一键提issue告诉我们
发现bug?如果您知道修复办法,欢迎提pr直接参与建设飞桨~
在@后输入用户全名并按空格结束,可艾特全站任一用户