FastDeploy
FastDeploy copied to clipboard
TensorRT后端能否生成engin文件,下次启动直接打开engin文件,不用每次生成。
借鉴Nvidia DeepStream框架的思路,第一次生成TensorRT的engin文件,下次找到文件就直接打开使用,程序启动就快多了。现在每次启动都要生成一遍,等待时间太长。
找到接口了。
请教一下,您是怎么做的?