Paddle2ONNX icon indicating copy to clipboard operation
Paddle2ONNX copied to clipboard

Published 20 hours ago • verified publisher icon PaddlePaddle

paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet

Open 754467737 opened this issue 4 years ago • 18 comments

Traceback (most recent call last): File "/home/wangnan/anaconda3/envs/action-py3.7/bin/paddle2onnx", line 8, in sys.exit(main()) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/command.py", line 155, in main operator_export_type=operator_export_type) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/command.py", line 122, in program2onnx operator_export_type=operator_export_type) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/convert.py", line 79, in program2onnx export_onnx(paddle_graph, save_file, opset_version, enable_onnx_checker, operator_export_type) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/convert.py", line 33, in export_onnx onnx_graph = ONNXGraph.build(paddle_graph, opset_version, operator_export_type, verbose) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/graph/onnx_graph.py", line 240, in build onnx_graph = ONNXGraph(paddle_graph, opset_version=opset_version, operator_export_type=operator_export_type) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/graph/onnx_graph.py", line 79, in init self.update_opset_version() File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/graph/onnx_graph.py", line 194, in update_opset_version self.opset_version = OpMapper.get_recommend_opset_version(node_map, self.opset_version) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/op_mapper/op_mapper.py", line 127, in get_recommend_opset_version recommend_opset_version = OpMapper.check_support_status(node_map, opset_version, True) File "/home/wangnan/anaconda3/envs/action-py3.7/lib/python3.7/site-packages/paddle2onnx/op_mapper/op_mapper.py", line 168, in check_support_status raise NotImplementedError(error_info) NotImplementedError: There's 1 ops are not supported yet =========== temporal_shift ===========

temporal_shift不支持。 想请教下，怎么改才能让他支持，debug看了下temporal_shift函数，一直都是一些注册器，具体内容看的眼花缭乱！求救！help!

754467737 avatar Sep 26 '21 02:09 754467737

您好，请问你的使用场景是？另外请提供一下你的模型，谢谢

yeliang2258 avatar Sep 27 '21 03:09 yeliang2258

模型就是贵公司PaddleVideo项目里的pp-TSM呀，我使用的场景是人动作分类，数据集自己做的0-0

------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2021年9月27日(星期一) 中午11:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353)

您好，请问你的使用场景是？另外请提供一下你的模型，谢谢

— You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

754467737 avatar Sep 27 '21 03:09 754467737

请问解决了吗？我也遇到一样的问题， TSM的temporal_shift模块不支持转onnx

dengfenglai321 avatar Nov 19 '21 03:11 dengfenglai321

模型就是贵公司PaddleVideo项目里的pp-TSM呀，我使用的场景是人动作分类，数据集自己做的0-0 … ------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2021年9月27日(星期一) 中午11:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 您好，请问你的使用场景是？另外请提供一下你的模型，谢谢 — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

请问解决了吗？我也遇到一样的问题， TSM的temporal_shift模块不支持转onnx

dengfenglai321 avatar Nov 19 '21 03:11 dengfenglai321

模型就是贵公司PaddleVideo项目里的pp-TSM呀，我使用的场景是人动作分类，数据集自己做的0-0 … ------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2021年9月27日(星期一) 中午11:11 收件人: _@**._>; 抄送: _@.>; @.**_>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 您好，请问你的使用场景是？另外请提供一下你的模型，谢谢 — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

请问解决了吗？我也遇到一样的问题， TSM的temporal_shift模块不支持转onnx

解决了，自己写代码。利用paddle给的API解释文档，写了一个能转的就行。 代码如下： def temporal_shift_paddle(inputs, num_seg,num_seg_div): #进行切片准备 t, c, h, w = inputs.shape n = int(t/8) #分成几分 fold = int(c * num_seg_div) #进行切片 if (n<=0): raise('batch_size must be greater than 0') elif n == 1 : #完成补0操作 pad = paddle.zeros([1, c, h, w]) pad_ = paddle.fluid.layers.concat((pad, inputs), 0) new_inputs = paddle.fluid.layers.concat((pad_, pad), 0) #切片 #[64, 8, 56, 56] slice1 = new_inputs[:t, :fold, :, :] #[64, 8, 56, 56] slice2 = new_inputs[2:t + 2, fold:2 * fold, :, :] #[64, 48, 56, 56] slice3 = new_inputs[1:t + 1, 2 * fold:, :, :] out = paddle.fluid.layers.concat((slice1, slice2), 1) out = paddle.fluid.layers.concat((out, slice3), 1) else: result = [] # 完成补0操作 for i in range(n): #找到对应的分块 inputs_ = inputs[8i:8(i+1),:,:,:] pad1 = paddle.zeros([1, c, h, w]) pad1_ = paddle.fluid.layers.concat((pad1, inputs_), 0) new_inputs_ = paddle.fluid.layers.concat((pad1_, pad1), 0) # 切片 # [64, 8, 56, 56] slice1_ = new_inputs_[:t_, :fold, :, :] # [64, 8, 56, 56] slice2_ = new_inputs_[2:t_ + 2, fold:2 * fold, :, :] # [64, 48, 56, 56] slice3_ = new_inputs_[1:t_ + 1, 2 * fold:, :, :] out_ = paddle.fluid.layers.concat((slice1_, slice2_), 1) out_ = paddle.fluid.layers.concat((out_, slice3_), 1) result.append(out_) out = paddle.fluid.layers.concat((result[0], result[1]), 0) for j in range(2,len(result)): out = paddle.fluid.layers.concat((out, result[j]), 0) return out

754467737 avatar Nov 19 '21 06:11 754467737

git上已经回复你了，祝好运

------------------ 原始邮件 ------------------ 发件人: "PaddlePaddle/Paddle2ONNX" @.>; 发送时间: 2021年11月19日(星期五) 中午11:42 @.>; @.@.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353)

模型就是贵公司PaddleVideo项目里的pp-TSM呀，我使用的场景是人动作分类，数据集自己做的0-0 … ------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2021年9月27日(星期一) 中午11:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 您好，请问你的使用场景是？另外请提供一下你的模型，谢谢 — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

请问解决了吗？我也遇到一样的问题， TSM的temporal_shift模块不支持转onnx

— You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

754467737 avatar Nov 19 '21 06:11 754467737

git上已经回复你了，祝好运 … ------------------ 原始邮件 ------------------ 发件人: "PaddlePaddle/Paddle2ONNX" @.>; 发送时间: 2021年11月19日(星期五) 中午11:42 @.>; @.@.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 模型就是贵公司PaddleVideo项目里的pp-TSM呀，我使用的场景是人动作分类，数据集自己做的0-0 … ------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2021年9月27日(星期一) 中午11:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 您好，请问你的使用场景是？另外请提供一下你的模型，谢谢 — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android. 请问解决了吗？我也遇到一样的问题， TSM的temporal_shift模块不支持转onnx — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

谢谢 我试下

dengfenglai321 avatar Nov 19 '21 07:11 dengfenglai321

进行转的时候export_model.py中的值记得进行更改，

改为你需要的batch，不然就算转成功，在推理部分也会报错

------------------ 原始邮件 ------------------ 发件人: "PaddlePaddle/Paddle2ONNX" @.>; 发送时间: 2021年11月19日(星期五) 下午3:02 @.>; @.@.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353)

git上已经回复你了，祝好运 … ------------------ 原始邮件 ------------------ 发件人: "PaddlePaddle/Paddle2ONNX" @.>; 发送时间: 2021年11月19日(星期五) 中午11:42 @.>; @.@.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 模型就是贵公司PaddleVideo项目里的pp-TSM呀，我使用的场景是人动作分类，数据集自己做的0-0 … ------------------ 原始邮件 ------------------ 发件人: @.>; 发送时间: 2021年9月27日(星期一) 中午11:11 收件人: @.>; 抄送: @.>; @.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353) 您好，请问你的使用场景是？另外请提供一下你的模型，谢谢 — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android. 请问解决了吗？我也遇到一样的问题， TSM的temporal_shift模块不支持转onnx — You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

谢谢 我试下

— You are receiving this because you authored the thread. Reply to this email directly, view it on GitHub, or unsubscribe. Triage notifications on the go with GitHub Mobile for iOS or Android.

754467737 avatar Nov 19 '21 07:11 754467737

发不了图，训练之后，利用export_model.py转推理这部分，静态输入把shape=[None, cfg.num_seg, 3, cfg.target_size, cfg.target_size]改成你需要的batch,不然会报错（大概是一些推理过程矩阵不对应的情况）

  • def get_input_spec(cfg, model_name): if model_name in ['ppTSM', 'TSM', 'TSN', 'ppTSN']: #动态转静态，保证在推理过程中各个Tensor 的 shape #[1,8,3,224,224] input_spec = [[ InputSpec( shape=[1, cfg.num_seg, 3, cfg.target_size, cfg.target_size], dtype='float32'), ]]

754467737 avatar Nov 19 '21 07:11 754467737

抱歉抱歉0-0，少了t_，回答的时候手速太快直接删掉了0-0

def temporal_shift_paddle(inputs, num_seg,num_seg_div): #进行切片准备 t, c, h, w = inputs.shape n = int(t/8) #分成几分 fold = int(c * num_seg_div) #进行切片 if (n<=0): raise('batch_size must be greater than 0') elif n == 1 : #完成补0操作 pad = paddle.zeros([1, c, h, w]) pad_ = paddle.fluid.layers.concat((pad, inputs), 0) new_inputs = paddle.fluid.layers.concat((pad_, pad), 0) #切片 #[64, 8, 56, 56] slice1 = new_inputs[:t, :fold, :, :] #[64, 8, 56, 56] slice2 = new_inputs[2:t + 2, fold:2 * fold, :, :] #[64, 48, 56, 56] slice3 = new_inputs[1:t + 1, 2 * fold:, :, :] out = paddle.fluid.layers.concat((slice1, slice2), 1) out = paddle.fluid.layers.concat((out, slice3), 1) else: result = [] # 完成补0操作 for i in range(n): #找到对应的分块 inputs_ = inputs[8i:8(i+1),:,:,:] pad1 = paddle.zeros([1, c, h, w]) pad1_ = paddle.fluid.layers.concat((pad1, inputs_), 0) new_inputs_ = paddle.fluid.layers.concat((pad1_, pad1), 0) t_, c, h, w = inputs_.shape # 切片 # [64, 8, 56, 56] slice1_ = new_inputs_[:t_, :fold, :, :] # [64, 8, 56, 56] slice2_ = new_inputs_[2:t_ + 2, fold:2 * fold, :, :] # [64, 48, 56, 56] slice3_ = new_inputs_[1:t_ + 1, 2 * fold:, :, :] out_ = paddle.fluid.layers.concat((slice1_, slice2_), 1) out_ = paddle.fluid.layers.concat((out_, slice3_), 1) result.append(out_) out = paddle.fluid.layers.concat((result[0], result[1]), 0) for j in range(2,len(result)): out = paddle.fluid.layers.concat((out, result[j]), 0) return out

754467737 avatar Nov 23 '21 10:11 754467737

Hi, @754467737 我们准备了一份简单的问题调研（半分钟可完成），如有时间可帮忙完成调研，帮助Paddle2ONNX做得更好 https://iwenjuan.baidu.com/?code=r8hu2s

jiangjiajun avatar Nov 25 '21 06:11 jiangjiajun

@754467737 大佬，这部分pp-tsm转onnx使用这个工具怎么搞呀，从pytorch切过来几天不知道咋搞？求助

aureosun avatar Aug 25 '22 10:08 aureosun

pip install paddle2onnx=1.0.0rc4 即可

jiangjiajun avatar Aug 25 '22 10:08 jiangjiajun

转onnx先使用export.py进行推理图的生成->要进行修改InputSpc中的batch_size -> 使用后学的转paddle2onnx进行转换 服务器上，实现推理图过程. 步骤大概是： 1.记得改export.py中InputSpc的batch_size,改成你需要的 2.python tools/export_model.py -c configs/recognition/pptsm/pptsm_k400_frames_uniform.yaml -p output/ppTSM/ppTSM_best.pdparams -o inference/ppTSM
3.paddle2onnx --model_dir ./inference/ppTSM/ --model_filename ppTSM.pdmodel --params_filename ppTSM.pdiparams --save_file ./to_onnx/1.onnx --opset_version 11 --enable_onnx_checker True 第三步需要安装paddle2onnx 第一步的那个你要看看你需要转的是哪个模型，比如pp-TSM:找到下边的函数 def get_input_spec(cfg, model_name): if model_name in ['ppTSM', 'TSM', 'TSN', 'ppTSN']: input_spec = [[ InputSpec(shape=[None, cfg.num_seg, 3, cfg.target_size, cfg.target_size], dtype='float32'), ]] 把None改成你的batch_size不然转不了

754467737 avatar Aug 25 '22 10:08 754467737

转onnx先使用export.py进行推理图的生成->要进行修改InputSpc中的batch_size -> 使用后学的转paddle2onnx进行转换 服务器上，实现推理图过程. 步骤大概是： 1.记得改export.py中InputSpc的batch_size,改成你需要的 2.python tools/export_model.py -c configs/recognition/pptsm/pptsm_k400_frames_uniform.yaml -p output/ppTSM/ppTSM_best.pdparams -o inference/ppTSM
3.paddle2onnx --model_dir ./inference/ppTSM/ --model_filename ppTSM.pdmodel --params_filename ppTSM.pdiparams --save_file ./to_onnx/1.onnx --opset_version 11 --enable_onnx_checker True 第三步需要安装paddle2onnx 第一步的那个你要看看你需要转的是哪个模型，比如pp-TSM:找到下边的函数 def get_input_spec(cfg, model_name): if model_name in ['ppTSM', 'TSM', 'TSN', 'ppTSN']: input_spec = [[ InputSpec(shape=[None, cfg.num_seg, 3, cfg.target_size, cfg.target_size], dtype='float32'), ]] 把None改成你的batch_size不然转不了

754467737 avatar Aug 25 '22 10:08 754467737

@754467737 export.py 和 export_model.py 是一个文件吧，都是 PaddleVideo\tools\export_model.py这个？ 把paddle2onnx版本由0.9.8升级未1.0.0.rc3之后可以用了

aureosun avatar Aug 29 '22 07:08 aureosun

应该是一个叭，运行的是PaddleVideo\tools\export_model.py里的，能用就好

------------------ 原始邮件 ------------------ 发件人: "PaddlePaddle/Paddle2ONNX" @.>; 发送时间: 2022年8月29日(星期一) 下午3:25 @.>; @.@.>; 主题: Re: [PaddlePaddle/Paddle2ONNX] paddle2onnx -> Paddle-Video下的pp-TSM模型中There's 1 ops are not supported yet (#353)

@754467737 export.py 和 export_model.py 是一个文件吧，都是 PaddleVideo\tools\export_model.py这个？ 把paddle2onnx版本由0.9.8升级未1.0.0.rc3之后可以用了

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you were mentioned.Message ID: @.***>

754467737 avatar Aug 29 '22 07:08 754467737