Firefly开源社区

打印 上一主题 下一主题

[人工智能] nanodet 前向时间长

6

积分

0

威望

0

贡献

吃瓜的群众

积分
6

nanodet 前向时间长

发表于 2023-5-10 20:41:02      浏览:1603 | 回复:1        打印      只看该作者   [复制链接] 楼主
问题描述及复现步骤:
本帖最后由 weiyong 于 2023-5-10 20:49 编辑

描述:
使用 rknn_toolkit2 的官方实例中的 rknn_benchmark 程序测试模型耗时,firefly 3588 核心板 上的耗时比 瑞芯微官方的 rk3588 的耗时时间长,大约是2倍之左右,firfly 3588 核心板的整个模型耗时大约是130ms,瑞芯微官方3588整个模型的耗时大约是70ms

但是当我使用官方demo中自带的yolov5模型时候,两个板子的推理时间相差很小

模型:nanodet_m_320,(rknn模型在附件中)

firefly 系统:ubuntu 20
firefly 驱动版本:0.8.2

瑞芯微原版系统:ubuntu 18
瑞芯微驱动版本:0.8.0


请问这个情况是什么原因造成的,我应该采取什么措施解决




为了查看每一层的耗时,我修改了 rknn_init 参数


int ret = rknn_init(&ctx, model_path, 0, RKNN_FLAG_COLLECT_PERF_MASK, NULL);


在rknn_run 运行之后,添加如下代码:
  1. rknn_perf_detail perf_detail;
  2.   ret = rknn_query(ctx, RKNN_QUERY_PERF_DETAIL, &perf_detail, sizeof(perf_detail));
  3.   if(ret < 0){
  4.     printf("query time fail\n");
  5.     return -1;
  6. }
  7.   printf("%s\n", perf_detail.perf_data);
复制代码







nanodet.rknn

4.14 MB, 下载次数: 1, 下载积分: 灯泡 -1 , 经验 -1

nanodet rknn模型

测试结果.zip

51.29 KB, 下载次数: 1, 下载积分: 灯泡 -1 , 经验 -1

回复

使用道具 举报

2

积分

0

威望

0

贡献

吃瓜的群众

积分
2
发表于 2023-11-12 21:38:17        只看该作者  沙发
你好,你的问题解决了吗
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

友情链接 : 爱板网 电子发烧友论坛 云汉电子社区 粤ICP备14022046号-2
快速回复 返回顶部 返回列表