使用OpenCV4实现硬件级别加速

共 477字,需浏览 1分钟

 ·

2021-11-27 14:08

点击上方小白学视觉”,选择加"星标"或“置顶

重磅干货,第一时间送达

本文使用一个向量点乘的例子,来展示universal intrinsics的的提速。


我们有两个向量vec1和vec2,将对应元素相乘,然后累加起来。计算公式为:

sum=vec1[0]*vec2[0] + vec1[1]*vec2[1]+ ... + vec1[n]*vec2[n].


如果采用纯C语言,两个行向量的点乘实现如下(如代码显示不完整,可以左右滑动;或横屏阅读)

  1. float dotproduct_c_float(Mat vec1, Mat vec2)

  2. {

  3. float * pV1 = vec1.ptr(0);

  4. float * pV2 = vec2.ptr(0);

  5. float sum = 0.0f;

  6. for (size_t c = 0; c < vec1.cols; c++)

  7. {

  8. sum += pV1[c] * pV2[c];

  9. }

  10. return sum;

  11. }

如果采用OpenCV的universal intrinsics,两个行向量的点乘实现如下:

(注意:下面函数仅为展示原理,未考虑数组长度不是16(32或64)字节倍数情况)

  1. float dotproduct_simd_float(Mat vec1, Mat vec2)

  2. {

  3. float * pV1 = vec1.ptr(0);

  4. float * pV2 = vec2.ptr(0);

  5. size_t step = sizeof(v_float32)/sizeof(float);


  6. //向量元素全部初始化为零

  7. v_float32 v_sum = vx_setzero_f32();

  8. for (size_t c = 0; c < vec1.cols; c+=step)

  9. {

  10. v_float32 v1 = vx_load(pV1+c);

  11. v_float32 v2 = vx_load(pV2+c);

  12. //把乘积累加

  13. v_sum += v1 * v2;

  14. }

  15. //把向量里的所有元素求和

  16. float sum = v_reduce_sum(v_sum);


  17. return sum;

  18. }

例程使用Open AI Lab的EAIDK-310开发板,OpenCV4.2.0,CPU型号为是RK3228H,采用ARM四核64位处理器 ,四核Cortex-A53,最高1.3GHz两个例子的编译命令分别如下(注意:皆采用了-O3选项以提速):


g++ dotproduct-c.cpp -o dotproduct-c -O3 -I/usr/local/include/opencv4 -lopencv_core
g++ dotproduct-simd.cpp -o dotproduct-simd -O3 -I/usr/local/include/opencv4 -lopencv_core

运行耗时如下图

从两个函数的耗时可以看出,采用OpenCV的universal intrinsics后耗时仅为一半,速度翻倍。


两个例程的完整源代码如下。首先是C语言版本的dotproduct-c.cpp:

  1. #include


  2. using namespace cv;


  3. float dotproduct_c_float(Mat vec1, Mat vec2)

  4. {

  5. float * pV1 = vec1.ptr(0);

  6. float * pV2 = vec2.ptr(0);

  7. float sum = 0.0f;

  8. for (size_t c = 0; c < vec1.cols; c++)

  9. {

  10. sum += pV1[c] * pV2[c];

  11. }

  12. return sum;

  13. }


  14. int main(int argc, char ** argv)

  15. {


  16. Mat vec1(1, 16*1024*1024, CV_32FC1);

  17. Mat vec2(1, 16*1024*1024, CV_32FC1);


  18. vec1.ptr(0)[2]=3.3f;

  19. vec2.ptr(0)[2]=2.0f;


  20. double t = 0.0;

  21. t = (double)getTickCount();


  22. float sum = dotproduct_c_float(vec1, vec2);


  23. t = ((double)getTickCount() - t) / (double)getTickFrequency() * 1000;

  24. printf("C time = %gms\n", t);

  25. printf("sum=%g\n", sum);


  26. return 0;

  27. }

dotproduct-simd.cpp如下:

  1. #include

  2. #include

  3. #include

  4. using namespace cv;


  5. float dotproduct_simd_float(Mat vec1, Mat vec2)

  6. {

  7. float * pV1 = vec1.ptr(0);

  8. float * pV2 = vec2.ptr(0);

  9. size_t step = sizeof(v_float32)/sizeof(float);


  10. //向量元素全部初始化为零

  11. v_float32 v_sum = vx_setzero_f32();

  12. for (size_t c = 0; c < vec1.cols; c+=step)

  13. {

  14. v_float32 v1 = vx_load(pV1+c);

  15. v_float32 v2 = vx_load(pV2+c);

  16. //把乘积累加

  17. v_sum += v1 * v2;

  18. }

  19. //把向量里的所有元素求和

  20. float sum = v_reduce_sum(v_sum);


  21. return sum;

  22. }


  23. int main(int argc, char ** argv)

  24. {


  25. Mat vec1(1, 16*1024*1024, CV_32FC1);

  26. Mat vec2(1, 16*1024*1024, CV_32FC1);


  27. vec1.ptr(0)[2]=3.3f;

  28. vec2.ptr(0)[2]=2.0f;


  29. double t = 0.0;

  30. t = (double)getTickCount();


  31. float sum = dotproduct_simd_float(vec1, vec2);


  32. t = ((double)getTickCount() - t) / (double)getTickFrequency() * 1000;

  33. printf("SIMD time = %gms\n", t);


  34. printf("sum=%g\n", sum);


  35. return 0;

  36. }


下载1:OpenCV-Contrib扩展模块中文版教程
在「小白学视觉」公众号后台回复:扩展模块中文教程即可下载全网第一份OpenCV扩展模块教程中文版,涵盖扩展模块安装、SFM算法、立体视觉、目标跟踪、生物视觉、超分辨率处理等二十多章内容。

下载2:Python视觉实战项目52讲
小白学视觉公众号后台回复:Python视觉实战项目即可下载包括图像分割、口罩检测、车道线检测、车辆计数、添加眼线、车牌识别、字符识别、情绪检测、文本内容提取、面部识别等31个视觉实战项目,助力快速学校计算机视觉。

下载3:OpenCV实战项目20讲
小白学视觉公众号后台回复:OpenCV实战项目20讲即可下载含有20个基于OpenCV实现20个实战项目,实现OpenCV学习进阶。

交流群


欢迎加入公众号读者群一起和同行交流,目前有SLAM、三维视觉、传感器自动驾驶、计算摄影、检测、分割、识别、医学影像、GAN算法竞赛等微信群(以后会逐渐细分),请扫描下面微信号加群,备注:”昵称+学校/公司+研究方向“,例如:”张三 + 上海交大 + 视觉SLAM“。请按照格式备注,否则不予通过。添加成功后会根据研究方向邀请进入相关微信群。请勿在群内发送广告,否则会请出群,谢谢理解~


浏览 28
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报