智能车竞赛智能视觉组培训第一弹

简 介: 第十七届全国大学生智能车竞赛竞速比赛中,由NXP赞助的智能视觉组的比赛细则已经公布的。为了帮助同学们能够更好地制作比赛作品,在在此过程中得到更好地锻炼,NXP公司近期举行智能视觉组培训。欢迎大家参加。
关键词 智能视觉组智能车竞赛第十七届

  2022年的 全国大学生智能车竞赛规则[1] 已经公布了,由恩智浦赞助的 智能视觉组[2] 的比赛细则也已经发布了。

  在制订这个比赛细则时,经过和卓老师进行了多次沟通,本着“既要有所继承,又要有所不同”的原则,重点保留了去年智能视觉组的图片识别部分,并进行了适当扩展,把图片识别从两类(动物与水果)升级为三类(增加了车辆),同时为了提高后续决赛阶段的观赏性,又增加了大类中的小类识别,例如在动物类中,要区分开猫、狗、马等。

  为了提高趣味性,把去年的打靶改为了图片搬运,使任务难度略有降低。此项任务拟在决赛阶段采用。

01 则解读

  届智能视觉组规则相比去年一个比较大的变化是赛道,由小车在规定的赛道中循迹行驶,改为了在无固定赛道的场地自主寻找目标的方式,给出目标在场地上的坐标,小车将按图索骥行驶到目标处并进行识别。

  这个任务要求小车能够自主规划行驶路线,并利用惯性导航原理,确定自身的位置和运行的方向及速度。惯性导航的精度决定了找到目标的时间,因此也极大地影响了完成整个比赛的成绩。

  考虑到惯性导航的操作是第一次引入智能车竞赛,同时惯性导航的精度比较难把握,因此规则里在场地中固定位置添加了若干 AprilTag[3] 标牌,小车可以用摄像头寻找并识别到标牌,利用三角定位原理确定自身的位置。

▲ 图1.1  赛题中需要识别的物品

  通过惯性导航、三角定位、轮速里程控制多种手段,能够实现小车的准确定位,完成目标的搜寻、识别、拾取。

02 训内容

  了帮助同学们理顺一些概念,为后续的培训打好基础,恩智浦的工程师将于2021年12月15日下午2:00,针对下届竞赛的智能视觉组部分进行一次基础培训,主要将涉及AI智能识别和惯性导航两部分。

  另外针对不少同学询问能用什么样的MCU,也做了简要介绍。

题目一:智能视觉模块与AI模型实现

  1. 恩智浦MCU介绍

  2. 智能视觉模块介绍 * OpenART模块介绍

  3. 模型训练、部署方法、调试方法 * 模型的获取与训练 * 模型部署 * 模型调试

  4. 影响模型实际精度的关键要素 * 数据集增广 * 环境干扰 * 模型输入数据预处理

题目二:2D 惯性导航与组合导航入门与简介

  1. 惯性导航和惯性器件(加速度计和陀螺仪)

  2. 2D 惯性导航算法(matlab例子)

  3. 惯性导航误差特性及修正

  4. 惯导修正信息——组合导航 - 融合更多的传感器(里程计/UWB/摄像头/GPS)

  5. 融合算法简介(Kalman)

03 届推文

  于明年的赛题在AI识别部分是和今年一样的,同学们也可以参考以下一些以往的推文:

  • 隆重介绍恩智浦MCU机器学习教育套件——OpenART[4]

  • 智能车大赛AI视觉组参考答案[5]

  • 智能车竞赛,AI视觉组赛题浅析[6]

  • AI视觉组仙人一步之模型量化[7]

  • AI视觉组仙人一步之模型调优[8]

  • AI视觉组仙人一步之高级玩法——从Python回归C语言[9]

  • AI机器学习实战の电磁智能车篇[10]

  • AI实战の电磁智能车(续)——数据处理,训练详解


参考资料

[1]

全国大学生智能车竞赛规则: https://zhuoqing.blog.csdn.net/article/details/121187014

[2]

智能视觉组: https://zhuoqing.blog.csdn.net/article/details/121438560

[3]

AprilTag: https://book.openmv.cc/image/apriltag.html

[4]

隆重介绍恩智浦MCU机器学习教育套件——OpenART: https://mp.weixin.qq.com/s/gPzyjhTMKJ_SwQyhiYSe-Q

[5]

智能车大赛AI视觉组参考答案: https://mp.weixin.qq.com/s/RQF8L41i6Z8YkMeiR4c5Bw

[6]

智能车竞赛,AI视觉组赛题浅析: https://mp.weixin.qq.com/s/T_rRYQWw4iOgoBlIEYiiGw

[7]

AI视觉组仙人一步之模型量化: https://mp.weixin.qq.com/s/am4ahNvT9cBfIV8AQ4C2mA

[8]

AI视觉组仙人一步之模型调优: https://mp.weixin.qq.com/s/1sDV6KkIx5w6ZlC5jxAuhQ

[9]

AI视觉组仙人一步之高级玩法——从Python回归C语言: https://mp.weixin.qq.com/s/0xRllW4q8n3dwfcrnFgO_A

[10]

AI机器学习实战の电磁智能车篇: https://mp.weixin.qq.com/s/bIavGgWJhEsiNFA9FTuCgQ