自从 OpenCV AI 竞赛 2021 正式开始以来,我们已经看到了来自世界各地团队的数百个帖子,他们正在构建令人惊叹的项目。跟上这么多酷炫的东西可能让人望而生畏,但我们正在尽力而为。Roboflow 首席执行官 Joseph Nelson 涵盖了一些 上个月的帖子中出现的趋势。如果您错过了本系列的第一个版本,其中介绍了来自竞赛的团队和酷炫的视频,请 返回并阅读第 1 部分!
其他消息 OpenCV 每周网络研讨会 本周的嘉宾是来自 Cortic Tigers 团队的 Ye Lu(在 我们之前的帖子 中有介绍)。另一位 #OAK2021 参赛者,来自 Kauda 团队的 Gerard Espona,将于下周(5 月 13 日)加入我们!Gerard 演讲的主题是“使用 OpenCV AI Kit 和 Unity 创建数字孪生”。免费在 Zoom 上报名参加:https://us02web.zoom.us/j/83231402214
在这篇文章中,我们重点介绍了一些在线使用 #OAK2021 标签发布酷炫内容的团队,并与每个团队进行了简短的问答。感谢 Essort、Roc4t.tech 和 SHL Robotics 团队与我们交谈!
来自 #OAK2021 标签的一些亮点
- Charlie the Lego 机器人学会了如何成为摄影师
- 人脸检测、眼球追踪和分割 这些都在 OAK-D 上运行
- Kauda 团队的 机械臂组装 和 每周回顾视频 展示了 Unity 中的头部姿态估计
- Ritesh Kanjee 的 手势控制无人机 使用 OAK-1
- eyecan.ai 的 Python 包,oakeye 特色是三目相机校准(代码)
- 关于 The BenchBotics 项目的第一个视频:使用 OAK-D 识别杂草种类并估计其生物量
- OAK 走出户外,在牧场里追踪奶牛
**想让您的团队或视频在此展示吗?** 使用 #OAK2021 标签发布内容!我们一定会看到它,世界各地的数千名比赛观众也会看到它。
团队简介:Roc4t.tech
你们的项目是什么?
我们正在解决的问题是通过智能基于摄像头的方案来支持牛呼吸道疾病 (BRD) 的诊断。
这是世界上最常见且最具成本效益的疾病,会影响肉牛。
BRD 是一种复杂的细菌感染,会导致犊牛肺炎,可能致命。感染通常是三个相互依赖因素的总和:压力、潜在的病毒感染和新的细菌感染。该疾病的诊断很复杂,因为有多种可能的原因。
提出的解决方案是使用计算机视觉来早期检测牛的疾病。
为了尝试解决这个问题,我们提供各种监控活动,例如
- 牛检测和跟踪
- 牛脸识别
- 使用外部热成像传感器进行精确的温度测量
- 异常行为识别
- 从收集的数据中构建模型
您的团队有“起源故事”吗?你们是怎么聚在一起的?
Roc4t.tech 团队由来自世界不同地区(南美洲、欧洲和亚洲)经验丰富且充满热情的计算机视觉工程师组成。
我过去有机会与他们合作过其他与计算机视觉相关的项目,当我得知他们决定与我一起参加 OpenCV AI 挑战时,我非常高兴。
有趣的一点可能是团队名称:Roc4T,因为它与我所在地区的著名法国奶酪(罗克福)有关,这种奶酪是用羊奶制成的,而不是牛奶。
你们是如何决定要解决什么问题的?
这是一个我一直放在心里的应用。我有机会在法国南部的一个农场长大,所以我非常清楚这种疾病对牲畜造成的死亡率影响。
在我申请参加 OpenCV AI 竞赛的前几天,我的家族牛群发生了一次疫情,一些犊牛因未及时检测而死亡。对我来说,这种情况就像一个证据,让我努力寻找解决方案,并以非侵入性的方式避免这种情况,这种方式可以保证动物的良好生活。正如挑战提交文件中提到的,我认为解决影响我们环境的实际问题很重要。
您认为 #OAK2021 最令人兴奋的部分是什么?
该竞赛为在动物福利领域鲜为人知的领域开发尖端解决方案提供了绝佳机会。在我们这个情况下,该提议可以使兽医和农场主的工作流程受益。对于团队来说,能够在软件和硬件层面上获得支持是一件非常愉快的事情。
感谢社交网络,我有机会与一些兽医交谈,我发现了一些新技术,例如改进牛传染性牛瘟的疫苗接种过程,这是许多亚洲和非洲热带和亚热带地区的牛养殖者正在努力克服的疾病。
当您得知自己入选第二阶段时,您有什么想法或感受?
在得知结果之前,我们经历了几天悬念。随着日期的临近,我们每晚(或对于其他团队成员来说是凌晨)都在一起等待答案。有好几天我们都非常着急,想知道结果。最终,我们将获得 OAK 套件来实现提议内容 ;-) ……所以我们带着力量迈向下一阶段。
到目前为止,竞赛中有什么让您感到惊讶的吗?
我真的很惊讶地看到社交网络上的一些粉丝自发地主动帮助我们增加图像数据库,其中包括不同种类的牛,您可以在这里欣赏这些图片:https://www.linkedin.com/posts/arnaudbastide_oak2021-computervision-opencv-activity-6776901498971451392-1Jfc
此外,@Picsellia 是一家专门从事数据集管理和模型训练的法国公司,他们为我们提供访问其平台的权限,以加快训练过程,您可以在此处阅读故事:https://www.linkedin.com/posts/arnaudbastide_oak2021-computervision-opencv-activity-6780925072656916480-4zcy
您对其他参赛者有什么想说的话吗?
我真的很鼓励他们在社交网络上宣传他们的成就,以便每个人都能看到他们正在做出的惊人工作 #OAK2021。
我们的团队与一些其他决赛团队有一些联系,我们现在非常好奇能在未来的一次研讨会上与他们在现实生活中见面!
读者应该在哪里关注您,以便最好地了解您的进展?(Twitter、LinkedIn 等)
请关注 LinkedIn 上的 roc4t.tech 页面:https://www.linkedin.com/company/rocfortech
您可以联系 Roc4T 团队成员
- Arnaud:https://www.linkedin.com/in/arnaudbastide/
- Jorge:https://www.linkedin.com/in/jorgeluisperezmedina/
- Hùng:https://www.linkedin.com/in/vi%E1%BB%87t-h%C3%B9ng-nguy%E1%BB%85n-b942632a/
- Davy:https://www.linkedin.com/in/davy-b-3aa2b0121/
团队简介:Essort
你们的项目是什么?简要描述您的问题陈述和拟议解决方案
我们正在构建第二代立体 VR 远程临场感研究平台。通过这个实验,我们可以将远程控制人员虚拟地放到机器人中。看到您面前的东西是必不可少的,能够环顾四周为远程临场感体验增添了缺失的一环。根据我们多年来收到的反馈,最需要的功能是第三人称视角,这在现代电子游戏中很常见,但在机器人领域却闻所未闻。
我们希望解决的第二个问题是机器人周围人群的安全问题。障碍物检测很复杂,因为机器人的运动是全向的。当用户远程控制平台时,他们目前只能看到第一人称视角,他们不知道周围是否有其他人或物体。
使用四个 OAK-D 设备,我们可以提供对 Obelisk 的完整 360 度视觉覆盖,并辅以深度感知。立体视角将通过肩上第三人称视角进行补充,以提供真正下一代的远程临场感体验。将大部分视觉算法卸载到 OAK-D 上有助于我们降低成本和复杂性。
Obelisk 2 机器人的主要功能是 VR 远程控制,但它也能够执行一些自主功能。通过姿态估计,可以识别挥手动作,因此机器人可以自动转向他们并开始与他们互动。
你的团队有有趣的“起源故事”吗?你们是怎么聚在一起的?
我们对机器人技术和发人深省的科幻节目着迷。2008 年,我们喜欢做一些关于机器人的项目,我们发现了一个名为“匈牙利人登上火星”(MaM http://www.magyarokamarson.hu) 的匈牙利最大、最具挑战性的机器人竞赛。在第一次比赛后,我们明确知道我们想做机器人实验,这成为了我们的主要爱好。我们相信,利用现有的工具,在科幻电影中看到的解决方案的实现正越来越近。多年来,我们遇到了许多志同道合的人,其中一些人也加入了团队。我们不仅对自己的研究和比赛充满热情,而且也热衷于教学,回馈我们的当地社区。2018 年,我们共同创立了匈牙利机器人建造者协会( http://hungarianrobot.hu/ ),这是迄今为止匈牙利最大的机器人建造社区。凭借该协会,我们很荣幸能够将 Obelisk - 我们的研究平台 - 展示给数千人。
你们是如何决定要解决什么问题的?
起初,我们考虑过一些复杂的调查、检查系统,但当我们在团队中讨论时,我们认为我们更愿意写关于我们的旗舰项目 Obelisk 2,因为我们喜欢做这个项目,并且将来对它有很大的计划。在过去几年中,我们积累了大量经验,并在展览会上获得了大量反馈。几年前,我们开始建造 Obelisk 2 的底盘,因此它的开发不会从零开始。当我们发现 OAK-D 的功能时,我们意识到这将使开发变得更容易、更快。在最初的计划中,我们将使用英特尔实感相机和英伟达 Jetson 板。
所以我们想,为什么不试试呢,也许 Obelisk 2 项目足够有趣,可以进入决赛。
您认为 #OAK2021 最令人兴奋的部分是什么?
对我们来说,最令人兴奋的是,我们可以在机器人上使用最先进的硬件,并获得特别好的支持和帮助。而且不止一个,而是四个同时使用。我们想在比赛中解决一个我们绝对能够完成的任务,但从长远来看,我们肯定会尝试很多其他事情。对我们来说,另一个令人兴奋的事情是,我们迄今为止没有参加过很多国际比赛。也许我们从未像现在这样认真对待社交媒体的曝光和记录。
当您得知自己入选第二阶段时,您有什么想法或感受?
我们非常惊讶,因为有这么多项目。起初,我们匆忙地寻找提交的内容,查看我们提交了什么 😀。当我们了解到项目的数量时,我们认为我们不会入选。我们很高兴有机会,并努力分享我们项目的所有有趣内容。
从那以后,我们每周都在推进计划,并努力跟上文档。
到目前为止,竞赛中有什么让您感到惊讶的吗?
网络研讨会和 Discord 社区是我们最大的惊喜之一。它们提供了很多有用的信息。git 代码库和示例立即就可以使用。很容易上手示例,并尝试修改和试验它。
您对其他参赛者有什么想说的话吗?
仅仅是我们团队的座右铭:无限的可能!
读者应该到哪里关注你,以便最好地了解你的进度?(推特、领英等)
我们在以下平台发布更新:
- https://twitter.com/Essort
- https://www.instagram.com/essort/
- https://#/Essort
- 目前这是对该项目最详细的描述 https://hackaday.io/essort
团队简介:SHL Robotics
你们的项目是什么?简要描述您的问题陈述和拟议解决方案
在 Kickstarter 上了解 OAK-D 活动之前,我一直在进行我的自动驾驶广告机器人 (SEDRAD) 的第一阶段开发。SEDRAD 是一种自动移动底座,它将携带两个 49 英寸的户外显示器,并在公园等公共场所展示广告。在 Oak-D 之前,我必须解决的两个主要问题是,如何使用传感器导航并避开障碍物,以及如何有效地进行人脸分析,以收集与广告观众相关的分析数据。当我在去年夏天了解到 Oak-D 时,我非常激动,因为这款强大的相机可以帮助我解决上述问题。本质上,我正在研究使用两个朝前的 Oak-D 相机进行语义分割,以检测 SEDRAD 可以导航的驾驶表面。同时,机器人需要利用来自摄像头的深度数据来避开小型障碍物。安装在 49 英寸显示器上方的两个侧摄像头将进行人员跟踪、人脸检测,并帮助进行年龄/性别/情绪识别,以收集要提供给广告商的分析数据。
你的团队有有趣的“起源故事”吗?你们是怎么聚在一起的?
我的团队是一个单人团队,所以没有关于我们是如何聚在一起的有趣故事。唯一有趣的事情是,当我的朋友看到我的项目,并得知我一直在独自进行这项工作时,他们的表情。
你们是如何决定要解决什么问题的?
在午休时间,吃完饭后,我总是会绕着街区走一圈,帮助消化。我很快意识到,在我的居住国,商店外面经常会有这些带轮子的移动广告牌。我忍不住想,这些轮子真是浪费了,但广告牌却仍然固定在一个地方。如果广告牌可以始终在附近区域移动,那么能够看到广告牌的人数将要多得多。这就是我决定解决这个问题的原因。
您认为 #OAK2021 最令人兴奋的部分是什么?
我一直很喜欢参加比赛,但大多数比赛规模小、时间短或只是本地比赛。这是我第一次参加大型、长期、国际比赛。知道数百个头脑正在努力使用令人惊叹的硬件来解决有趣的问题,这真是太令人兴奋了。我还要承认,看到我的项目似乎与其他一些团队在社交媒体上发布的惊人内容处于同一水平,这感觉很棒。最后,我对 Oak-D 玩得越多,就越觉得这是一款改变游戏规则的硬件,我很高兴能成为早期采用者的一部分。
当您得知自己入选第二阶段时,您有什么想法或感受?
我感到紧张和焦虑,尤其是在得知第一阶段获奖者公布时间推迟之后。在那段额外的等待时间里,我变得更加激动,因为我明白,考虑到组织者在从所有优秀的提交作品中挑选获奖者时所表现出的难度,如果我被选中将会是多么棒。当我看到我的团队名称出现在最终名单中时,我感到非常高兴,这是值得的,也是令人安心的,因为我能感觉到我正在做一些很酷的事情,进入第二阶段只是验证了我的直觉。
到目前为止,竞赛中有什么让您感到惊讶的吗?
首先,令我惊讶的是,这场比赛是如何从第一轮的几个参赛者发展到第二轮的大量参赛作品的。另外一件非常令人惊讶的事情是,当我遇到与比赛或技术问题相关的问题时,Luxonis 和 OpenCV 团队的响应速度有多快。
您对其他参赛者有什么想说的话吗?
OpenCV 一直是一个很棒的工具,周围拥有一个很棒的社区,Luxonis 为这场比赛带来了令人惊叹的硬件。我们都应该庆幸能够成为这个社区和这场比赛的一部分。让我们尽力做到最好,向世界展示人类智慧能够取得多么惊人的成就。
读者应该到哪里关注你,以便最好地了解你的进度?(推特、领英等)
关注我进度的最佳方式是:
- 推特:https://twitter.com/kidargueta
- 领英: https://www.linkedin.com/in/carlos-argueta/
- Instagram:https://www.instagram.com/kidargueta/
- 网站: https://soulhackerslabs.com/
更多内容即将推出
感谢您阅读我们团队简介系列的第二篇文章。这些只是参加这场大型比赛的 200 多个团队中的一小部分 - 我们祝愿他们一切顺利!如果您是一位想要参与其中并进行一些酷炫事情的 AI 创建者,为什么不从 OpenCV 商店 购买一个 OAK-D 呢?
敬请期待更多简介,并关注 Twitter 上的 #OAK2021 标签推特、领英 或 Instagram,以获取来自这些优秀团队的持续更新。别忘了 订阅 OpenCV 新闻通讯,以便在有新文章发布时收到通知,并从我们的合作伙伴处获得独家折扣和优惠。