OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~

编辑:OAK中国
首发:oakchina.cn
喜欢的话,请多多⭐️✍

▌前言

Hello,大家好,这里是OAK中国,我是助手君。

在2020年、2021年OpenCV分别在Kickstarter上众筹了两款OAK产品,均筹集超过百万美元。2022年上半年也有朋友问我今年有没有众筹的产品,原以为没有,没想到上周突然来了rea众筹的消息!目前已筹集超过20万美元!
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第1张图片

Kickstarter众筹地址,中国区专属众筹地址。

我研究了一下这个机器人,确实有点东西,给大家分享一下!

OAK有史以来首个完全成型的开源ros2机器人rae,将机器人技术的入门门槛降到极致,全球众筹中!

▌背景

OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第2张图片
目前机器人领域的入门门槛似乎仍旧高的遥不可及,没有一定水平的技术专业知识,新手很难入门。我们要考虑选择什么主控制器?选择什么深度相机?选择什么激光雷达?选择什么通信模块?什么控制底盘?硬件选完了,我们还要考虑ROS的移植、视觉slam算法的开发、建图导航算法的开发、人工智能模型的部署、还有上位机控制软件的开发。这一切都弄好了,还要考虑软硬件适配调试、算力分配、功耗控制、结构外观设计等等,一大堆问题等着你。

OAK的工程师们在设计OAK机器人视觉相机的同时,看到不少用户遇到了这样入门难的问题,一直试图解决。终于历经一年多的时间,重磅推出了rae,一款能为任何人所用的、开机即用的、开源一体化ROS2机器人!
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第3张图片
rae一经面世,即受到不少用户的热捧。自2022年11月9日众筹上线Kickstarter以来,两天突破200,000美元,成为热门科技类产品!
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第4张图片

rae背后的工程师们一直秉持着这样的理念——Robotic vision, made simple。每个人都应该有机会接触尖端机器人技术,并能够简单地使用它们。而rae正是这一理念最好的诠释!

它是OAK有史以来第一个完全成型的机器人,它将所有强大的机器学习、人工智能、计算机视觉、slam导航、ROS2等整合到一个口袋大小的躯体里。它的前方和后方集成了两台OAK相机,可以运行所有OAK支持持的3D人工智能功能。内置S3代的OAK核心芯片,具有目前OAK相机5倍的人工智能算力。

OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第5张图片

来装一个rae,看看这个开源ROS机器人的内部构造!

▌rae有哪些功能?

OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第6张图片
难以想象rae如此小的身体,竟然比亚马逊的百万美元移动仓储机器人能做的更多!
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第7张图片

AI加速

它给边缘计算增加了机器视觉的力量,通过板载的人工智能AI加速、OpenCV图像处理加速、机器学习功能,它使各种复杂的视觉和导航任务变得简单易行。

SLAM

下载配备的APP,即可在你的手机或平板上运行slam。

OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第8张图片

ROS

rae预装了ROS2,所以你可以使用最强大的机器人操作系统,而不必担心任何初始设置。

OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第9张图片

Unity虚拟机器训练

rae还支持Unity,这意味着你可以在虚拟世界里做机器学习。从下面的视频中,你可以看到为rae创建的虚拟 “训练馆”,四台rae玩二对二的足球游戏。

在unity里训练机器人rae踢足球!

云平台RobotHub

rae的云平台RobotHub,让你可以从世界的任何地方控制rae。
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第10张图片

RobotHub是可帮助你设置、应用和监控机器人视觉解决方案。你可以检查你的设备,进行现场直播,远程部署应用程序,部署人工智能模型,并检查性能/状态指标,所有这些都只需要点击几下就可以完成。

远程控制

在度假?让rae充当保安,确保一切正常!想查看家里的宠物?让rae实时告诉你!朋友来访?让rae带路在你家转转!

定位与建图

标准配备了SLAM(同步定位和绘图),rae可以自主地绘制你的房间、房子或办公室。它将构建一个地图,使其能够轻松地进行导航。

玩游戏

利用面部检测和定位功能,rae会和你一起玩大家最喜欢的童年游戏捉迷藏。通过它的应用程序或语音命令告诉rae你想玩,等待它的屏幕变黑并开始倒计时,然后躲起来!一旦时钟归零,rae就会去找你。猜猜看rae能不能找到你?

哨兵模式

如果你外出一天,让rae在你的窗户边上放哨,观察你期待的包裹的到来。当感兴趣的事情发生时,你可以设置rae向你发送通知。也许你还订购了另一只rae来陪伴它?为了增加额外的家庭安全,rae可以快速而轻松地读取和记录车辆的牌照。rae机器人的所有算力和ROS2操作系统都是运行在机器人内部的OAK相机的主控制芯片上,可以完全离线运行。其流畅性和体验度比需要远程云计算的机器人要优秀很多。

功能齐全的APP

通过其专门设计的应用程序访问rae的所有功能,以及更多的功能。只需将其下载到您的设备上,通过WiFi或蓝牙连接到你的rae,并开始探索。就是这么简单。

更多功能!

以下是我们计划实现的全部功能清单:遥控、跟随我、手语翻译、捉迷藏、条形码和二维码扫描、计时、人员和情感检测、哨兵模式、物体检测和定位以及建图。

随着我们的发展,你可以期待大量的更新,向你展示rae能做的所有了不起的事情!

当然,我们现有的那些开源项目及demo也可以用在rae上!
人体姿态

特征追踪

语义分割

物体检测

边缘检测

物体识别

深度视觉

▌rae好上手吗?

使用rae的三步:

  • 开机
  • 下载APP
  • 轻点几下探索rae的功能

开源ros机器人rae专属APP功能介绍

▌rae能学习并记忆哪些内容?

你的rae不仅仅有一个数据库,它还有一个大脑。当你要求rae记住你是谁,学习如何在你的房子周围无缝驾驶,或去寻找电视遥控器时,它将所有这些知识存储在它的大脑中。只需在你的屏幕上轻点几下,就可以访问rae所有已知的人、物、语音命令、手势和位置。

你想让rae忘记什么吗?没问题。无论机器人多么友好,我们知道不是每个人都希望rae能记住他们。要从大脑中删除一些东西,只需再点几下,rae就能适应新的情况。

需要了解一点,rae是边缘计算的设备、OAK不能访问你存储在rae上的任何你不愿意分享的信息。你的数据是你自己的,你可以使用、存储和管理它,或者不使用,如你所愿。

▌rae的硬件参数?

专业的OAK相机系统

总共五个传感器,同时提供立体深度感知和4K高分辨率彩色视频。

顺滑的车轮

rae在地毯、木材、瓷砖、草地和砾石上平稳地前行,它可以去你需要的任何地方,并且可以在一秒内转弯。

坚固的金属外壳

rae的外壳牢靠无比,经得起考验。意外跌落或踢到?水枪大战的旁观者?被家里的狗抓住了? rae都能hold住。

牢靠的通信系统

LED环用于即时的用户反馈,六个麦克风用于语音命令,集成的扬声器用于音频输出,LCD屏幕用于快速检查视觉状态。

控制和定制

同时兼容WiFi和蓝牙。USB-C端口,便于RVC 3的连接和配件的安装。

高性能的2,000 mAh电池

约一小时的电池寿命和高效的充电速度。

最新VPU:RVC3

rae的AI算力是目前oak相机的5倍,最多支持6个相机,板载计算机视觉。
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第11张图片
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第12张图片
OpenCV众筹了一款ROS2机器人rae,开源、功能强、上手简单。来瞅瞅~_第13张图片

▌参考资料

rae众筹链接
rae介绍


OAK中国
| OpenCV AI Kit在中国区的官方代理商和技术服务商
| 追踪AI技术和产品新动态

戳「+关注」获取最新资讯↗↗

你可能感兴趣的:(机器人,opencv,开源,人工智能,计算机视觉)