使用myPalletizer人工智能套件实现颜色和图像识别-Arduino中文社区 - Powered by Discuz! Archiver

大象机器人 发表于 2022-7-11 16:19

使用myPalletizer人工智能套件实现颜色和图像识别

基于Linux系统和ROS中的1:1仿真模型,myPalletizer人工智能套件由视觉、定位抓取和自动分拣模块组成。具有配备的视觉功能,通过OpenCV识别和定位不同颜色或图像的立方体,机械臂的核心处理器可以计算其当前目标空间坐标位置,最后将立方体夹入相应的桶中。 点击下方视频,欢迎观看视频:https://v.youku.com/v_show/id_XNTg4NDg5ODA4OA==.html
下面是使用myPalletizer 260 Pi 人工智能套件,实现颜色和图像识别的详细过程。

//article.biliimg.com/bfs/article/efe41383f0e3fc8c63897488f37e90dec2b9b29a.png@1320w_782h.webp
一、颜色识别
1.在桌面使用Ctrl+Alt+T组合快捷键开启一个命令窗口,输入以下命令启动master节点:
roscore
2.在命令终端中键入Ctrl+Shift+T开启同目录下的另一个命令窗口,再输入命令启动vision.launch文件
roslaunch myPalletizer_260 vision.launch
运行结果如图所示:

//article.biliimg.com/bfs/article/fd29aaa1e020a29786684d048c695942fd49913d.gif
3.Ctrl+Alt+T打开另一个命令窗口,输入命令进入到待操作文件目录
cd catkin_ws/src/mycobot_ros/mycobot_ai/myPalletizer_260/
4.运行程序detect_obj_color.py ,即可实现颜色识别并抓取了。
python scripts/detect_obj_color.py
//article.biliimg.com/bfs/article/c0f1004d93f4fa76d17ea1c5a081979060941c8e.png@1320w_712h.webp 之后我们可以看到如下:

//article.biliimg.com/bfs/article/847ea166b42abb7999ed34528aca222e06e0048e.gif二、图像识别
1.运行detect_obj_img_folder_opt.py 程序前,请确保已执行颜色识别中的步骤1,2,3
2.运行添加图片的程序add_img.py,根据你的需要把要识别的图片添加到指定文件夹('red', 'blue', 'green', 'gray')
python scripts/add_img.py

//article.biliimg.com/bfs/article/87fd9a81908eb3163861de18263718f93d2987c5.png@1158w_890h.webp
根据终端输入的提示进行操作,在弹出的第二个图像框中进行图像的截取(通过鼠标左键进行图像区域的选取)。
3.图像截取区域完成后,按下回车键,根据终端提示,输入保存图像的文件夹名称('red', 'blue', 'green', 'gray'),按下回车键即可保存至对应文件夹。
4.启动图像识别程序detect_obj_img_folder.py ,验证步骤2,3中添加的图片机械臂是否能正确吸取并放到相对应颜色的桶中。

python scripts/detect_obj_img_folder_opt.py

//article.biliimg.com/bfs/article/34f662595468164f9106912ce8fac2f3f63c7dad.png@1320w_712h.webp

//article.biliimg.com/bfs/article/b413d88632b2ac74769d6a89311169d72b6e4481.gif
这款产品为研发人员以及STEM教育工作者量身定做,他们会对人工智能套装与机器人相结合的应用程序感兴趣。如果你拥有这款人工智能套件,除了颜色和图像识别,你还想实现什么应用场景?请在评论中与我们分享!
页: [1]
查看完整版本: 使用myPalletizer人工智能套件实现颜色和图像识别