1、2023 年 11 月下南方论坛5South Forum番茄采摘机器人数字孪生仿真系统的开发研究*刘维孟1，卢伟源2，尹秉奎3，彭海坚4，付祥华4（1.广东省现代农业装备研究所，广东 广州 510630；2.广东弘科农业机械研究开发有限公司，广东 广州 510630；3.珠海城市职业技术学院，广东 珠海 519090；4.珠海众华智能科技有限公司，广东 珠海 519090）摘要：【目的】实现番茄采摘机器人的快速开发设计与调试，避免大的返工和浪费，降低开发和调试成本，缩短开发周期。【方法】课题组开发了一种虚拟仿真调试系统，应用到番茄采摘机器人的开发研究中。该系统主要由数字孪生仿真软件搭建虚拟样机
2、模型，虚拟样机模型能够赋予物理属性运动关系以及逻辑信号，通过利用基于PC的运动控制卡和低代码的SmartACS编程软件，采用OPC UA通信方式，实现硬件控制卡控制虚拟模型，这样就构建了番茄采摘机器人的数字孪生仿真调试模型。【结果】该数字孪生仿真模型能够很好地验证设备的机械结构和控制程序的合理性，并能够在设计阶段快速且低成本地发现问题并加以改进。【结论】通过对虚拟样机模型进行虚拟的机电联调，能够在不做出物理样机的前提下实现对所设计的机械结构及控制程序的联合调试和验证，从而大幅缩短了开发周期，降低了开发成本。本研究能为其他农业机械的设计研发提供一定的参考，有利于提高我国农业机械化水平。关键词：番
3、茄采摘机；数字孪生；SmartACS中图分类号：TP242；S225 文献标志码：A DOI：10.3969/j.issn.1672-3872.2023.22.0020 引言番茄作为营养的蔬菜水果，深受人们的喜爱，而温室栽培的串收小番茄1-2，凭借其口感、营养价值等而成为餐桌上的零食，也因其温室培养不受季节影响，近年来得到大规模推广。而番茄的采摘采用人工方式费时费力，是设施农业自动化的瓶颈，研发番茄采摘机器人是适应设施农业自动化发展趋势的。目前采摘机器人多是利用现成的服务机器人或者协作机器人，然后配上一定的行走装置以及升降装置构成采摘机器人的机械机构部分；而控制系统则采用了视觉识别，加上运动控
4、制方式，实现对番茄等果蔬的视觉定位，实现对机械臂采摘作业以及行走装置运动等的控制3-8。通常，采摘机器人的开发工作是按照传统的机电设备的开发过程进行的，即机械结构设计电气控制设计软件编程实物样机机电联调这样一个流程9-11。这个开发流程属于传统的串行开发流程，需要制作出来实物样机，才能进行电气系统、软件等的机电联调，如果出现机械结构设计不合理的情况，或者有更好的方案，则需要重新制造样机，开发成本较高。本文提出了一种基于数字孪生调试技术的开发平台，能够实现番茄采摘机器人的并行设计。在设计阶段，就能通过半实物样机实现机电联调，尽早发现早期缺陷和错误，避免大的返工和浪费，节约开发成本。同时，该平台也
5、同样可以应用到其他采摘机器人的开发上，能够加快设施农业采摘自动化设备的开发进度。1 数字孪生虚拟样机的搭建数字孪生技术12-15就是早期西门子提出的数字化双胞胎（Digital Twin），是目前智能制造领域的一个关键技术，它利用数字化技术，建立与物理样机一样的虚拟样机模型，这里的一样不仅仅是外观和几何模型一样，包括其运动机构、控制方式等都是一样的。在机电设备当中，实物样机中的运动控制、信号反馈、运行节拍等，都能在虚拟样机中实现对应，也就是孪生技术。通过数字孪生仿真技术，能够大幅缩短机电产品的开发周期。传统的串行开发流程如图1所示，而并行的机电联合设计流程如图2所示。番茄采摘机器人的数字孪生虚
6、拟样机的开发，是利用西门子NX软件进行搭建，首先通过软件对机械结构进行设计，或者利用其他三维设计软件进行结构设计，然后将设计导入NX软件中。在NX软件中利用机电概念设计模块，对模型进行物理属性设置、运动机构和运动关系的设置，定义对应的传感器、时间序列、运动控制过程信号及逻辑基金项目：珠海城市职业技术学院校级科研课题“基于VisualONE的虚拟智能制造生产线的搭建与仿真”（KY2020Y06Z）作者简介：刘维孟（1978），男，山东临朐人，硕士研究生，高级工程师，研究方向为丘陵山区农业机械化装备创新设计。南方论坛62023 年 11 月下South Forum关系等，完成虚拟样机的设置，具体的
7、设置流程如图3所示。3D ModelDrawingsActuators&SensorsI/O ListPLC Code串行研发流程，完全实物样机调试软件PLC,HMI,CNC机械设计液压、气动&驱动电气概念规划调试图1传统串行开发流程并行机电联合设计流程，支持虚拟调试的数字样机软件PLC,HMI,CNC机械设计液压、气动&驱动电气设计半实物样机调试机电联合概念设计节省时间、资源，快速达成，交付高质量成套设备虚拟调试图2并行机电联合设计流程物理属性设置运动机构和运动关系设置定义传感器定义时间序列定义过程信号及逻辑关系图3虚拟样机设置流程物理属性的设置，主要是对模型添加刚体和碰撞体属性，让模型具有
8、质量和重力以及碰撞关系，使得仿真虚拟模型与现实的实物模型更接近，这是数字孪生仿真的第一步；碰撞体设置涉及物体的碰撞，以及碰撞之后的反弹，这一项仿真需要耗费大量电脑资源，所以一般情况下，如果没有发生碰撞关系的一般不进行设置，以加快仿真的速度，减少资源的消耗。具体物理属性设置的过程如图4所示。番茄采摘机的虚拟样机模型如图5所示。运动关系和运动机构的设置，主要是给模型添加约束，使虚拟样机具备与实物样机一样的旋转、滑动等运动功能，有点类似一般三维软件里的运动仿真。但是数字孪生虚拟样机中的运动关系还包含了扭矩、阻尼以及动力等。本案例中，给服务机器人各个关节添加铰链副，并在铰链副上添加位置控制；而升降台添
9、加滑动副来模拟电缸升降的滑动机构；对于四个行走机构轮，添加铰链副来仿真轮子的转动。运动关系和运动机构设置过程如图6所示。图4物理属性设置1.机械臂；2.升降柱；3.升降台；4.行走装置。图5番茄采摘机的虚拟样机模型图6运动关系和运动机构设置2023 年 11 月下南方论坛7South Forum定义传感器主要是给模型添加碰撞和拾取的传感器，在仿真模型中，通过添加碰撞传感器的方式来触发拾取动作，该碰撞传感器可以模拟实物样机中的各类开关触发信号。本案例是在夹爪位置添加碰撞传感器，并采取拾取固定副方式，来实现番茄的拾取动作仿真。传感器的设置如图7所示。图7定义传感器定义时间序列主要是设置动作步骤和工
10、序流程，根据番茄采摘的动作步骤，按照时间先后顺序，设置时间仿真序列，类似工序流程。在不与外部信号进行通信联调的纯仿真动作，可以直接通过时间仿真序列实现设备的虚拟调试，以验证其动作步骤的合理性。时间序列导出XML文件，还可以利用西门子STEP7导入生成西门子GRAPH的PLC程序，对于简单的流程动作，能够实现快速控制程序编写。时间序列的设置如图8所示。如果要实现半实物样机的虚实联调，则需要定义过程信号及与外部信号通信的信号的逻辑关系，可以通过信号适配器来进行定义。本案例中，主要定义了机械臂各个轴的角度控制信号，以及卡爪、升降台电缸的电机位置信号和开关信号等。信号适配器的设置如图9所示。2 Sma
11、rtACS数字孪生调试平台的搭建在虚拟样机模型搭建和设置完毕之后，接下来就是控制程序的编制，在智能制造产线设备中，主要通过PLC对设备进行程序控制。一般流程就是利用西门子博途软件编写PLC控制程序，然后将程序下载到西门子1500PLC中，利用西门子OPC UA的通信模块，实现实物PLC与虚拟数字孪生模型的通信，达到实物PLC控制虚拟模型的数字孪生调试。该方案由于PLC成本较高，且PLC程序编制相对来说有一定的门槛，不利于推广。并且由于控制器主要是国外产品，不利于农业机械的国产替代和自主可控。图8定义时间序列图9信号适配器设置本文所介绍的方案，主要以珠海众华智能开发的SmartACS运动控制软件
12、为基础，通过基于PC的运动控制，实现对数字孪生虚拟样机模型的运动控制编程和调试；该软件通过拖拽功能块的方式编程，取代了传统的写程序代码的方式，实现了对PC运动控制卡的编程，大大降低了编程人员的入门门槛，而且目前基于PC的国产运动控制卡的性能和市场普及率相比国外品牌毫不逊色。本案例采用国产Zmotion运动控制卡，该运动控制卡除了可以实现常规的I/O信号和运动控制外，还集成视觉识别功能，配合低代南方论坛82023 年 11 月下South Forum码的SmartACS编程软件，能够很好地应用到采摘机的视觉定位编程上，不必额外再配套视觉识别系统，有效降低了开发成本。该软件的程序编制界面如图10所
13、示。图10SmartACS软件界面3 番茄采摘机虚拟调试数字孪生虚拟样机搭建完毕，控制程序编制完成后，则可以开始进行虚拟调试。在这里需要运动控制板卡的控制信号通过OPC UA的通信方式，利用数字孪生模型的信号映射，实现实物信号与虚拟模型的信号对应，实现实物控制卡控制虚拟模型的虚拟调试，能够在实物样机制造前，对程序和机械结构实现虚拟的机电联调，提前发现问题，优化结构设计和控制程序。数字孪生虚拟调试信号交互原理图如图11所示。搭建好的软硬件数字孪生虚拟调试平台如图12所示。运动控制卡OPC UA通信软件数字孪生虚拟样机模型信号映射反馈信号输入控制信号输出反馈信号控制信号图11信号交互原理图4 结论
14、课题组开发搭建了一种基于运动控制卡的番茄采摘机器人数字孪生虚拟调试平台，采用低代码运动控制和视觉识别编程软件，对番茄采摘机器人数字孪生虚拟模型进行虚拟调试，可以在开发阶段对设计样机模型进行机电联调和程序验证，大大提高了开发的速度并降低了开发成本，同时采用了低代码编程的国产自主知识产权编程软件以及PC运动控制卡，降低了开发者和使用者的门槛，有利于后续设施农业自动化水平的提高。图12虚拟调试平台参考文献：1 黎振兴，李植良，孙保娟，等.华南地区番茄和茄子研究历史、现状与展望J.广东农业科学，2020，47(12)：42-52.2 刘继展.温室采摘机器人技术研究进展分析J.农业机械学报，2017，4
15、8(12)：1-18.3 杨乐平，王加泽，朱宣任，等.番茄采摘机器人模块化设计与分析J.中国科技论文，2023，18(2)：215-223.4 范文豪.番茄采摘机器人研究综述N.山西经济日报，2023-04-19(4).5 郑刚，刘佳，李旭.现代温室采摘机器人发展概况J.农业工程技术，2019，39(31)：35-40.6 孟浩，胡军，王妍伟，等.番茄采摘机械手的三维设计与试验研究J.农机化研究，2023，45(3)：124-128.7 于丰华，周传琦，杨鑫，等.日光温室番茄采摘机器人设计与试验J.农业机械学报，2022，53(1)：41-49.8 杨延丽.温室番茄采摘机器人系统的研究J.辽宁
16、科技学院学报，2021，23(4)：10-13+104.9 孙焕骏.智能温室番茄采摘系统末端执行机构的设计与试验D.雅安：四川农业大学，2019.10 李伟.果蔬采摘机器人机构设计及特性分析D.北京：北京林业大学，2014.11 罗陆锋，邹湘军，卢清华，等.采摘机器人作业行为虚拟仿真与样机试验J.农业机械学报，2018，49(5)：34-42.12 张霖.关于数字孪生的冷思考及其背后的建模和仿真技术J.系统仿真学报，2020，32(4)：1-10.13 刘大同，郭凯，王本宽，等.数字孪生技术综述与展望J.仪器仪表学报，2018，39(11)：1-10.14 苏新瑞，徐晓飞，卫诗嘉，等.数字孪生技术关键应用及方法研究J.中国仪器仪表，2019(7)：47-53.15 樊留群，丁凯，刘广杰.智能制造中的数字孪生技术J.制造技术与机床，2019(7)：61-66.
