¡¶Smart Agricultural Technology¡·£ºCucumber picking robots: Technological progress, challenges, and future directions
±à¼ÍƼö£º
¡¡¡¡ÕâÆª×ÛÊöϵͳÊáÀíÁËÎÂÊһƹϲÉÕª»úÆ÷ÈË£¨CPR£©´Ó1980Äê´úÊÖ¹¤Ê±´úµ½AIÇý¶¯½×¶ÎµÄÑݽø£¬¾Û½¹ÊÓ¾õ-ËÅ·þ£¨visual servoing£©¡¢ÂÌÖÐÂÌ£¨green-on-green£©Ê¶±ð¡¢Ä©¶ËÖ´ÐÐÆ÷£¨end-effector£©Èá˳Éè¼Æ¼°Åöײ¸Ð֪·¾¶¹æ»®µÈ¹Ø¼ü¼¼Êõ£¬Ö¸³ö¡°¿´µÃ¿ì¡ÙÕªµÃ×¼¡±µÄÎïÀíÆ¿¾±Óë³É±¾±ÚÀÝ£¬ÎªÍ»ÆÆÉÌÒµ»¯ãÐÖµÌṩ¿ç×÷Îï½è¼ø¡£
¡¡¡¡
2. ÀúÊ·Ñݽø£º´Ó¼ôµ¶µ½AI
1980-2000Äê´úÍêÈ«ÊÖ¹¤£»2000-2015Äê³öÏÖ¼¯³ÉÔÐÍ»ú£¬µ«ÊÜÏÞÓÚÕÚµ²Óë¾¥¶¨Î»Ê§°Ü£»2016-2020ÄêCNN/YOLO´øÀ´¼ì²âÌáËÙ£¬È´Î´Ëõ¶Ì²ÉÕªÖÜÆÚ£»2021ÖÁ½ñµÄÊÔµãϵͳ°Ñ¸ÐÖª-¹æ»®-Ö´Ðбջ·£¬ÏÖ³¡³É¹¦ÂÊÈÔ½ö56.6%-74%£¬½Òʾ¡°ÊµÑéÊÒ10 sÑ»·¡±Óë¡°ÎÂÊÒ124 sÑ»·¡±µÄÂä²î¡£
3. ÊÓ¾õËÅ·þ£ºÈÃÑÛÊÖͬ²½
RGB-DÏà»úÌṩµãÔÆ£¬½áºÏPBVSÓëIBVS»ìºÏ²ßÂÔ£¬ÊµÊ±ÐÞÕýÒ¶´ØÎ¢¶¯£»Intel RealSense D435iÔÚ56 sÄÚÍê³ÉÒ»´Î²ÉÕª£¬½Ï20Äêǰ65 s½ö¿ì9 s£¬ËµÃ÷Æ¿¾±ÒÑ´Ó¡°¿´µÃ¿ì¡±×ªÏò¡°×ßµÃ×¼¡±¡£
3.1 ³ÉÏñ¼¼Êõ£º¸øÂÌÖÐÂ̼ӡ°µÚÈýÖ»ÑÛ¡±
¶à¹âÆ×700-900 nm²¨¶Î¿É·Å´ó¹ûƤ-ҶƬˮ·Ö²îÒ죬°ÑÂÌÖÐÂÌÎóÅÐÂÊ´Ó15%½µÖÁ5%£¬µ«Ö¡ÂʽµÖÁ5 fps£»½á¹¹¹â²¹¹â·½°¸ÔÚ³±ÊªÎÂÊÒÒ×¹ýÆØ£¬Ðèͬ²½Êª¶È-ζÈ-¹âÕÕУ׼¡£
3.2 ¹âÆ×»ìÏý£ºÓ²¼þ+Ë㷨˫±£ÏÕ
Ó²¼þ²à¼ÓToF»ò550 nmÕ´øÂË¹âÆ¬£»Èí¼þ²àÓÃCrͨµÀ£¨YCbCr£©Ô¤ÑµÁ·£¬YOLOv5s¼ì²âËÙ¶È90.9 FPS£¬ÂÌÖÐÂ̳¡¾°ÏÂmAPÌáÉý1.5%£¬Ö¤Ã÷¡°µÍ³É±¾RGB+Éî¶Èѧϰ¡±ÈÔ¾ßDZÁ¦¡£
4. ʶ±ðËã·¨£º´Óµ¥ÌØÕ÷µ½amodal·Ö¸î
µ¥ÓÃHISÑÕÉ«¿Õ¼äʶ±ðÂÊ86%£»ÈÚºÏÐÎ×´-ÎÆÀí-´óСµÄMSER+SVM´ï90%£»Mask R-CNNÔÚ1420ÕÅͼÉÏʵÏÖAP50=82.43£¬¿ÉÍÆ¶Ï±»Ò¶ÕÚµ²µÄ»Æ¹Ï¡°ÒþÐβ¿·Ö¡±£¬ÎªºóÐøµ¶¿Ú¹æ»®Ìṩ6D×Ë̬¡£
5. ²ÉÕª»ú¹¹£º¸ÕÈá²¢¼ÃµÄ¡°ÊÖ¡±
5.1 ×¥³Ö£ºÎü¸½+¼Ð¼ô
ÈíÖÊÎüÅÌ£¨°ë¾¶50 mm£©ÌùºÏÇúÃæ£¬ÎüÁ¦0.04 MPa£¬174´ÎÊÔÑé³É¹¦ÂÊ86.2%£¬¾±¶Î×îµÍ76.8%£¬ËðÉËÂÊ4.7%£»AGRISTÉÌÓûúÓÃÈýÖ¸¼Ð+СÎüÅÌ£¬60 s/¸ù£¬Á¬Ðø×÷Òµ10 h¡£
5.2 ·ÖÀ룺ÀäÇÐÓëÈÈÇÐ
Ðýת¾âƬÇо¥³É¹¦ÂÊ100%£¬µ«²¡¶¾´«²¥·çÏոߣ»HentenµÈÓÃÈÈÏß45 s/¸ù£¬½µµÍ¸ÐȾȴÁôÏÂׯºÛ£»¼¤¹âÇиîÈÔÔÚʵÑéÊÒ£¬Çпڿí¶È<1 mm£¬ÈÈÓ°ÏìÇø<0.5 mm£¬ÉÐδ½â¾öÄܺÄÓ밲ȫÐÔ¡£
6. Ô˶¯¹æ»®£ºÔÚÌÙÂûÀï´©Õë
6.1 ·¾¶¹æ»®
ÒÅ´«Ëã·¨ÓÅ»¯²Éժ˳Ðò£¬ÐгÌËõ¶Ì12%£¬µç³ØÐøº½Ôö9%£»DIRECTÈ«¾ÖÓÅ»¯°ÑµÑ¿¨¶û¿Õ¼äËÑË÷½µÖÁ0.3 s£¬µ«Ò¶´Ø¶¯Ì¬ÅöײÈÔÐèÔÚÏßÖØ¹æ»®¡£
6.2 ÊÓ¾õ¸ú×Ù
eye-in-handÏà»úÒÔ23 FPS¹À¼Æ¹£·½Î»£¬²ÉÓÃP_waypoint=P_cucumber+(0,150,150) mm¹ý¶Éµã£¬½µµÍ60%Åöײ£»±ê¼ÇÁ¢·½ÌåʵÏÖ»ù×ø±êÔÚÏß×¢²á£¬Öض¨Î»Îó²î<2 mm¡£
7. ¾ÖÏÞÓëδÀ´
7.1 ʵÑéÊÒvsÎÂÊÒ
ºÏ³ÉÕÚµ²Êý¾Ý¼¯mAP±ÈÕæÊµ»·¾³¸ß10%-15%£¬Ìáʾ¡°Êý¾Ýºè¹µ¡±ÒÀ¾É£»¶à¼¾¶àµã¶àÆ·ÖÖÊÔÑé²»×㣬µ¼ÖÂͳ¼Æ¿É¿¿ÐÔȱ¿Ú¡£
7.2 ÑÓ³ÙÓë³É±¾
YOLOÍÆÀí220 ms½öÕ¼56 sÑ»·µÄ0.4%£¬ÕæÕýºÄʱµÄÊÇ»úе±Û±ÜÕÏ£»€30 000µÄ6-DoF±ÛÕ¼CAPEX 60%£¬ÈíÌåÄ©¶Ë³ÉΪ½µ±¾Ìæ´ú·½°¸¡£
7.3 ¿ç×÷ÎïÆôʾ
·¬ÇÑ¡°×¥-À-ÇС±²ßÂÔÌáʾÐ辫׼¹À¼Æ¹û-¾¥¼Ð½Ç£»²ÝÝ®·çÉÈÈ¥ÕÚµ²·¨¿ÉÒÆÖ²µ½»Æ¹ÏÌÙÂû£»Ìð½·Åöײ¸ÐÖªÐòÁй滮¶Ô¸ßÏßÔÔÅàµÄ´®ÊÕģʽͬÑùÓÐЧ¡£
7.4 ÉÌÒµ»¯Ãż÷
TCO=CAPEX+OPEX£¬ÈôÄ¿±ê¡Ü0.05 €/kg£¬Ðè°Ñµ¥±Û³É±¾Ñ¹ÖÁ€8 000ÒÔÏ£¬²¢½«MTBFÌáÉýÖÁ>100 h£¬ËðÉËÂÊ<1¡ë£¬²ÅÄÜÓë¶«Å·¼¾¹¤Ð½×ʾºÕù¡£
7.5 δÀ´·½Ïò
¢Ù ¶à¹âÆ×+Ö÷¶¯ÕÕÃ÷+±ßÔµGPUÈýºÏÄ£¿é£¬ÊµÏÖ5 fps¡¢<5 mm¶¨Î»Îó²î£»¢Ú »ùÓÚ¹ûʵÉú³¤Ê±ÐòµÄLSTMÔ¤²âÄ£ÐÍ£¬Ìáǰ24 h¸ø³ö¡°¿É²É´°¿Ú¡±£¬¼õÉÙ¿ÕÅÜ£»¢Û Éþ¹ì-ÎÞÈË»ú»ìºÏ¿ò¼Ü£¬ÈûúÆ÷ÈËÔÚÈýάÅï¼Ü¼ä¡°·É-×ß¡±½áºÏ£¬¸²¸Ç1 haÄܺÄ<3 kWh¡£
8. ½áÂÛ
ÊÓ¾õËã·¨Òѱƽüʵʱ£¬µ«¡°Èá˳½Ó´¥+Åöײ¹æ±Ü+³É±¾¿É¿Ø¡±µÄÈýÔªã£ÂÛÈÔÊÇCPRÉÌÒµ»¯×î´óÀ¹Â·»¢£»Ö»ÓаѸÐÖª-¹æ»®-Ö´ÐÐ-¾¼ÃËÄÌõÇúÏßͬ²½ÊÕÁ²£¬»Æ¹Ï²ÉÕª»úÆ÷È˲ÅÄÜÕæÕý×ß³öÊÔÑéÅ³ÉΪÎÂÊÒÀïµÄ¡°ÐÂÅ©·ò¡±¡£