Investigating Sensors and Methods in Grasp State Classification in Agricultural Manipulation

## Контекст Агротехнологии находятся в стадии активного развития, призванной повысить эффективность сельскохозяйственного производства. Одна из ключевых задач в этой области — достижение высокого качества сбора продукции с минимальными потерями и вредами для растений. Одним из сложных аспектов является точное понимание состояния захвата (grasp state) при помощи роботских рук. Это необходимо для планирования корректирующих действий в реальном времени, чтобы обеспечить эффективность и достоверность сбора. Однако сельскохозяйственная среда представляет собой уникальные вызовы, включая работу с уплотненными местностями, тесноуплотненными растениями и физически соединенными фруктами с растениями. Изучение эффективных сенсоров и методов классификации состояний захвата позволяет существенно улучшить точность и производительность сбора продукции. ## Метод Для классификации состояний захвата была разработана система, включающую несколько сенсоров: Инерциальных Мерающих Единиц (IMU), инфракрасных (IR) датчиков отражения, датчиков напряжения, сенсоров тактильного восприятия и RGB-камер. Эти сенсоры были интегрированы в совместимый клешнь, позволяющий замерять различные аспекты захвата. Для классификации использовались две модели: Random Forest и Long Short-Term Memory (LSTM) сети. Данные для обучения и тестирования были собраны в управляемой среде, а затем проверены на реальных растениях свистокетов. Методы классификации были подвергнуты сравнению, чтобы определить наиболее эффективную комбинацию сенсоров и методов моделирования. ## Результаты Эксперименты показали, что система с использованием IMU и датчиков напряжения достигла очень высокой точности в классификации состояний захвата — слипания, неудачных захватов и успешных сборов. Такая комбинация сенсоров предоставила 100% точности классификации в управляемой среде и показала результаты с высокой производительностью на реальных растениях. По сравнению с базовыми моделями, такими как Long Short-Term Memory (LSTM), Random Forest показал значительное улучшение в классификации. Это выделение минимальной комбинации датчиков, необходимой для точной классификации, позволило сократить сложность системы и улучшить её надежность. ## Значимость Результаты имеют решающее значение для сельскохозяйственных операций, включая сбор растений и фруктов. Эффективность классификации состояний захвата позволяет снизить потери продукции и повысить производительность сбора. На основе полученных результатов можно разрабатывать системы, которые будут использоваться в реальных условиях сбора, обеспечивая более точное планирование действий и меньшую вероятност