Роборука с высокой чувствительностью умеет определять предметы | QWERTY

Роборука с высокой чувствительностью умеет определять предметы при одном прикосновении

На руке всего три пальца, с жестким скелетом, заключенным в мягкий внешний слой. Внутри пальца исследователи разместили несколько датчиков высокого разрешения GelSight, встроенных под прозрачную силиконовую «кожу» и обеспечивающих перекрестные изображения. Каждый палец использует две камеры и шесть светодиодов для сбора визуальной информации о форме объекта, обеспечивая непрерывное считывание по всей длине пальца.

Когда палец захватывает объект, камера фиксирует изображение, поскольку цветные светодиоды подсвечивают кожу изнутри. Используя освещенные контуры, которые появляются на мягкой коже, алгоритм выполняет обратные вычисления, чтобы нанести на карту контуры на поверхности захваченного объекта. Исследователи обучили модель машинного обучения идентифицировать объекты, используя необработанные данные изображения с камеры.

Крошечные «морщины» на поверхности силикона помогают пальцу скользить по поверхности предмета для лучшей идентификации. Устройству достаточно одного захвата, чтобы идентифицировать различные предметы с точностью до 85%. При этом жесткий скелет делает пальцы достаточно сильными, чтобы поднимать тяжелые предметы, такие как дрель. А мягкая кожа позволяет надежно сжимать, но не раздавить податливые предметы, например, пустую пластиковую бутылку для воды.