Исследователи из ETH Zurich научили робокисть ORCA писать ручкой без тысяч тренировочных примеров или человеческих демонстраций. В начале робот около 18 секунд двигает пальцами и наблюдает, как эти движения перемещают кончик ручки. После этого он уже может выводить буквы и фигуры, продолжая корректировать движения прямо во время письма.
Система не пытается заранее просчитать сложную физику контакта ручки с пальцами. Камера отслеживает ее кончик, а алгоритм в реальном времени определяет связь между движением суставов и ручки.
Весь алгоритм вместе с компьютерным зрением работал на обычном процессоре ноутбука. Так что подобный подход хорошо подойдет, например, для управления протезами или небольшими роботами.