Новая клавиатура от Apple избавит нас от мыши

Компания Apple запатентовала новую разработку, которая позволит компьютерной клавиатуре полностью заменить мышь. Речь идет не о привычном тачпаде, закрепленном на клавиатуре, как у ноутбуков. Идея состоит в том, чтобы клавиатура сама умела распознавать движения рук.

Создание такой технологии Apple объясняет тем, что на сегодняшний день обычная клавиатура с аппаратными кнопками все еще является самым популярным и удобным устройством для компьютера, поэтому необходимо расширение ее функциональности. Сообщается, что клавиатура будет иметь два режима: печати и мыши. Переключение между ними будет осуществляться либо специальной кнопкой, либо сочетанием горячих клавиш. При переключении в режим мыши будут включаться четыре специальные камеры, расположенные по периметру клавиатуры, которые будут отслеживать движение рук и пальцев. Таким образом, отдельная мышь уже не понадобиться, ее аналог в буквальном смысле будет расположен прямо на клавиатуре.

Пока не ясно, сколько времени потребуется, чтобы привыкнуть к новой клавиатурной мыши, и будет ли вообще такой гибрид удобен при работе. Однако запатентованная разработка действительно интересная, остается лишь ждать дальнейших новостей от Apple.

Оптическое отслеживание движений рук

Технология, описанная в патенте, относится к классу систем компьютерного зрения, работающих в ближней зоне. Четыре камеры, расположенные по периметру клавиатуры, формируют стереопары, что позволяет вычислять положение объектов в трёхмерном пространстве методом триангуляции. Камеры фиксируют отражённый от рук инфракрасный или видимый свет, после чего программное обеспечение строит карту глубины и распознаёт жесты.

Принципиальная сложность подобных систем — отделение полезного сигнала от фона. Руки пользователя находятся в непосредственной близости от клавиш, и алгоритмам необходимо отличать намеренные жесты от случайных движений при печати. Для этого вводится явное переключение режимов: в режиме ввода текста камеры отключены или игнорируют перемещения, а в режиме управления курсором активируется трекинг заданных точек — например, кончиков пальцев.

Похожие подходы к бесконтактному управлению существовали и до 2010 года. В исследовательских проектах применялись массивы микрофонов для ультразвуковой локации пальцев и датчики приближения на основе ёмкостного поля. Оптический метод с несколькими камерами выигрывает в точности, но требует значительных вычислительных ресурсов для обработки видеопотоков в реальном времени и чувствителен к условиям освещения.

Оптическое отслеживание движений рук

Читайте также