В бета-версиях watchOS 10.4 и iOS 17.4 появился новый переключатель для Apple Watch Series 9 и Ultra 2. Настройка предназначена для предотвращения конфликта между Apple Watch и Apple Vision Pro при жестовом управлении.
Apple раскрыла принцип управления Vision Pro
В Apple рассказали, как будет работать управление гарнитурой Vision Pro. Сотрудники компании утверждают, что шлем будет управляться в основном взглядом и жестами, однако иногда пользователям придётся использовать виртуальную клавиатуру.
В Microsoft Edge Canary добавили флаг для активации жестов мыши
Microsoft включила в сборку Edge Canary флаг для активации жестов мыши, которые анонсировала ранее в этом году. Ожидается, что в ближайшее время функция войдёт в тестовую сборку браузера.
JavaScript: управление содержимым веб-страницы с помощью жестов
Привет, друзья!
Еще недавно управление содержимым веб-страницы с помощью жестов можно было наблюдать разве что в фантастических фильмах. Сегодня все, что для этого требуется — видеокамера и браузер (и библиотека от Google
).
В данном туториале мы рассмотрим 5 примеров:
- получение данных с видеокамеры и их отрисовка на холсте (canvas);
- обнаружение и отслеживание кисти руки;
- управление "курсором" с помощью указательного пальца;
- определение жеста "щипок" (pinch);
- нажатие кнопки с помощью щипка.
Все примеры будут реализованы на чистом JavaScript
.
Источником вдохновения для меня послужила эта замечательная статья.
Для обнаружения и отслеживания руки и жестов будет использоваться MediaPipe. Для работы с зависимостями — Yarn.
Код примеров можно найти в этом репозитории.
ExperienceTech: студенты SkillFactory создали ИИ для бионического протеза
Хакатоны в начале IT-карьеры — это шанс решить проблемы, которые нужно решать прямо сейчас, а ещё — реальный опыт командной работы. Будушие заказчики проектов на хакатонах могут проверить свои идеи. И самое главное: хакатоны помогают сделать жизнь людей лучше. Cтуденты SkillFactory на хакатоне прокачивали прототип бионического протеза на оптических датчиках «Моторики» — российского разработчика современных протезов рук. Подробности — к старту флагманского курса по Data Science.
Руками не трогать! Управляем веб-страницей с помощью веб-камеры
Рано или поздно карантин закончится, и жители городов смогут снова покидать дома. Но уже сейчас становится ясно, что месяцы самоизоляции не пройдут бесследно. Наши привычки из жизни до карантина изменятся, и окружающему миру придется под это подстраиваться.
Экономический кризис станет двигателем быстрой адаптации изменений: компании, которые первыми поймут, как дать пользователям дополнительную ценность или удобство, окажутся в топах. Перед IT-индустрией будет масса челленджей. И в этом материале мы поделимся своим решением одной из проблем нового мира. Но обо всем по порядку.
Размышления об AirPods Studio и новом яблочном патенте с распознаванием вращения
Управление громкостью звука жестами на Python
В данной статье хочу рассказать про один проект из курса по OpenCV Python. Посмотреть полный код можно на Github.
Идея заключается в том, чтобы менять громкость звука на компьютере при помощи жестов. Громкость будет регулироваться расстоянием между указательным и большим пальцами, а сигналом для подтверждения будет согнутый мизинец.
Распознавание движений белой тростью с нуля. Часть первая
Вы хотите создать простую капсулу, способную распознавать естественные движения трости? Хотите внедрить машинное обучение / искусственный интеллект на микроконтроллерах и других устройствах? Мы покажем, как создать GesturePod — самонастраиваемое устройство, которое распознает движения в режиме реального времени. Эта инструкция наглядно показывает, как при помощи GesturePod сделать интерактивной любую «белую трость». GesturePod упрощает доступ к смартфонам и другим домашним устройствам для людей с нарушениями зрения и пожилых людей. С помощью GesturePod можно управлять устройствами, выполняя движения тростью. К примеру, ответить на входящий звонок двойным покачиванием трости из стороны в сторону.
Разработка Fujitsu позволяет работать с листом бумаги, как с сенсорным экраном
Управление пальцами: в поисках идеального интерфейса
Особенно остро качественная недостаточность стала проявлять себя с появлением приложений, в которых разработчики учли особенности управления сенсорным экраном, и сделали ставку на новые способы взаимодействия. И сразу со всех концов интернета посыпались возгласы «революционный дизайн», «инновационное управление», «удобный минималистичный интерфейс».
Давайте попробуем разобраться в тонкостях взаимодействия с сенсорными экранами, и понять как же добиться подобного удобства и легкости управления.
Новая версия Яндекс.Браузера: поиск по странице с учетом морфологии и поддержка жестов
- поиск по странице научился понимать морфологию русского языка — насколько нам известно, это первый браузер, который такой поиск поддерживает;
- появились жесты для управления навигацией в браузере;
- проводится эксперимент с объединением омнибокса и поисковой строки на странице поискового сервиса;
- для закладок теперь можно включить отображение фавиконок.
Расширяя возможности: Управление смартфоном без рук
Продолжая тему «Расширяя возможности» обязательно стоит сказать о готовящемся к выпуску смартфоне Sesame. Он призван помочь тем, кто физически не может управлять телефоном с помощью пальцев.
Apple патентует управление жестами
Gesturizer: 3D-touch и жесты в iOS приложения
В кратце, данная библиотека позволяет обучаться и использовать разные виды жестов, выполненные одним пальцем, по всей площади дисплея и в любых iOS приложениях на девайсах с поддержкой 3D-touch. Теперь подробнее разберем на примере.
AirPods Studio: собираем образ устройства из отрывочных сведений
Приличный жест
А в этом мини-посте я перейду сразу к одной вкусности, а точнее изысканной восточной сладости. Официант, десерт!
В этом телефоне Sony Ericsson впервые использовала новый способ управления — шейк-контроль.
Как превратить телефон в музыкальную студию
Компания ZOOZ Mobile анонсировала сегодня Nokia N95-совместимую версию своего основного программного продукта ZOOZBeat. Программа позволяет превратить телефон в «музыкальную студию» (см. видео), реагируя на жесты пользователя.
Модные «жесты» jQuery
Возможности
- Можно создавать свои собственные жесты;
- Можно иметь множество областей на странице, которые будут способны распознать жесты;
- Есть визуальная обратная связь;
- Работоспособность во всех основных браузерах.
Благодарности
Этот скрипт инициирован из скрипта распознавания жестов мыши от Didier Brun.
Демонстрация
Запустить демонстрацию распознавания жестов мыши
Скриншот модных жестов jQuery
Обзор механизма естественного ввода в RAD Studio 2010
С помощью нового механизма вы можете выбирать разнообразные предопределённые движения вашего манипулятора (либо создавать новые, пользовательские) для того, чтобы ассоциировать их с разными действиями. Пользователям браузера Opera (и не только) это покажется знакомым. Для остальных, напомню, что Windows (а значит, и Delphi) давно содержит одно старое движение: Drag&Drop. Считайте, что этот механизм есть нечто подобное, но гораздо более мощное. Разумеется, это будет активно использоваться в программировании с использованием пера, приложениях для контент-киосков с использованием тачскрина и т.д.
Если вдаваться в детали, проясним одно положение: Delphi пытается использовать механизм обработки естественного ввода выпускающегося сейчас Windows 7. Если это невозможно (к примеру, приложение запущено на Windows XP), используется собственный механизм распознавания. Как он это делает? С помощью некоторого нововведения в языке (но это тема другого поста, конечно =)).