«Яндекс» розробляє інтерфейс жестів для Smart TV

Ви часто втрачаєте пульт від телевізора? Скоро це перестане бути проблемою. «Яндекс» спільно з університетом Карнегі-Меллона розробляє інтерфейс жестів для Smart TV. Керувати підключеним до інтернету телевізором можна буде голими руками і не встаючи з крісла - дивіться відео.

За допомогою жестів на екран виводиться різна інформація по запиту користувача. Наприклад, дані з соціальних мереж Facebook і Foursquare, сервісу обміну фотографіями Instagram.

Додаток також показує новий контент в режимі екранної заставки. У добірку потрапляють фотографії, відеоролики та музичні кліпи, рекомендовані друзями в соцмережах. З цікавим для медіа-контентом можна познайомитися ближче - наприклад, прочитати опис ролика або відразу ж відтворити його.

Експериментальне додаток написано для Mac OS X. У розпізнавання рухів використовується Microsoft Kinect. Він має власну систему жестів і власні алгоритми машинного навчання. Проблема в тому, що охочі застосовувати його в своїх комерційних програмах повинні отримати платну ліцензію. Тому для Kinect шукається альтернатива.

Офіційно ініціатива існує в рамках дослідницького проекту, однак це явно проба пера і спроба ближче вивчити особливості інтерфейсу жестів для використання в майбутньому.

Директор з розповсюдження технологій компанії «Яндекс» Григорій Бакуновотмечает в інтерв'ю виданню TechCrunch, що мова жестів виглядає перспективним практично для будь-якого мобільного сервісу «Яндекса».

Розробка ведеться під керівництвом професора Іена Лейна (Ian Lane) з використанням методів опорних векторів, нейронних мереж і прихованих Марковських моделей. Проробили величезну роботу і студенти. Вони зробили півтори тисячі записів рухів, розбили їх на блоки по 90 кадрів і вручну промаркировали понад п'яти тисяч прикладів для кожного руху. Завдяки цій рутинній роботі значно підвищився коефіцієнт розпізнавання кінцевого набору керуючих жестів.

Подібні дослідження проводить і Google разом з лабораторією Ishikawa Komuro.

В даному варіанті для розпізнавання рухів до смартфону підключається високошвидкісна камера. Враховуючи масштабування об'єкта по мірі наближення, система розпізнає не тільки переміщення пальця в площині, але і віртуальні натискання. Можливо, в майбутньому вдасться адаптувати для цих цілей власну фронтальну камеру смартфона.

Джерело: computerra.ru