«Яндекс» розробляє інтерфейс жестів для Smart TV

Ви часто губите пульт від телевізора? Скоро це перестане бути проблемою. «Яндекс» спільно з університетом Карнегі-Меллона розробляє інтерфейс жестів для Smart TV. Керувати підключеним до інтернету, телевізором можна буде голими руками і не встаючи з крісла - дивіться відео.

За допомогою жестів на екран виводиться різна інформація за запитом користувача. Наприклад, дані з соціальних мереж Facebook і Foursquare, сервісу обміну фотографіями Instagram.

Додаток також показує новий контент в режимі екранної заставки. В добірку потрапляють фотографії, відеоролики і музичні кліпи, рекомендовані друзями у соцмережах. З цікавим медіа-контентом можна познайомитися ближче - наприклад, прочитати опис ролика або відразу ж відтворити його.

Експериментальне додаток написано для Mac OS X. В розпізнаванні рухів використовується Microsoft Kinect. Він має власну систему жестів і власні алгоритми машинного навчання. Проблема в тому, що бажають застосовувати його у своїх комерційних програмах повинні отримати платну ліцензію. Тому для Kinect шукається альтернатива.

Офіційно ініціатива існує в рамках дослідницького проекту, однак це явно проба пера та спроба ближче вивчити особливості інтерфейсу жестів для використання в майбутньому.

Директор по розповсюдженню технологій компанії «Яндекс» Григорій Бакуновотмечает в інтерв'ю виданню TechCrunch, що мова жестів виглядає перспективним практично для будь-якого мобільного сервісу «Яндекса».

Розробка ведеться під керівництвом професора Яна Лейна (Ian Lane) з використанням методів опорних векторів, нейронних мереж і прихованих Марковських моделей. Величезну роботу виконали і студенти. Вони зробили півтори тисячі записів рухів, розбили їх на блоки по 90 кадрів і вручну промаркували понад п'яти тисяч прикладів для кожного жесту. Завдяки цій рутинної роботи значно підвищився коефіцієнт розпізнавання кінцевого набору керуючих жестів.

Подібні дослідження проводить і Google спільно з лабораторією Ishikawa Komuro.

У цьому варіанті для розпізнавання рухів підключається до смартфону високошвидкісна камера. Враховуючи масштабування об'єкта по мірі наближення, система розпізнає не тільки переміщення пальця в площині, але і віртуальні натискання. Можливо, в майбутньому вдасться адаптувати для цих цілей власну фронтальну камеру смартфона.

Джерело: computerra.ru