Розумні годинники стали дуже поширеними і можуть запропонувати людям приватний спосіб отримання повідомлень про їх оточення, попереджень про стан здоров’я, телефонних дзвінків або доставки посилок. Дослідники з Вашингтонського університету розробили новий застосунок для розумних годинників під назвою SoundWatch, призначений для глухих і слабочуючих. Смарт-годинник з застосунком можуть уловлювати звуки, які цікавлять користувача, такі як звуковий сигнал сирени або мікрохвильовки, і ідентифікувати їх і попереджати користувача.
Ця технологія призначена для того, щоб дати людям можливість чути звуки, що вимагають дій, наприклад, коли вони ставлять їжу до мікрохвильової печі. SoundWatch також може допомогти людині відчути себе більш пов’язаною зі світом. Провідний автор дослідницької статті Дхрув Джайн каже, що він використовує прототип застосунка, щоб помічати щебетання птахів і звуки водоспаду під час походів. Він сказав, що застосунок дозволяє йому відчути себе на природі.
При запуску проекту для команди ставили за мету розробити програму, яка дозволить глухим і слабочуючих людям знати, що відбувається навколо їхнього будинку. Перша система, яку придумали дослідники, називалася HomeSound і грунтувалася на планшетах Microsoft Surface, розміщених по всьому будинку, що працюють як мережа взаємопов’язаних дисплеїв. Кожен з дисплеїв мав базовий план будинку і попереджав користувачів про звук і його джерела.
На дисплеях відображалися форми звукових сигналів, щоб допомогти користувачам ідентифікувати їх, і зберігалася історія всіх звуків, які користувач міг пропустити, коли не був вдома. Ця система була випробувана в будинках шести глухих або слабочуючих учасників протягом трьох тижнів. Після отримання відгуків другий прототип використовував машинне навчання для класифікації звуків в реальному часі. Команда створила набір даних з більш ніж 31 години і 19 поширених домашніх звуків, включаючи гавкіт собаки, котяче нявкання, дитячий плач і стукіт у двері.
В кінцевому підсумку дослідники перейшли до системи розумних годинників, що дозволяє користувачам отримувати звукові оповіщення, де б вони не знаходилися. Проблема полягає в обмежених можливостях зберігання і обробки даних розумних годинників. Це означало, що дослідникам потрібна була система, яка не споживала б багато енергії, але була б швидкою і точною. Відповіддю стала стисла версія класифікатора HomeSound. Система відправляє звук з переносного пристрою на смартфон користувача для класифікації.
Читайте також:
- Honor Band 6 офіційно випущений: перший повноекранний смарт-браслет
- Представлено $100-ий розумний годинник Xiaomi з NFC і пульсоксиметром