Context-based rider assistant system for two wheeled self-balancing vehicles

Персональные мобильные устройства (гироскопы, двухколесные самобалансирующиеся транспортные средства, велосипеды и мотороллеры) становятся все более популярными в последние годы. Они помогают людям решать проблемы первой и последней мили в больших городах. Для того, чтобы обеспечить оператору возможность навигации в городе, а также повысить его безопасность, предлагается использовать интеллектуальную систему помощи оператору с использованием персонального смартфона, использующегося для формирования контекста и предоставления оператору рекомендаций. Под контекстом в статье понимается любая информация, характеризующая текущую ситуацию. Предполагается, что оператор устанавливает персональный смартфон таким образом, чтобы фронтальная камера была направлена на его лицо. Таким образом информация с фронтальной камеры и датчиков смартфона (GPS / ГЛОНАСС, акселерометр, гироскоп, магнитометр, микрофон) формирует контекст оператора. Представленная в статье система поддержки оператора ориентирована на обнаружение опасных ситуаций оператора персонального мобильного устройства: сонливость и невнимательность. Используя методы компьютерного зрения предлагается определение параметров лица оператора (глаз, носа, рта, угла наклона и угла поворота головы) и на основании анализа этих параметров выявление опасных ситуаций. В статье представлен анализ современных исследований по тематике интеллектуальных систем помощи водителям транспортных средств, предложен подход к обнаружению опасных ситуаций и генерации рекомендаций, а также проведены эксперименты с использованием предложенной системы и двухколесного самобалансирующегося транспортного средства.