Be My Eyes — приложение на модели GPT-4, которое создано для помощи слабовидящим или незрячим людям. Помогает распознавать картинки, окружающую обстановку, получить помощь видящего волонтера.
Кому подойдет
- людям с нарушением зрения
Как это работает?
- Незрячий пользователь устанавливает приложение на смартфон и открывает его.
- Сразу открывается камера, в кадр которой попадают все предметы, на которые направляется смартфон.
- Далее нужно направить смартфон на нужный объект и нажать на кнопку «Сделать снимок». Фотография начнет обрабатываться, и появится текстовое сообщение с подробным описанием картинки. Это работа нейросети ChatGPT-4, которая способна распознавать изображения.
- Но это еще не все. В нижнем правом углу под текстом описания появится кнопка «Попросить еще». После нажатия на нее появится возможность написать текстовое сообщение или позвонить волонтеру.
- Когда пользователю нужно уточнить детали изображения, он может написать в текстовое поле вопрос. Например, если это человек, можно спросить: «Какое выражение лица у человека?». Искусственный интеллект пришлет более развернутое описание в соответствии с запросом.
- Если такое описание не удовлетворяет, можно нажать на кнопку «Позвонить волонтеру». Тогда к помощи подключится не робот, а живой человек, и все вопросы в режиме реального времени можно будет задать ему. Например, включен ли в комнате свет, какого цвета одежда.
Многие незрячие и слабовидящие пользователи уже оценили это приложение и активно им пользуются. Be My Eyes развивается и совершенствуется. Так что еще могут появиться новые возможности.
Больше информации на сайте разработчика https://www.bemyeyes.com/language/russian
Как пользоваться этим приложением на смартфонах с разными платформами
смартфон на Android
смартфон на iOS