Помогать незрячим людям в приложении Be My Eyes будет нейросеть

Прослушать публикацию
Тифлокомментарий: цветная фотография. Крупный план женской руки, держащей мобильный телефон с сенсорным дисплеем. На экране — сообщения в мессенджере.

Приложение Be My Eyes, благодаря которому незрячие люди могут получать описания окружающей обстановки и предметов от волонтеров без нарушения зрения, тестирует виртуального помощника. Создатель сервиса, Ханс Юрген Вайберг, собирается интегрировать в приложение технологию, отвечающую за ChatGPT, сообщает EuroNews.

Благодаря искусственному интеллекту незрячие пользователи приложения смогут моментально получать текстовые описания того, что их окружает. Для этого потребуется сфотографировать на камеру гаджета требующий характеристики предмет и отправить его в Be My Eyes.

От других существующих сегодня сервисов преобразования визуальной информации в текстовую виртуального волонтера будет отличать более глубокое понимание контекста и способность вести диалог с пользователем. Например, если незрячий человек сфотографирует полку своего холодильника и попросит нейросеть описать, какие продукты там есть, искусственный интеллект не только опознает ингредиенты, но и сможет посоветовать блюда, которые можно из них приготовить.

Если нейросеть не сможет найти ответ на вопрос, она автоматически предложит обратиться через приложение к волонтеру без нарушения зрения.

Сейчас для получения помощи через сервис есть только одна опция: созвониться по видеосвязи с готовым дать консультацию волонтером.

Виртуальный помощник от Be My Eyes пока не доступен для широкого круга пользователей — он проходит закрытое тестирование. На сайте сервиса может записаться в лист ожидания инструмента. Предполагается, что новая функция будет бесплатной и станет доступна всем желающим незрячим людям в течение нескольких месяцев.

Создатель приложения Be My Eyes считает, что интегрировать нейросети в будущем получится и в видеозвонки. Вайберг, однако, уверен, что искусственный интеллект не заменит волонтеров без нарушения зрения.

«Иногда мне кажется: наверное, мой вопрос не очень важен, не стоит отнимать время у волонтера. А иногда бывает, что я сам не хочу ни с кем общаться — например, потому что только проснулся, на дворе раннее утро, понедельник и так далее. В таких случаях можно будет просто обратиться к искусственному интеллекту», — отметил сотрудник Be My Eyes Джеспер Хирринг Хенриксен.

Ханс Вайберг, который сам живет с нарушением зрения, придумал Be My Eyes в 2012 году. В 2015-м приложение запустилось и позволило волонтерам без нарушения зрения помогать незрячим людям, выступая их «глазами». Сейчас к сервису подключены полмиллиона незрячих людей и более шести миллионов волонтеров по всему миру.

ChatGPT — это чат-бот, который умеет вести диалог с пользователем и решать большое количество задач: от поиска и генерации изображений до написания текстов разных форматов. Сервис создала компания Open AI.

Виртуальный волонтер Be My Eyes будет работать на основе одной из последних версий нейросети.

Корреспондент «Особого взгляда» ранее взял интервью у создателя приложения Be My Eyes. Прочитать материал можно по ссылке.

Само приложение доступно для устройств под управлением iOS и Android по ссылке.

Отметим, что в России в 2015 году был создан сайт с описаниями изображений для незрячих людей «Опиши мне». По запросу незрячих пользователей волонтеры описывают мемы, фотографии известных людей, оптические иллюзии, обои для рабочего стола, открытки и даже видео. У сервиса есть мобильное приложение.

Напоминаем, что за свежими новостями, интересными статьями и актуальными анонсами «Особого взгляда» удобно следить в нашем телеграм-канале. Приглашаем переходить по ссылке и становиться читателем. Подписывайтесь на нас также в «Дзене» и во «ВКонтакте».