Алиса в Яндекс Браузере научилась «видеть» картинки в интернете и описывать их

В Яндекс Браузере появилась функция описания изображений для людей с нарушениями зрения. Нейросеть Алиса анализирует визуальный контент на веб-страницах и генерирует описания, которые могут быть озвучены.

Функция работает на основе мультимодальной нейросетевой модели, способной обрабатывать как текст, так и изображения. Алгоритм не просто идентифицирует отдельные объекты, но и понимает их взаимосвязь в контексте всей композиции.

Для получения описания пользователь может выбрать соответствующую...