Firefox будет использовать ИИ для улучшения доступности браузера

Mozilla и ее браузер Firefox не застрахованы от такого широкого использования ИИ, и компания хочет внедрить искусственный интеллект для большей доступности.

В недавнем сообщении на Mozilla Hacks Тарек Зиаде объяснил, как Firefox будет использовать ИИ для улучшения доступности. А именно, предлагая подписи к изображениям, сгенерированные ИИ, для людей, которые полагаются на вспомогательные технологии, такие как программы чтения с экрана.

Подписи к изображениям или «замещающий текст» предоставляют читателям необходимый контекст, но, к сожалению, многие авторы игнорируют замещающий текст, в результате чего почти у половины всех изображений отсутствуют надлежащие описания.

Благодаря последним достижениям в области ИИ теперь можно запустить локальную модель машинного обучения для автоматического создания титров без отправки потенциально конфиденциальной информации на серверы.

Firefox 130 будет поставляться на Nightly Channel с новой функцией редактора PDF, которая будет генерировать замещающий текст с использованием небольших моделей машинного обучения на основе Transformer с открытым исходным кодом.

Mozilla утверждает, что они хорошо описывают изображения без большого налога на ресурсы. Поэтому пользователи Firefox должны получать описания изображений (сначала в формате PDF) даже на менее мощных устройствах.

Согласно сообщению в блоге, небольшие модели могут генерировать замещающий текст с более чем 200 миллионами параметров, занимая при этом менее 200 МБ дискового пространства и обеспечивая вывод за считанные секунды.

Они менее детальны и точны по сравнению с мастодонтами современных LLM, вроде новейшего GPT-4o, но разработчики не хотят перегружать пользователей слишком большим количеством информации. Поэтому Firefox сосредоточится на создании описания из одного предложения.

Использование локальной модели имеет несколько преимуществ. Помимо улучшенной конфиденциальности (изображения никуда не отправляются для обработки), пользователи получают более высокую эффективность использования ресурсов, большую прозрачность, меньшие выбросы CO2 (обучение больших моделей генерирует много выбросов углекислого газа) и частые обновления с регулярными улучшениями.

Более подробную техническую информацию вы можете найти в официальном сообщении .

Ранее ГЛАС сообщал: Менеджер ПО Linux Mint стал загружаться быстрее и более безопасен.