«Современные нейросети справляются с распознаванием формул и команд за считанные секунды» — Алексей, специалист по доступности цифрового контента для инвалидов по зрению, знает это на собственном опыте. В беседе он проследил эволюцию своих рабочих инструментов — от электрической пишущей машинки до GigaChat и Яндекса Алисы, рассказал о российских и международных стандартах доступности и объяснил, почему самостоятельность является официальной целью социальной политики в отношении людей с ограниченными возможностями здоровья.
Вспомните своё школьное и студенческое время. Какие книги или учебники были для вас самыми сложными для освоения? Из-за чего: из-за формул, графиков, или из-за сложности самого текста? Как вы выходили из положения?
Наибольшую трудность вызывали учебники по математике. В начальной школе, пока был остаток зрения, помогал крупный шрифт. Со временем зрение ухудшалось, крупный шрифт перестал помогать. На смену пришла электрическая пишущая машинка — я освоил десятипальцевый метод набора. Позже появился диктофон. А настоящим спасением стал компьютер с высокоскоростным интернетом — теперь я могу самостоятельно обучаться.
Когда вы слушаете аудиокнигу или используете скринридер, сохраняется ли у вас ощущение погружения в текст? И бывает ли так, что на слух информация усваивается хуже или хочется вернуться к Брайлевскому тексту?
Ощущение погружения в материал возникает однозначно — даже при чтении обычного файла с помощью программы экранного доступа. С аудиокнигами сложнее возвращаться к нужному месту, хотя есть клавиши перемотки и специальные форматы (Дейзи, ЛКФ). Но для меня самый удобный вариант — обычный текстовый файл. Программа экранного доступа позволяет ориентироваться по строкам, словам и символам. Текстовый файл предпочтительнее всего. Труднее всего воспринимать математические формулы.
Как, по-вашему, меняется ли восприятие текста у ребёнка, если он только слушает, по сравнению с чтением по Брайлю? Есть ли когнитивные потери или приобретения?
Есть две модальности восприятия — аудиальная и тактильная. Есть информация, которую достаточно просто слышать. Есть информация, где желательно идти по тексту с разной степенью детализации. А есть информация, которую для полноценного усвоения желательно воспринимать и аудиально, и тактильно — то есть читать по Брайлю.
Если бы ИИ мог анализировать текст и «переупаковывать» его в более понятную структуру, помогло бы это в обучении? Или это лишило бы ребёнка самостоятельности?
Существует формат TeX — он наиболее предпочтителен для работы с математическим контентом, содержащим формулы. Запись осуществляется с помощью цифр, букв и специальных символов. Есть обычный Брайль и математический Брайль — более сложный, позволяющий пользоваться всем многообразием математических символов.
Сейчас активно помогают нейросети. Например, нейросеть GigaChat: я прикрепляю картинку с заданием по математике, пишу запрос «распознать текст», и она корректно распознаёт все символы и выводит их в формате TeX. Можно скопировать ответ и получить полностью доступное задание.
Яндекс Алису использовал для распознавания Linux-команд из видео: скопировал ссылку на RuTube, написал запрос «напиши все Linux-команды, о которых идёт речь в этом видео» — и получил полный список с пояснениями и даже с временными метками. Поэтому предпочитаю российские нейросети — GigaChat и Яндекс Алису.
Что для вас является главным критерием успешности такой системы: чтобы ребёнок полюбил читать, чтобы улучшилась успеваемость, чтобы он чувствовал себя менее зависимым от помощи взрослого, или что-то ещё?
Главный критерий — достижение самостоятельности. Это официальная цель социальной политики в отношении людей с ограничениями жизнедеятельности. Если мы можем сделать так, чтобы человек с ограничениями мог самостоятельно делать всё то же самое, что и другие, то между ним и всеми остальными не будет принципиальной разницы. Максимум — он будет делать то же самое несколько другими способами.