Monarch - новый подход к работе с рельефно-графической и текстовой информацией в образовании и профессиональной деятельности для незрячих и слабовидящих людей. Часть 2 (вебинар)

На втором вебинаре о Monarch специалисты «Элита Групп» показали, как исследовать графики функций, рассматривать изображения с подписями Брайлем и передавать рисунки с iPhone на тактильный дисплей. В центре внимания — обновление 2.0 и учебные задачи, в которых важно работать с расположением объектов на плоскости.

Данные вебинара

Материал адресован пользователям Monarch, преподавателям, специалистам по адаптивным технологиям и сотрудникам образовательных и реабилитационных учреждений.

Первая встреча была посвящена устройству Monarch, работе с текстом и базовым возможностям тактильного просмотра: материалы первого вебинара.

Что вы узнаете

Monarch: устройство и управление

Monarch объединяет многострочный дисплей Брайля и тактильную графику. На его рабочей поверхности можно разместить 10 строк по 32 брайлевских символа, а также выводить графики, схемы и другие изображения.

Для ввода используется клавиатура Perkins. Кнопка действия позволяет выбирать объект под пальцем: например, переместить курсор в нужное место текста или перейти к пункту меню.

Кнопки перелистывания переключают экраны, крестообразные элементы управления позволяют перемещаться по тексту и изображению. Кнопки «плюс» и «минус» используются для изменения масштаба графики.

К Monarch можно подключить внешний монитор через HDMI. Это позволяет преподавателю или помощнику видеть на экране материал, с которым работает пользователь тактильного дисплея.

Версия 2.0: основные изменения

Вебинар знакомит с обновлённым просмотром математических графиков, дополнительными возможностями работы с изображениями и режимом экзамена.

Среди рассмотренных изменений:

Отдельно обсуждается работа с файлами через KeyDrive и облачные хранилища: учебные материалы можно подготовить на компьютере и затем открыть на Monarch.

Математика: построение и исследование графиков

Monarch позволяет записывать математические выражения и исследовать графики функций на тактильной поверхности. На вебинаре показаны три примера:

Пользователь может менять масштаб и перемещать область просмотра. Это помогает изучать форму кривой, положение относительно осей и отдельные участки графика.

Несколько функций можно отображать одновременно. Если линии мешают друг другу, ненужные выражения можно отключить и исследовать выбранную функцию отдельно.

Тактильные изображения: PDF, SVG и подписи

На примерах геометрических фигур и изображения Эйфелевой башни спикеры показали увеличение, поворот и перемещение изображения. Если объект не помещается целиком, его можно последовательно рассматривать по частям.

Для PDF доступны девять уровней масштабирования. В показанном примере с квадратом подпись Брайлем сохраняла читаемую форму при увеличении самой фигуры.

Аннотации позволяют связать объект с дополнительной информацией. Например, к региону на карте можно добавить название административного центра или сведения о населении. Описание может озвучиваться или выводиться Брайлем.

Качество исходного материала остаётся важным. Мелкие детали, сложные фоны и перегруженные схемы затрудняют тактильное чтение. Возможность открыть файл ещё не означает, что изображение будет понятно без адаптации.

Режим экзамена

Режим экзамена позволяет ограничивать доступ к приложениям и инструментам на время проверки знаний. Преподаватель может определить, какие возможности останутся доступны ученику.

Такой режим помогает использовать брайлевские и тактильные функции Monarch при выполнении задания, ограничивая доступ к посторонним материалам.

Wing It: рисунки с iPhone и iPad

Wing It передаёт рисунок с экрана iPhone или iPad на Monarch по Bluetooth. Преподаватель рисует на мобильном устройстве, а ученик исследует результат на тактильной поверхности.

Это удобно, когда во время объяснения требуется дополнительная схема, график или пример написания букв. Изображение можно очистить и заменить новым, продолжая работу на уроке.

На вебинаре таким способом передавали простой рисунок и написанное имя.

Вопросы участников: изображения, маршруты и уравнения

Спикеры разобрали, как подготовить карту маршрута, можно ли использовать иллюстрации из PDF и как исследовать корни квадратного уравнения по графику.

Для карты маршрута важно оставить понятную схему пути и необходимые ориентиры. Для иллюстрации — выделить существенные контуры и убрать детали, которые мешают распознаванию пальцами.

График квадратичной функции позволяет исследовать пересечения параболы с осью X. Это помогает понять, есть ли у соответствующего уравнения действительные корни.

Дополнение: знакомство с Dot Pad X

В заключительной части участникам представили Dot Pad X — подключаемый тактильный дисплей.

Monarch работает как самостоятельное устройство с собственными приложениями и клавиатурой. Dot Pad X получает информацию от подключённого смартфона или компьютера; основное управление выполняется на этом внешнем устройстве.

Спикеры поделились первыми примерами работы с iPhone, JAWS и NVDA и отдельно отметили, что понятность графики зависит от подготовки исходного изображения.

Структурированная расшифровка вебинара

Продолжение знакомства с Monarch

Светлана Васильева:

В мае мы провели первую встречу, посвящённую Monarch. Сегодня продолжаем знакомство с устройством и сосредоточимся на новых функциях, математике и тактильных изображениях.

Сначала напомню основные элементы управления. Большую часть Monarch занимает тактильная поверхность. Если мы работаем с текстом Брайля, на ней можно разместить 10 строк по 32 символа.

На устройстве есть клавиатура Perkins и кнопка действия. Чтобы переместить курсор в определённое место текста, нужно поставить туда палец и нажать эту кнопку. Аналогичным образом можно выбирать пункты меню.

Кнопки перелистывания переключают страницы или экраны. Крестообразные элементы управления позволяют перемещаться вверх, вниз, вправо и влево, а при работе с графикой — двигать изображение. По краям расположены кнопки уменьшения и увеличения.

На передней панели находятся кнопки «Назад», «Домой» и «Недавние приложения». Предусмотрены HDMI для подключения монитора, USB и USB-C для зарядки.

Работу с текстом мы подробно показывали на первой встрече. Сегодня основное внимание уделим возможностям, которые обсуждаем в связи с выходом версии 2.0.

Настройка, файлы и новые приложения

Сергей Флейтин:

При первоначальной настройке Monarch теперь можно установить пароль, как на смартфоне или планшете Android. Это относится и к настройке после сброса устройства. Если защита паролем не нужна, этот шаг можно пропустить.

Для работы с облачными файлами используется KeyDrive. Можно подключать Google Drive и OneDrive, открывать материалы из хранилища и сохранять туда результаты работы. Например, подготовить изображение на компьютере, а затем открыть его на Monarch.

Существенно переработан просмотр математических графиков. Можно выбирать кривую и читать соответствующее выражение Брайлем. Появились дополнительные средства звукового сопровождения, тактильные деления и подписи осей.

Ещё одно полезное изменение — поиск в списках элементов для вставки. Раньше длинный список математических символов приходилось последовательно просматривать. Теперь можно ввести название и быстрее найти нужный элемент.

В тактильном просмотре поддерживается SVG. Появилась функция описания изображения с помощью искусственного интеллекта. Она может помочь понять, что находится на тактильной поверхности, хотя доступность этой функции может различаться.

Расширены возможности масштабирования PDF, добавлены фильтры обработки изображения. При подключении внешнего монитора преподаватель или помощник может отдельно видеть исходное изображение.

Доработана работа с документами eBraille. Этот формат позволяет сохранять структуру документа и включать в него различные элементы, в том числе изображения.

Светлана Васильева:

Есть и отдельные учебные приложения. Например, приложение для работы с периодической таблицей: можно просматривать элементы, получать информацию о них и пользоваться поиском.

Сергей Флейтин:

Появляются приложения для тренировки навыков тактильного восприятия: различения линий, текстур и других элементов графики. Есть и интерактивные игры.

Monarch позволяет добавлять новые приложения, поэтому его возможности не ограничиваются первоначальным набором программ.

Запись математических выражений

Алексей Елагин:

Рассмотрим возможности Monarch для изучения математики с помощью Брайля.

На устройстве можно записывать математические выражения. Для этого используются соответствующие брайлевские обозначения. Помимо чтения и записи выражений, Monarch позволяет строить графики на плоскости.

Чтобы получить график, мы задаём функцию: y зависит от x, где x — аргумент, а y — значение функции.

Можно вывести сразу несколько графиков. Но если они накладываются друг на друга и мешают исследованию, лучше отключить лишние и оставить тот, который сейчас нужен.

Пример: синусоида

Алексей Елагин:

Начнём с y = sin(x). Открываем просмотр графика и получаем синусоиду.

На координатных осях отображаются обозначения и деления. Масштаб можно менять кнопками «плюс» и «минус». Также можно перемещать область просмотра вправо и влево.

Синус — периодическая функция. При движении вдоль оси X мы исследуем повторяющиеся участки кривой.

Пример: обратная пропорциональность

Алексей Елагин:

Теперь рассмотрим y = 5/x.

Выбираем выражение и включаем его отображение. Перемещаясь по графику, можно исследовать ветвь в верхней правой части координатной плоскости.

Если сдвинуть область просмотра вверх, нижняя левая часть графика уйдёт за пределы текущего экрана. Это важно учитывать: мы видим выбранную область, а для изучения остальных участков нужно перемещаться по изображению.

Обозначения осей и деления помогают ориентироваться на плоскости.

Пример: изменение амплитуды и периода

Алексей Елагин:

Следующий пример — y = 5 sin(3x).

По сравнению с y = sin(x) колебания становятся выше и располагаются чаще. На тактильном графике можно исследовать эти изменения, перемещая область просмотра и меняя масштаб.

Такой способ позволяет связать запись функции с формой её графика.

Масштабирование изображений и подписи Брайлем

Светлана Васильева:

Перейдём к тактильному просмотру. На первой встрече мы уже рассматривали изображение с несколькими геометрическими фигурами. Теперь возможностей масштабирования PDF стало больше: доступны девять уровней.

Возьмём квадрат с подписью Брайлем. При переходе к уровню, на котором подпись становится читаемой, устройство подаёт звуковой сигнал.

Дальше можно увеличивать сам квадрат, а подпись при этом сохраняет форму брайлевских символов. Это позволяет одновременно работать с увеличенной фигурой и читать её обозначение.

Область просмотра можно перемещать так, чтобы видеть и фигуру, и подпись, либо сосредоточиться на самом изображении.

Аннотации и дополнительная информация

Светлана Васильева:

К элементам изображения можно добавлять описания.

Представим карту России. Для региона можно подготовить дополнительную информацию: например, указать административный центр и население. Затем при исследовании карты пользователь выбирает нужный регион и получает связанное с ним описание.

Обычно описание озвучивается, чтобы не заменять изображение на тактильной поверхности. Но можно настроить вывод текста Брайлем. Это важно, в частности, для пользователей с одновременным нарушением зрения и слуха.

Поворот и подробное изучение изображения

Светлана Васильева:

Теперь рассмотрим изображение Эйфелевой башни.

Изначально башня расположена вертикально, а рабочая поверхность Monarch вытянута горизонтально. Повернём изображение и увеличим его.

По мере увеличения становятся доступны более мелкие детали. В какой-то момент башня перестаёт помещаться целиком, но это не мешает изучению: можно перемещать изображение и последовательно рассматривать его части.

Для быстрого изменения масштаба кнопку можно удерживать.

Алексей Елагин:

Если увеличенное изображение выходит за границы экрана, его можно прокручивать. Так мы получаем доступ к участкам, которые сейчас не помещаются на рабочей поверхности.

SVG и подготовка учебных материалов

Светлана Васильева:

Помимо PDF, поддерживаются файлы SVG.

Например, можно работать со схемой Солнечной системы: сначала познакомиться с общей композицией, затем выбрать конкретный объект и рассмотреть его подробнее. Такой же подход подходит для карты — от общего вида к отдельному региону.

При подготовке к вебинару я рассматривала изображение сталактита и сталагмита. Можно было прочитать подписи и отдельно исследовать каждую часть рисунка.

Это позволяет строить урок так, чтобы ученик сначала понимал общую схему, а затем переходил к деталям.

Режим экзамена

Сергей Флейтин:

Устройство с памятью, приложениями и доступом к дополнительным материалам требует особых настроек при использовании на экзамене.

Для этого предусмотрен режим экзамена. Он позволяет ограничить доступ к приложениям и инструментам, оставив возможности, необходимые для выполнения задания.

Такой режим нужен преподавателям, которые хотят использовать Monarch при проверке знаний и при этом контролировать доступ ученика к посторонней информации.

Рисование через Wing It

Светлана Васильева:

Покажем Wing It. В приложении на iPhone можно что-то нарисовать, и изображение появится на Monarch.

Сейчас на телефоне нарисовали сердечко, и мы получили его на тактильной поверхности.

На уроке это может быть график или схема. Если преподаватель по ходу объяснения решит добавить новый пример, его можно сразу передать ученику. Не обязательно ограничиваться изображениями, подготовленными заранее.

Рисунок можно очистить и заменить другим. Можно также показывать печатные буквы, написание имени или подпись.

Сергей Флейтин:

В этой демонстрации Monarch соединён с iPhone по Bluetooth. Приложение можно установить и на iPad.

Преподаватель рисует на телефоне или планшете, а ученик исследует результат на Monarch.

Светлана Васильева:

Приложение называется Monarch Wing It. Для работы открываем соответствующее приложение на Monarch и устанавливаем соединение с мобильным устройством.

Вопрос: можно ли изучать карту маршрута?

Светлана Васильева:

Если у вас есть подготовленный файл с изображением маршрута, его можно открыть на Monarch и исследовать тактильно. Например, такую схему может подготовить преподаватель по ориентированию.

В этом случае устройство используется для просмотра готового изображения маршрута.

Алексей Елагин:

Карту необходимо максимально упростить. На ней должны остаться дорога, нужные дома или другие ориентиры, места поворотов и сам маршрут.

Избыточные детали и различия, передаваемые только цветом, затруднят понимание такой схемы на тактильной поверхности.

Вопрос: нужно ли адаптировать иллюстрации из PDF?

Вопрос участника:

Если в PDF есть простые изображения, например иллюстрации в детской книге, будут ли они понятны на Monarch или их нужно специально готовить?

Светлана Васильева:

Изображения нужно готовить с учётом тактильного исследования. В обычной картинке может быть много мелких элементов, которые плохо различаются пальцами.

Поэтому важно не только открыть PDF, но и убедиться, что содержание иллюстрации можно понять на ощупь.

В нашем примере с квадратом использовалась подпись square. При увеличении фигуры подпись Брайлем сохраняла читаемую форму. Это полезно для учебных материалов, в которых графика сопровождается брайлевскими обозначениями.

Вопрос: можно ли исследовать корни уравнения по графику?

Вопрос участника:

Можно ли использовать Monarch для построения математических графиков при решении уравнений?

Алексей Елагин:

Например, можно задать квадратичную функцию:

y = ax² + bx + c.

Мы получим параболу. В зависимости от коэффициентов она будет направлена вверх или вниз, смещена, растянута или сжата.

Исследуя график, можно определить, пересекает ли парабола ось X. Если пересечения есть, у соответствующего квадратного уравнения есть действительные корни.

Работа с несколькими областями текста

Светлана Васильева:

Monarch можно использовать и при подключении к компьютеру.

В JAWS есть функция разделения брайлевского вывода. Она позволяет, например, работать с содержимым презентации и заметками докладчика либо сопоставлять два документа — исходный текст и перевод.

При этом можно регулировать, сколько строк отводится каждой области. Многострочный дисплей даёт возможность держать перед собой больше связанной информации.

Первое знакомство с Dot Pad X

Светлана Васильева:

В завершение покажем ещё одно устройство — Dot Pad X.

Оно меньше, легче и тоньше Monarch. Основное отличие в том, что Monarch — самостоятельное устройство с собственными приложениями, а Dot Pad X выводит информацию от подключённого смартфона или компьютера.

Мы подключали его к iPhone и рассматривали иконки. Некоторые узнавались по характерной форме, например телефонная трубка или шестерёнка. Другие было сложнее понять тактильно.

У Dot Pad X есть основная графическая поверхность и отдельная 20-клеточная брайлевская строка внизу. В нашем примере на основной поверхности отображалась иконка телефона, а в нижней строке — её название.

Клавиатуры Perkins у этого устройства нет. Основное управление выполняется на подключённом устройстве.

Алексей Елагин:

При подключении к JAWS мне удалось получить многострочный текст. Графическое изображение в этой проверке я не получил.

Сергей Флейтин:

Для работы с NVDA я использовал специальное дополнение. В нём можно настраивать вывод текста и графики.

Удалось попробовать просмотр веб-страниц. Если фокус программы экранного доступа попадает на графический элемент, можно исследовать его на дисплее.

Но здесь действует то же ограничение: небольшое изображение с большим количеством деталей может оказаться непонятным тактильно.

В устройстве также используются вибрационные сигналы. Например, по количеству вибраций можно определить уровень заряда батареи.

Смотрите также