ИИ-ассистент для Moodle: генерация тестов и проверка ответов

Встроили ИИ-ассистента в Moodle, которая у клиента уже была. Плагин собирает тесты из учебных материалов и проверяет ответы слушателей. Разработка заняла полтора месяца.

Клиент

Учебный центр крупной инфраструктурной компании. Обучает сотрудников по внутренним регламентам и техническим документам. Курсы, тесты и журнал оценок уже жили в Moodle.

Проблема

Материалы курсов — регламенты и инструкции, часть из них сканы. Тесты по ним преподаватели составляли вручную, около часа на тест, открытые ответы тоже проверяли сами. Слушатель, который не набрал проходной балл, шёл на пересдачу целиком.

Менять Moodle на другую платформу заказчик не собирался. Преподаватели и слушатели уже работали в ней, курсы и оценки лежали там же. Поэтому задача звучала так: добавить ИИ в существующую систему, чтобы люди не уходили из привычного интерфейса.

Решение

Мы сделали ИИ-ассистента под систему, которая у клиента уже есть. Он состоит из двух частей. Плагин для Moodle — это всё, что видят люди: страницы администратора, методиста, преподавателя и слушателя. Серверная часть разбирает документы, строит базу знаний и общается с языковой моделью. Плагин отправляет ей задания и забирает результат, сам ИИ он не запускает.

Такое устройство не привязано к Moodle. Серверная часть с базой знаний и моделями остаётся той же, меняется только модуль, который встраивается в интерфейс. Так же ИИ-ассистента можно подключить к другой системе обучения, CRM, корпоративному порталу или учётной системе, если у неё есть API или возможность ставить расширения.

Как выглядит работа преподавателя:

  1. Загружает PDF и DOCX или выбирает материалы уже существующего курса Moodle. Сканы система

распознаёт сама.

  1. Указывает, сколько нужно вопросов и в какой пропорции: с одним ответом, с несколькими,

открытые.

  1. Получает черновик теста. У каждого вопроса есть цитата из документа, на которой он построен,

поэтому проверить вопрос можно, не открывая исходник.

  1. Методист правит, заменяет или перегенерирует отдельные вопросы и утверждает тест.
  2. Плагин публикует тест в курс Moodle. Оценки попадают в обычный журнал оценок.
Схема: плагин в Moodle или модуль для другой системы, общая серверная часть и языковая модель

Что умеет

Экран слушателя: оценка ниже целевой, доступен ИИ-навигатор для разбора ошибок
Диалог с ИИ-навигатором: попытка 1 из 3 и кнопка «Пропустить вопрос», текст ответа скрыт

Технологии

1

LMS

Так называют систему управления обучением: в ней лежат курсы, тесты и оценки. Moodle — одна из самых распространённых LMS, у неё открытый код, и её можно дописывать плагинами, не трогая ядро. Наш плагин работает с Moodle 4.1 и новее. Если в вашей Moodle не хватает функции, её можно добавить так же: отдельным плагином. Если LMS нужна с нуля, смотрите разработку LMS.

2

Языковые модели

Модели семейства Qwen у российского облачного провайдера Cloud.ru. Модель с рассуждением генерирует вопросы и проверяет ответы, быстрая решает служебные задачи. Провайдера и модели администратор меняет в настройках плагина, код для этого трогать не нужно.

3

База знаний

Документы режутся на смысловые фрагменты и индексируются для поиска по смыслу (RAG — так это называют у всех подрядчиков). Распознавание сканов работает на сервере, без внешних сервисов.

4

Серверная часть

Python и Django, фоновые очереди для долгих задач: распознавание 500-страничного документа не тормозит диалог слушателя с ИИ.

Как заказчик принимал систему

Методисты заказчика тестировали платформу на своих курсах прямо по ходу разработки, на тестовом стенде, и вели протокол: что проверяли, что ожидали, что получилось. Первый список, в начале июня, содержал больше 25 замечаний, и большая часть касалась качества вопросов:

  • задали пропорцию 70/30, а получили 8 закрытых вопросов и 2 открытых;
  • при генерации из нескольких документов не было видно, из какого взят вопрос;
  • неверные варианты ответа иногда можно было принять за верные, а некоторые варианты почти

повторяли друг друга;

  • в вопросах с одним ответом правильный всегда стоял первым;
  • открытые ответы оставались в статусе «Требуется оценивание», и проверка требовала дословного

совпадения с эталоном;

  • навигатор начислял баллы за рассуждения не по теме.

Правильный ответ первым — типичная привычка языковых моделей, и такие вещи видны только на живых тестах. Мы перевели генерацию на модель с рассуждением и разбирали каждое замечание по одной схеме: воспроизвести на стенде, найти причину, исправить, проверить на том же материале. Доли типов теперь считает код, а не модель. Варианты ответа перемешиваются. Каждый вопрос привязан к фрагменту документа. Отдельная модель-судья отбраковывает вопросы, которых нет в материале. Почему без такой проверки на живых данных ИИ-проекты застревают на стадии пилота, мы разбирали в статье о пилотах, которые не доходят до продакшена.

Во втором раунде, 16–18 июня, методисты проверяли уже свои гипотезы. Пропорции 70/30 и 50/50 соблюдались. Ответ синонимами с сохранением смысла засчитывался. Появилась надпись «ИИ проверяет ответы…», чтобы слушатель видел, что система работает, а не зависла.

Часть доработок предложили сами методисты:

  • кнопка «Пропустить вопрос»: слушатель, который застрял на трудном вопросе навигатора, переходит

к другой теме;

  • эталонный ответ, которого навигатор добивается от слушателя, виден преподавателю. Методисты

попросили об этом заранее: слушатели будут жаловаться, что ИИ не принимает ответ, и преподавателю нужно видеть, кто прав, а при необходимости оценить вручную;

  • блок «Что улучшить» с темами для повторения показывается и тем, кто тест сдал.
Этапы проекта: старт в мае, замечания методистов в июне, готовность в июле, итоговый тест в августе

Результат

Итоговый тест перед подписанием акта заказчик провёл 6–7 августа. Слушатель видит итог попытки с баллом, подробный разбор неверных ответов со ссылкой на материал для повторения и рекомендации, даже если порог пройден. Если тест не сдан, ему предлагают навигатор и дополнительные попытки с новыми вопросами. С лета 2026 года система работает в промышленной эксплуатации. Черновик теста с вычиткой методистом теперь занимает около 10 минут вместо часа на составление вручную.

В итоговом тесте нашлось и то, что ещё нужно было доделать. В одном тесте два вопроса совпали по смыслу. Одна сессия навигатора повисла в статусе «В процессе». Подсказка ссылалась на раздел документа, но не называла сам документ. Отсюда граница решения: ИИ собирает черновик теста, но методист вычитывает его перед публикацией. Заказчик пришёл к тому же выводу и закрепил правило: повторяющийся вопрос заменяется до публикации.

Заказчик получил исходный код и исключительные права на систему, руководства для пользователей и администратора, инструкцию по развёртыванию. Развивать платформу он может сам или с нами.

Рекомендации после теста: число верных и ошибочных ответов, темы для повторения скрыты

Сколько стоит такой проект

ИИ-ассистент для вашей системы обучения обходится в 200–400 тысяч рублей, разработка занимает около полутора месяцев. Нижняя граница — генерация тестов по документам и публикация их в курс. Ближе к верхней нас выводят:

  • проверка открытых ответов и режим второго шанса: это отдельный диалог с моделью, его дольше

всего доводить до качества, которое примет методист;

  • сканы вместо текстовых документов и много аббревиатур: нужны распознавание и глоссарий;
  • генерация курсов и презентаций;
  • журнал решений ИИ и отчёты, если оценки должны выдерживать проверку.

Отдельно оплачивается работа языковой модели. Сумма зависит от того, сколько тестов и диалогов проходит через систему в месяц. Из чего ещё складывается цена, мы разбирали в статье «Сколько стоит разработка ИИ-ассистента».

Какие ещё задачи обучения мы закрываем с помощью ИИ, смотрите на странице «ИИ в образовании».

Обсудим вашу задачу

Расскажите, в какой системе вы работаете и какую рутину хотите отдать ИИ: составление тестов, проверку ответов, поиск по документам, обработку заявок. Мы предложим, как встроить ИИ-ассистента в вашу систему, и назовём срок и вилку стоимости.

Похожие кейсы

ЯкЯк - система речевой аналитики
ЯКЯК

ИИ-сервис речевой аналитики

Запишитесь на бесплатный аудит

Покажем, что в вашем бизнесе можно автоматизировать уже в этом месяце и сколько это сэкономит.

Перезвоним в течение 2 часов в рабочее время

Бесплатно. Без обязательств. Подписываем NDA по запросу.

Если у вас нет времени ждать — можете связаться с нами в мессенджерах

Max мессенджерTelegram icon