
Несколько месяцев назад прошла информация о том, что Яндекс Образование запускает бесплатные образовательные инструменты на основе модели семейства YandexGPT, которые помогут учителям и преподавателям колледжей и вузов готовить обучающие материалы, быстрее оценивать знания студентов и проверять, использовали ли они нейросети при написании работ. Это, прежде всего, два ИИ-инструмента Нейроквизы и Нейродетектор. Дидактор подверг оба инструмента тщательной проверке и вынужден подвести печальные итоги.
Нейроквизы
По заявлению Яндекса инструмент «Нейроквизы» позволяет создавать проверочные тесты за несколько минут. Достаточно загрузить на платформу учебные материалы, и нейросеть сгенерирует вопросы и варианты ответов, включая верные и неверные.
Инструмент полностью бесплатен. Есть ограничения по времени. В течение суток вы можете провести 20 генераций. Нейросеть должна предложить до 15 вопросов с четырьмя вариантами ответов для каждого.
В появившемся окне вы должны ввести текст до 10 000 символов. В принципе это немало. Но, к сожалению, в результате генерации вопросов появляется мало. К примеру, на введённый текст по теме Чистые вещества и смеси (по ссылке вы можете увидеть результат) объёмом 8139 символов я получил всего лишь 4 вопроса из обещанных 15-ти. Порой дело не только в качестве текста. К примеру я ввёл конспект урока на эту же тему по учебнику для 7 класса Химия. Вводный курс под редакцией О.С. Габриеляна – М., Дрофа, 2006. В конспекте для проверки знаний были 15 вопросов для учащихся. Но нейросеть на них слабо отреагировала. И в итоге сгенерировала всего лишь 5 вопросов.
После публикации вы можете отправить ссылку обучаемым. Вы можете так же загрузить на компьютер тест и распечатать его.
Есть несколько казусов и в редактировании полученного теста. В ходе редактирования нельзя добавлять вопросы. Можно только изменять их и проверить правильный ответ.
Нельзя получить в ходе тестирования обратную связь. Хотя напрашивается интеграция с Яндекс. Формами. И тогда можно было бы получать данные о работе конкретных учащихся.
Другие варианты генерации теста по заявленной теме или по загруженному документу Нейроквиз не предусматривает.
Нейродетектор
Нейродетектор помогает выяснить степень участия в написании эссе или выполнении задания. Вы загружаете текст объёмом до 3500 символов и можете узнать, с какой вероятностью нейросеть участвовала в его написании.
После ввода вами текста Нейродетектор выдаёт его уникальность в процентах. Правда, совершенно непонятны его выводы, чем руководствуется в данном случае программа. Не указаны встречающиеся повторы из других источников. После нескольких повторов одного и того же текста мы получаем разные данные.
К примеру я ввёл текст произведения А.С. Пушкина Сказка о мертвой царевне и о семи богатырях три раза.
В итоге получил три разных результата: 98%, 87%, 86%.
С прозой я таже получил разные результаты.
Безусловно, с вводом текста из научных статей показатели уникальности гораздо ниже. Но, повторюсь, непонятно, чем руководствуется Нейродетектор представляя такие данные.
Конечно, печально, что Яндекс представил такие посредственные продукты. Имея в арсенале такие хорошие ИИ-инструменты, как нейросеть Алиса, генератор изображений и коротких видео Шедеврум, хорошо доработанный сервис по созданию видеоконференций Яндекс. Телемост, — компания должна отвечать за качество своих дальнейших цифровых продуктов и поддерживать свой авторитет.