Искусственный интеллект успешно протестировали в качестве ассистента на недавней олимпиаде по экономике. Согласно информации от пресс-службы конференции #ВДЕЛЕ, в ходе соревнований две нейросетевые модели параллельно анализировали решения школьников, а при возникновении несоответствий в результатах к процессу привлекалась третья модель. Несмотря на технологичность процесса, финальное слово всегда оставалось за членами жюри, сообщил специалист Фёдоровых изданию Lenta.ru.
Анализируя опыт внедрения, Фёдоровых отметил, что алгоритмы демонстрируют более высокую последовательность в оценках, чем люди. Тем не менее у систем обнаружилась серьезная проблема: систематические ошибки в одной конкретной задаче, которые в итоге спровоцировали волну апелляций со стороны участников.
По словам эксперта, у ИИ есть специфическая черта — склонность к завышению баллов. Если в программную инструкцию не внести требование о повышенной строгости или не прописать решение спорных моментов в пользу проверяющего, модель будет автоматически отдавать преимущество ученику. Фёдоровых подчеркнул, что стандартные апелляции не способны обнаружить подобный перекос в оценках.
В свою очередь Игорь Бедеров, возглавляющий совет по противодействию технологическим правонарушениям при Совете безопасности России, в интервью RT указал на необходимость регулярного контроля ответов ИИ в ходе диалогов. При этом он добавил, что методика такой проверки должна базироваться на оценке рисков.
