Объявлены победители первого цикла конкурса по разработке ИИ-системы для выявления смысловых, логических и фактических ошибок в текстах Up Great ПРО//ЧТЕНИЕ. В номинации «Грамматика.Eng» лучшими стали разработчики DeepPavlov из лаборатории нейронных систем и глубокого обучения МФТИ.
Завершился первый цикл конкурса Up Great ПРО//ЧТЕНИЕ по созданию системы на основе технологий искусственного интеллекта для проверки школьных сочинений. По итогам соревнования 19.12.2020 г. были объявлены победители в 2-х номинациях: «Грамматика» и «Грамматика.Eng», предложившие решения для текстов на русском и английском языках соответственно.
Всего в квалификационном этапе приняли участие более 180 команд, из которых до испытаний были допущены 11 коллективов разработчиков, показавших эффективные решения. В рамках испытаний ИИ-ассистенты проверили по 500 эссе и сочинений ЕГЭ на русском языке и столько же – на английском. После этого автоматизированная платформа сопоставила тексты, проверенные ИИ-ассистентами и реальными педагогами, и выявила наиболее качественные решения.
Победителями были выбраны 6 команд, по 3 в каждой номинации. Научный коллектив из 6 человек «НейроЧтение», в который вошли разработчики DeepPavlov из МФТИ, занялпервое место в номинации «Грамматика.Eng» и получил приз а размере 7 млн рублей. В работе над решением сложной составной задачи по проверке эссе на английском языке члены команды обратились к DeepPavlov Agent. Этот подход позволил объединить множество моделей разного типа и быстро получить комбинированное решение.
Михаил Бурцев, заведующий Лабораторией нейронных систем и глубокого обучения МФТИ, команда «НейроЧтение»: «Мы очень рады, что удалось создать лучшую систему для проверки эссе на английском и занять первое место в номинации по английской грамматике. В этом нам помогла наша библиотека DeepPavlov, на ней был построен оркестратор аннотаторов ошибок и навыков по их исправлению. Высокая скорость обработки сочинения – всего 5-6 секунд – подтвердила, что библиотека готова работать с большими объемами данных в условиях реальной индустриальной нагрузки. И, конечно, командная работа нашей лаборатории и поддержка Физтеха были мощнейшими факторами на пути к победе. Надеюсь, что мы сможем и в дальнейшем принять участие в конкурсе, хотя для преодоления поставленного технологического барьера может понадобиться не один год».
Команда «Наносемантика», тесно сотрудничающая с лабораторией нейросетевых технологий компьютерной лингвистики МФТИ, также показала достойный результат и заняла 3-е место в этой же категории.
Несмотря на то, что в рамках основной задачи конкурса пока ни одна команда не достигла результата, соответствующего уровню педагогов, предполагается, что решения участников будут подготовлены для пилотного внедрения и эксплуатации в 2021-22 гг. в ряде школ в разных регионах России. А участники смогут вновь побороться за призовой фонд конкурса в размере 200 млн рублей на испытаниях второго цикла, запланированных на весну 2021 года.
О конкурсе
Конкурс Up Great ПРО//ЧТЕНИЕ — это междисциплинарный проект на стыке искусственного интеллекта, лингвистики, педагогики и других дисциплин. Соревнование направлено на создание ИИ-ассистента, способного помогать учителям выявлять логические, фактические, стилистические и другие смысловые ошибки в сочинениях школьников на русском и на английском языках.
Up Great ПРО//ЧТЕНИЕ организован РВК, Фондом «Сколково» и АСИ в рамках реализации Национальной технологической инициативы, при поддержке АНО «Школьная лига Роснано» и ДВФУ. За разработку концепции и условий соревнования отвечали специалисты Центра компетенций НТИ «Искусственный интеллект» на базе МФТИ (технический партнер конкурса).
Подробная информация - на официальном сайте конкурса:
https://ai.upgreat.one/participants/leaderboard/
https://ai.upgreat.one/
