Как Skyeng использует нейросети, чтобы определять уровень языка студента и строить образовательную траекторию

Самым действенным способом подтверждения уровня английского сегодня является прохождение экзаменов TOEFL или IELTS. Но подготовка к ним — трудоемкий и не всем доступный процесс. На старте занятий с репетитором уровень определяется с помощью длительного тестирования, а детальный разбор отстающих зон английского языка тоже может занять несколько уроков. Решения, которое позволяло бы быстро и достоверно оценить уровень языковой базы студента и сформировать в соответствии с этим уровнем учебный план, на рынке не было.

Skyeng занимается оцифровкой образовательных результатов своих студентов уже 10 лет. Благодаря собственным технологиям распознавания речи компании удалось сделать расшифровку большого количества уроков. На их основе была выстроена система анализа словарного запаса, произношения, грамматических и фонетических конструкций.

Накопленная база знаний и инструментов позволила компании создать AI Avatar (протестировать можно здесь) – это голосовой ассистент на базе нейросетей, к которому студент может обратиться за проверкой уровня своего языка прямо на платформе Skyeng. Диалог между студентом и ассистентом происходит в окне чата с помощью голосовых сообщений. Под капотом у AI Аватара – несколько языковых моделей, включая ChatGPT, за управление ходом диалога отвечает система промптов.

Распознавание голосового сообщения студента и генерация ответной реплики занимает пару секунд, при этом ассистент удерживает контекст беседы и может ссылаться на детали, упомянутые в разговоре ранее. Задача студента – болтать с ассистентом около 15 минут, пока не будут закрыты этапы в 50, 150, 300, 500, 800 использованных в беседе слов.

Ассистент оценивает активный словарный запас пользователя и с помощью элементов предиктивной аналитики предсказывает лексику, грамматику и фонетику, которую может знать студент. При этом AI Avatar анализирует слова по их значению и применению в речи, а не созвучию, потому что различная лексика может использоваться как в простых конструкциях уровня A1–A2, так и в более сложных.

Особенностью решения является распознавание английской речи с учетом акцента носителей русского языка и их ошибок. Это позволяет рекомендательной системе корректнее распознавать речь и уже на ее основе предлагать корректировки.

Также она убирает длительные паузы, распознает созвучные слова (know, no), распознает слова с ошибками в фонетике или грубыми ошибками в грамматике.

Тестирование в Avatar AI прошли более 10 тысяч студентов, точность определения уровня языка студента при длительности разговора более 10 минут составляет 90%. Аналогичное тестирование с преподавателем занимает не менее 2-х часов. Помимо аналитики уровня пользователя, Avatar AI, подобно живому преподавателю, разбирает ошибки в речи и предлагает возможные варианты, как можно выразиться лучше.
Уже две школы используют этот тест для проверки знаний своих студентов и создания персонального образовательного трека ученика.