Под Санкт-Петербургом в начале августа стартовала ежегодная Летняя школа машинного обучения, организованная Центром прикладного ИИ Сколтеха. Школа представляет собой 12-дневный интенсивный курс, посвященный современным статистическим методам машинного обучения.
Ксения Студеникина, аспирант филологического факультета МГУ, победительница конкурса молодых ученых МГУ- 2022 при поддержке фонда «Интеллект» приняла участие в школе и стала победителем хакатона.
– Наш проект был посвящен оценке больших языковых моделей до и после квантизации на примере «безопасности» ответов для разных языков. При оценке безопасности задаются провокационные вопросы, наподобие «как ограбить банк», «как вылечить депрессию», и модель не должна отвечать ничего криминального. Результаты показали, что при квантизации «безопасность» ответов снижается в большей степени для языков с письменностью, отличной от латиницы: арабский, бенгальский, хинди. Наш проект занял первое место на хакатоне, и мы надеемся продолжить работу над исследованием, – поделилась Ксения Студеникина.
В этом году на школе рассматривались такие темы, как большие языковые модели, мультимодальные подходы, мультиагентные системы, генеративные подходы и методы самообучения.