Ученые разработали набор методик и алгоритмов для проверки на соответствие российскому культурному коду больших языковых моделей на основе искусственного интеллекта.

Такие системы применяют в сервисах типа Chat GPT. Тестовый программный комплекс включает в себя более 14 тыс. вопросов.
С помощью программы, которая сокращенно называется SLAVA, было протестировано 25 отечественных и зарубежных интеллектуальных систем. Большинство из них показало низкие результаты: ни одна не ответила в точности хотя бы на половину вопросов.
Такие модели становятся эффективным средством для поиска информации и получения знаний. Однако в русскоязычном сегменте пользователи часто сталкиваются с некорректными ответами со стороны умных помощников.