Российские ученые создали методику для оценки того, насколько большие языковые модели могут понимать мемы и культурные стереотипы. Тестирование показало, что лучшие результаты дали нейросети GPT-4, Claude и LLaMA.
Источник картинки: pxhere
Исследователи из МФТИ разработали подход, позволяющий тестировать способность ИИ интерпретировать культурные мемы и стереотипы, что важно для эффективной работы с пользователями разных культурных общностей. Для этого была создана серия заданий, включающая цитаты из литературы, фразы из фильмов и популярные мемы. В результате, системы GPT-4 продемонстрировали наилучшие результаты, опередив модели Claude и LLaMA, сообщает ТАСС.
Это исследование помогает лучше понять, как ИИ взаимодействует с культурными кодами, что важно для их применения в различных странах.
Ранее ГлавСовет сообщал, что ученые выявили, искусство и творчество положительно влияет на здоровье человека.