В Великобритании растёт использование ИИ для оценки качества научных исследований в университетах

Отчёт, подготовленный под руководством Бристольского университета, впервые показал, как генеративный искусственный интеллект (ГИИ) уже применяется некоторыми университетами для оценки качества исследований. Это может помочь высшим учебным заведениям (ВУЗ) сэкономить огромное количество времени и денег.

Однако отчёт также выявил широко распространённый скептицизм среди учёных и специалистов, работающих в этом секторе, относительно использования ГИИ для этих целей. Подчёркивается необходимость национального надзора и управления.

Система оценки качества исследований в высших учебных заведениях Великобритании известна как Research Excellence Framework (REF). Её результаты влияют на распределение государственного финансирования исследований университетов. В 2021 году общая стоимость REF составила около 471 миллиона фунтов стерлингов, при этом среднее финансирование каждого участвующего ВУЗа составило 3 миллиона фунтов стерлингов.

Ведущий автор Ричард Уотермейер, профессор высшего образования в Бристольском университете, сказал: «ГИИ может изменить правила игры для оценки исследований на национальном уровне, помогая создать более эффективное и справедливое поле для конкуренции. Хотя существует много громкой оппозиции включению ГИИ в REF, наш отчёт показывает, как инструменты ГИИ широко — если пока что тихо — используются, и что ожидания их использования участниками REF высоки».

Основные выводы исследования

Исследование, проведённое в 16 ВУЗах Великобритании, показало, что ГИИ широко используется для подготовки материалов для REF. Однако степень и способы его использования сильно различаются. Некоторые университеты используют инструменты для сбора доказательств влияния своих исследований на мир и для помощи в создании соответствующих историй. В других случаях существуют свидетельства о разработке собственных инструментов для оптимизации процессов REF или использовании ГИИ для рецензирования, оценки и выставления баллов своим исследованиям.

Профессор Уотермейер добавил: «Существует явное различие в том, как ВУЗы могут и могут использовать эти инструменты для конкурентного преимущества в REF. Степень, в которой учреждения могут получить выгоду от этих инструментов, как и ожидалось, связана с их уровнем ресурсов и местным опытом».

Отношение к ГИИ

Исследование также включало опрос почти 400 учёных и сотрудников профессиональных служб. Большинство из них выразили сильное несогласие с использованием инструментов ГИИ для различных аспектов REF2029. Уровень сильной оппозиции варьировался от 54% до 75% респондентов по разным частям процесса REF. Почти четверть (23%) респондентов высказалась за использование инструментов ГИИ для поддержки университетов в разработке тематических исследований воздействия.

Интервью с 16 проректорами университетов показали, что некоторые из них настроены весьма позитивно и считают использование ГИИ неизбежным. Другие выразили сомнения, недоверие и указали на возможные ограничения ИИ.

Рекомендации

Отчёт содержит ряд рекомендаций, включая необходимость того, чтобы все университеты установили и опубликовали политику использования ГИИ для исследовательских целей, охватывающую REF; соответствующий персонал должен пройти полное обучение по ответственному и эффективному использованию инструментов ИИ; и должны быть внедрены соответствующие меры безопасности и управления рисками.

Отчёт также призывает к надёжному национальному надзору, включая отраслевое руководство по использованию для REF29 и всеобъемлющую структуру управления ИИ для REF. Для обеспечения равного доступа к технологиям среди всех ВУЗов рекомендуется разработать общую высококачественную платформу ИИ для REF и сделать её доступной для всех учреждений.

Источник