Исследователи ИИ начали проверять своих коллег силами ИИ

Академический мир принимает ИИ по-новому: используя ИИ для рецензирования исследований в области ИИ. Группа исследователей изучила использование генеративного ИИ (например, ChatGPT) в рецензиях на ведущих конференциях по ИИ.

Поводом для исследования послужило растущее использование больших языковых моделей (LLM) и проблемы, связанные с необходимостью отличать написанный человеком текст от сгенерированного ИИ контента. Исследовательская группа сосредоточилась на использовании прилагательных, анализируя как написанные человеком, так и сгенерированные ИИ наборы данных для выявления закономерностей в рецензиях. Анализ выявил небольшое, но заметное увеличение использования LLM в рецензиях, поданных близко к сроку (в течение 3 дней). Это говорит о потенциальной возможности использования ИИ для написания рецензий в последнюю минуту.

Сложность выявления текста, написанного ИИ, подчеркивает необходимость разработки более совершенных методов оценки данных, содержащих контент, созданный ИИ. Хотя прошлые попытки автоматической классификации человеческих и машинных текстов не увенчались успехом (например, недолговечный классификатор AI Text Classifier от OpenAI), новый с использованием прилагательных кажется многообещающим.