Искусственный интеллект озвучивает более оригинальные научные идеи, чем ведущие ученые
Большая языковая модель (LLM) и искусственный интеллект способны выдавать научно-исследовательские идеи даже более уникальные и прорывные, чем самые выдающиеся ученые.
До сих пор существует обывательское мнение, что чат-боты лишь обрабатывают огромные массивы информации и выдают ответ на запрос пользователя, то есть особой оригинальности в ответах нейросети нет. Однако, международная группа ученых выяснила, что ИИ способен генерировать исследовательские идеи, даже более нестандартные, чем выдают высококвалифицированные учёные.
В исследовании участвовали 49 ученых, которые занимаются обработкой естественного языка, для написания новых идей по семи темам данной области. Специалисты написали идеи по 7 темам НЛП, в то время как модель LLM, обученная исследователями, сгенерировала идеи по тем же 7 темам. Исследование выплачивало 300 долларов США за каждую идею плюс бонус в размере 1000 долларов пяти лучшим человеческим идеям в попытке стимулировать людей создавать законные, простые для понимания и исполнения идеи, сообщает newatlas.com.
В финале исследования была использована степень магистра права для стандартизации стилей написания каждой представленной работы с сохранением исходного содержания, чтобы таким образом уравнять шансы и сделать исследование максимально «слепым».
Потом все присланные работы изучили 79 привлечённых аналитиков, которые вслепую оценили все исследовательские идеи. Ревизоры подготовили 298 рецензий, предоставив каждой идее от двух до четырёх независимых отзывов. В итоге получилось, что идеи, сгенерированные ИИ, получили более высокие оценки по критериям новизны и увлекательности по сравнению с идеями людей. Однако по критерию осуществимости идеи ИИ оказались немного ниже, а по эффективности — немного выше, чем идеи людей, хотя эти различия не были существенно значимыми.
Также научная работа показала определенные проблемы с разнообразием идей у нейросетей. При чётком указании не повторяться, чат-боты быстро про это забывали и не смогли последовательно проверять и оценивать идеи. Кроме того, это исследование выявило определённые ограничения в методологии. Оценка «оригинальности» идеи, даже группой экспертов, остаётся субъективной, поэтому специалисты хотят организовать более комплексное исследование, в котором идеи, генерируемые как ИИ, так и людьми, будут полностью оформлены в проекты, что даст возможность более глубоко изучить их влияние в реальных сценариях.
Фото: Kandinsky
мероприятий