Искусственный интеллект озвучивает более оригинальные научные идеи, чем ведущие ученые
Большая языковая модель (LLM) и искусственный интеллект способны выдавать научно-исследовательские идеи даже более уникальные и прорывные, чем самые выдающиеся ученые.
До сих пор существует обывательское мнение, что чат-боты лишь обрабатывают огромные массивы информации и выдают ответ на запрос пользователя, то есть особой оригинальности в ответах нейросети нет. Однако, международная группа ученых выяснила, что ИИ способен генерировать исследовательские идеи даже более нестандартные, чем выдают высококвалифицированные ученые.
В исследовании участвовали 49 ученых, которые занимаются обработкой естественного языка. Специалисты написали идеи по семи темам НЛП, в то время как модель LLM, обученная исследователями, сгенерировала идеи по тем же семи темам. Исследование выплачивало $300 за каждую идею плюс бонус в размере $1000 пяти лучшим человеческим идеям в попытке стимулировать людей создавать законные, простые для понимания и исполнения идеи, сообщает newatlas.com.
В финале исследования была использована степень магистра права для стандартизации стилей написания каждой представленной работы с сохранением исходного содержания, чтобы таким образом уравнять шансы и сделать исследование максимально «слепым».
Потом все присланные работы изучили 79 привлеченных аналитиков, которые вслепую оценили все исследовательские идеи. Ревизоры подготовили 298 рецензий, предоставив каждой идее от двух до четырех независимых отзывов. В итоге получилось, что идеи, сгенерированные ИИ, получили более высокие оценки по критериям новизны и увлекательности по сравнению с идеями людей. Однако по критерию осуществимости идеи ИИ оказались немного ниже, а по эффективности — немного выше, чем идеи людей, хотя эти различия не были существенно значимыми.
Также научная работа показала определенные проблемы с разнообразием идей у нейросетей. При четком указании не повторяться, чат-боты быстро про это забывали и не могли последовательно проверять и оценивать идеи. Кроме того, это исследование выявило определенные ограничения в методологии. Оценка «оригинальности» идеи, даже группой экспертов, остается субъективной, поэтому специалисты хотят организовать более комплексное исследование, в котором идеи, генерируемые как ИИ, так и людьми, будут полностью оформлены в проекты. Это даст возможность более глубоко изучить их влияние в реальных сценариях.
Фото: Kandinsky
мероприятий