На протяжении многих лет считалось, что искусственный интеллект (ИИ) не способен заменить ученых, ведь для этого требуется не просто комбинировать уже существующие знания, а генерировать новые идеи и совершать открытия. Однако, недавние исследования ставят под сомнение это убеждение, показывая, что современные языковые модели могут генерировать идеи, которые в некоторых случаях превосходят по новизне разработки самих ученых.
В ходе эксперимента, проведенного группой исследователей, большая языковая модель сгенерировала идеи по темам в области обработки естественного языка (NLP), и эти идеи оказались более оригинальными и нестандартными, чем предложения специалистов. Более того, результаты показали, что ИИ превосходит человека по новизне мыслей, хотя и сталкивается с рядом ограничений.
Как проводилось исследование
Команда привлекла 49 ученых из различных авторитетных учреждений по всему миру. Эти специалисты, включая кандидатов наук и постдокторантов, занимались разработкой идей по семи темам NLP. За каждую идею участникам выплачивали по $300, а за лучшие работы предусматривались премии в размере $1000.
После того как ученые представили свои концепции, аналогичная задача была поручена и ИИ — большой языковой модели. Чтобы обеспечить объективность, все представленные работы были стилистически выровнены с помощью другой модели, сохранив при этом содержание. Это позволило создать равные условия для всех участников эксперимента.
Идеи, как от ученых, так и от ИИ, оценивались группой из 79 экспертов. Они оценивали оригинальность, новизну, осуществимость и эффективность представленных предложений.
Результаты: ИИ удивляет экспертов
Когда оценки были подведены, результаты оказались неожиданными: языковая модель продемонстрировала более высокие показатели по оригинальности и новизне, чем ученые. ИИ предлагал такие концепции, которые казались более смелыми и нестандартными. Однако в вопросах осуществимости и эффективности предложения машинного интеллекта не сильно отличались от идей, созданных людьми.
Проблемы и ограничения ИИ
Несмотря на впечатляющие результаты, у языковых моделей все же есть свои слабые стороны. Во-первых, их идеи оказались менее разнообразными — модели склонны повторять определенные шаблоны, даже при наличии инструкций избегать этого. Во-вторых, ИИ испытывает трудности в оценке своих собственных результатов, что делает процесс генерации идей менее контролируемым. Также, модели продемонстрировали низкую согласованность при самооценке, что отличается от людей, которые более последовательно оценивают свои идеи.
ИИ — будущее научных разработок?
Исследование показывает, что, несмотря на существующие ограничения, языковые модели уже способны генерировать новые научные идеи, которые порой превосходят разработки человека. Возможно, в будущем ИИ станет мощным инструментом в арсенале ученых, помогая расширять границы науки. Однако остается открытым вопрос: могут ли машины действительно заменить творческий процесс человека или они станут лишь полезным помощником в этом процессе?
