Недавнее исследование, опубликованное на платформе arXiv, подробно изучает творческий потенциал больших языковых моделей (LLM) и их сравнение с человеческой креативностью. Ученые стремились оценить как индивидуальную, так и коллективную креативность LLM, анализируя их способности генерировать идеи и решать задачи.
LLM, такие как GPT-3.5 от OpenAI и Claude от Anthropic, представляют собой значительный шаг вперед в области искусственного интеллекта. Эти модели используют архитектуры глубокого обучения для генерации текстов, обучаясь на обширных наборах данных. Их применение в таких сферах, как создание контента, обслуживание клиентов и образование, демонстрирует потенциал автоматизации рутинных задач и поддержки творческих процессов.
Тем не менее, исследование показало, что LLM все еще отстают от людей в производстве разнообразных ответов, что критически важно для некоторых творческих областей. Ученые оценили креативность нескольких LLM, включая GPT-3.5, GPT-4 и Claude, в трех областях: решение проблем, дивергентное мышление и креативное письмо. В ходе эксперимента 467 участников выполнили задачи, а результаты LLM были собраны с использованием API OpenAI.
Результаты показали, что в среднем LLM занимали 46-й процентиль по сравнению с человеческими участниками. Однако Claude и GPT-4 продемонстрировали лучшие результаты, попав в 52-й процентиль. В то время как LLM хорошо справлялись с решением проблем, их успехи в креативном письме оставляли желать лучшего, часто не достигая 50-го процентиля.
Интересно, что при генерации нескольких ответов LLM их коллективный выход оказался эквивалентен вкладу группы из 8-10 человек. Это подчеркивает их потенциал как эффективных помощников в креативных процессах, особенно в ситуациях, требующих мозгового штурма.
Исследование имеет важные последствия для отраслей, зависящих от креативности. LLM могут стать ценным инструментом для создателей контента, маркетологов и педагогов, помогая генерировать идеи и решения более эффективно. Однако ограниченное разнообразие их выходов подчеркивает необходимость человеческого контроля для обеспечения широкого спектра идей.
В заключение, это исследование подчеркивает важность сотрудничества между AI и человеком, открывая новые горизонты для креативности и продуктивности. С дальнейшим развитием LLM необходимо продолжать исследовать, как оптимально интегрировать AI в творческие процессы, чтобы максимально использовать их потенциал, сохраняя уникальные человеческие качества.