Полезен ли ИИ? Это самый распространенный вопрос, который люди поднимали во время волны генеративного ИИ за последние шесть месяцев.
18 сентября исследование, проведенное совместно учеными из Гарвардского университета, Массачусетского технологического института и Бостонской консалтинговой группы (BCG), дало ответ: ответ — да, ИИ может значительно повысить как эффективность, так и качество работников!
Давайте сначала поговорим о выводе: результаты тестов BCG показывают, что в 18 различных задачах эффективность консультантов, использующих ChatGPT, намного выше, чем у консультантов, которые не используют ChatGPT.
**В среднем по сравнению с консультантами, не использующими искусственный интеллект, консультанты, использующие искусственный интеллект, выполняют в среднем на 12,2% больше задач, выполняют задачи на 25,1% быстрее и достигают на 40% более качественных результатов. **
01 Консультант «Скачок эффективности»
Экспериментальный процесс выглядит следующим образом:
Во-первых, пусть команда консультантов BCG поставит различные задачи перед вымышленным производителем обуви.
Задания включают в себя творческие задачи (придумать как минимум 10 новых идей обуви для недостаточно обслуживаемых рынков или спорта), аналитические задачи (сегментировать обувной рынок на основе аудитории), письменные и маркетинговые задачи (черновик маркетингового текста продукта) и убедительную задачу. (напишите памятку, напоминая сотрудникам, почему продукт компании лучше, чем у конкурентов).
Стоит отметить, что хотя эта компания и вымышленная, сценарии задач — это реальные сценарии работы консультантов BCG. Исследовательская группа также специально проверила руководителей обувного бренда, чтобы убедиться, что эти задачи являются реальными задачами, с которыми компания может столкнуться в повседневной деятельности.
Поставив задачу, исследователи нашли сотни консультантов BBG, случайным образом выбрали некоторых консультантов и попросили их использовать GPT-4 для работы.
В результате консультанты, использующие ИИ, в целом работали намного лучше. Им потребовалось меньше времени для выполнения задач и они выполнили больше задач за ограниченное время.Исследователи также попросили людей и ИИ оценить результаты работы этих консультантов.Результаты показали, что оба они считали, что консультанты, использующие ИИ, работали лучше.Результаты лучше. **
Исследователи также заметили интересный феномен: **У консультантов с самым низким уровнем квалификации также наблюдалось наибольшее улучшение производительности при использовании ИИ — до 43%. С другой стороны, лучшие консультанты получают очень небольшое повышение по службе. **
Исследователи отмечают, что это может иметь далеко идущие последствия для рабочих мест:
Как и в прошлом, было важно, хороша или плоха способность шахтера выкапывать камни... но после изобретения парового экскаватора разница в способностях рытья больше не имела значения.
Влияние ИИ еще не достигло такого уровня, но оно, несомненно, будет способствовать выравниванию трудовых возможностей.
02 Недостатки чрезмерной зависимости от ИИ
Но это еще не все.
Исследовательская группа и BCG также разработали еще одну задачу. Эта задача представляет собой сверхсложный вопрос для бизнес-кейса, тщательно выбранный из вопросов интервью BCG, и был точно изменен, чтобы позволить ИИ дать «убедительно неправильный ответ». **
Исследователи говорят, что их цель — разработать задачу, с которой люди смогут справиться, но на которую ИИ не сможет ответить правильно без тщательного руководства. **
Эта задача очень сложна, и в статье не приводятся конкретные детали, перечислены только этапы:
В случае с вымышленной компанией участники должны искать данные на основе деталей материалов интервью, предоставленных исследователем, а затем объединять содержание интервью и данные для анализа эффективности каналов связи компании, а также предоставлять информацию и предложения генеральному директору компании, чтобы определить какой канал имеет потенциал роста максимум.
Следующий шаг — объединить содержание интервью и финансовые данные для анализа эффективности бренда компании и поиска брендов с наибольшим потенциалом роста.
При выполнении этой задачи исследователи в основном смотрели на точность ответов.
В результате разрыв в производительности между консультантами, использующими ИИ, и теми, кто не использует ИИ, огромен: точность первых составляет всего 60%, а точность сотрудников, выполняющих задачи вручную, достигает 84,5%.
Исследователи написали:
За пределами возможностей ИИ люди с высоким человеческим капиталом постоянно превосходят ИИ в выполнении своей работы.
Исследователи полагают, что существует «неровная граница» в способности генеративного ИИ выполнять задачи. **
Он отлично справляется с задачами внутри границ, но плохо справляется с задачами за их пределами. Более того, из-за особенностей работы генеративного ИИ эта граница невидима и может быть воспринята только теми, кто хорошо знаком с ИИ.
Например, написание сонета и стихотворения, состоящего ровно из 50 слов, может показаться легкой задачей для ИИ, но поскольку ChatGPT работает с использованием токенов, а не слов, ИИ очень хорошо пишет стихотворения из 14 строк. стихотворение из 50 слов» — это задача, выходящая за границы и не подлежащая выполнению ИИ — стихи, написанные **ChatGPT, всегда состоят из более или менее 50 слов. **
Это так называемая зубчатая граница. Объем возможностей ChatGPT не является плавной линией. Задачи аналогичной сложности, основанные на человеческой логике, — другое дело для ИИ.
Если вы используете интерпретатор кода ChatGPT для рисования карты, зубчатая граница будет выглядеть следующим образом.
Кроме того, исследователи также подчеркнули, что результаты экспериментов показывают, что чрезмерная зависимость от ИИ будет контрпродуктивной.
Ссылаясь на другое исследование корпоративного HR, автор отметил, что по сравнению с рекрутерами, которые используют некачественный ИИ или не используют ИИ, HR, использующие высококачественный ИИ, станут ленивыми, небрежными и менее уверенными в своих суждениях. выбрал некоторые качественные таланты и принял худшие решения. Такая ситуация возникала и в экспериментах BCG.
Итак, когда ИИ станет очень хорошим, люди станут более ленивыми и позволят ИИ взять верх вместо того, чтобы использовать его в качестве инструмента. Фабрицио Делл'Аква, профессор Гарвардской школы бизнеса, называет это явление «засыпанием за рулем», утверждая, что оно вредит обучению человека, развитию навыков и производительности.
03「Будущее здесь」
Исследователи пришли к выводу, что какие бы философские и технические дебаты ни велись о природе и будущем ИИ, в настоящий момент ИИ на самом деле подрывает человеческое производство и образ жизни — это не такая уж огромная сумма денег, на которую уйдут n лет. «большой пирог», требующий инвестиций, уже доступен и может использоваться каждым мобильным телефоном и компьютером.
**Инструменты, используемые этими консультантами BCG, элитными мастерами тестирования в реальном мире, представляют собой просто «простой» ChatGPT, без какого-либо специального API или эксклюзивных данных — ничем не отличающийся от нашего. **
Технологические изменения происходят спокойно. С появлением более мощных программ LLM зигзагообразные границы все еще расширяются. Человечество, несомненно, столкнется с более сложным миром.
В эту эпоху перемен всегда важно понимать и контролировать ИИ, а также учиться сотрудничать с ИИ.
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
Полезен ли ИИ? Консалтинговый гигант BCG провел внутреннее тестирование, и эффективность работы «значительно улучшилась»!
Автор: Чан Цзяи
Источник: Жесткий ИИ
Полезен ли ИИ? Это самый распространенный вопрос, который люди поднимали во время волны генеративного ИИ за последние шесть месяцев.
18 сентября исследование, проведенное совместно учеными из Гарвардского университета, Массачусетского технологического института и Бостонской консалтинговой группы (BCG), дало ответ: ответ — да, ИИ может значительно повысить как эффективность, так и качество работников!
Давайте сначала поговорим о выводе: результаты тестов BCG показывают, что в 18 различных задачах эффективность консультантов, использующих ChatGPT, намного выше, чем у консультантов, которые не используют ChatGPT.
**В среднем по сравнению с консультантами, не использующими искусственный интеллект, консультанты, использующие искусственный интеллект, выполняют в среднем на 12,2% больше задач, выполняют задачи на 25,1% быстрее и достигают на 40% более качественных результатов. **
01 Консультант «Скачок эффективности»
Во-первых, пусть команда консультантов BCG поставит различные задачи перед вымышленным производителем обуви.
Задания включают в себя творческие задачи (придумать как минимум 10 новых идей обуви для недостаточно обслуживаемых рынков или спорта), аналитические задачи (сегментировать обувной рынок на основе аудитории), письменные и маркетинговые задачи (черновик маркетингового текста продукта) и убедительную задачу. (напишите памятку, напоминая сотрудникам, почему продукт компании лучше, чем у конкурентов).
Стоит отметить, что хотя эта компания и вымышленная, сценарии задач — это реальные сценарии работы консультантов BCG. Исследовательская группа также специально проверила руководителей обувного бренда, чтобы убедиться, что эти задачи являются реальными задачами, с которыми компания может столкнуться в повседневной деятельности.
Поставив задачу, исследователи нашли сотни консультантов BBG, случайным образом выбрали некоторых консультантов и попросили их использовать GPT-4 для работы.
В результате консультанты, использующие ИИ, в целом работали намного лучше. Им потребовалось меньше времени для выполнения задач и они выполнили больше задач за ограниченное время.Исследователи также попросили людей и ИИ оценить результаты работы этих консультантов.Результаты показали, что оба они считали, что консультанты, использующие ИИ, работали лучше.Результаты лучше. **
Исследователи также заметили интересный феномен: **У консультантов с самым низким уровнем квалификации также наблюдалось наибольшее улучшение производительности при использовании ИИ — до 43%. С другой стороны, лучшие консультанты получают очень небольшое повышение по службе. **
Как и в прошлом, было важно, хороша или плоха способность шахтера выкапывать камни... но после изобретения парового экскаватора разница в способностях рытья больше не имела значения.
Влияние ИИ еще не достигло такого уровня, но оно, несомненно, будет способствовать выравниванию трудовых возможностей.
02 Недостатки чрезмерной зависимости от ИИ
Но это еще не все.
Исследовательская группа и BCG также разработали еще одну задачу. Эта задача представляет собой сверхсложный вопрос для бизнес-кейса, тщательно выбранный из вопросов интервью BCG, и был точно изменен, чтобы позволить ИИ дать «убедительно неправильный ответ». **
Исследователи говорят, что их цель — разработать задачу, с которой люди смогут справиться, но на которую ИИ не сможет ответить правильно без тщательного руководства. **
В случае с вымышленной компанией участники должны искать данные на основе деталей материалов интервью, предоставленных исследователем, а затем объединять содержание интервью и данные для анализа эффективности каналов связи компании, а также предоставлять информацию и предложения генеральному директору компании, чтобы определить какой канал имеет потенциал роста максимум.
Следующий шаг — объединить содержание интервью и финансовые данные для анализа эффективности бренда компании и поиска брендов с наибольшим потенциалом роста.
В результате разрыв в производительности между консультантами, использующими ИИ, и теми, кто не использует ИИ, огромен: точность первых составляет всего 60%, а точность сотрудников, выполняющих задачи вручную, достигает 84,5%.
Исследователи написали:
За пределами возможностей ИИ люди с высоким человеческим капиталом постоянно превосходят ИИ в выполнении своей работы.
Исследователи полагают, что существует «неровная граница» в способности генеративного ИИ выполнять задачи. **
Он отлично справляется с задачами внутри границ, но плохо справляется с задачами за их пределами. Более того, из-за особенностей работы генеративного ИИ эта граница невидима и может быть воспринята только теми, кто хорошо знаком с ИИ.
Например, написание сонета и стихотворения, состоящего ровно из 50 слов, может показаться легкой задачей для ИИ, но поскольку ChatGPT работает с использованием токенов, а не слов, ИИ очень хорошо пишет стихотворения из 14 строк. стихотворение из 50 слов» — это задача, выходящая за границы и не подлежащая выполнению ИИ — стихи, написанные **ChatGPT, всегда состоят из более или менее 50 слов. **
Это так называемая зубчатая граница. Объем возможностей ChatGPT не является плавной линией. Задачи аналогичной сложности, основанные на человеческой логике, — другое дело для ИИ.
Если вы используете интерпретатор кода ChatGPT для рисования карты, зубчатая граница будет выглядеть следующим образом.
Ссылаясь на другое исследование корпоративного HR, автор отметил, что по сравнению с рекрутерами, которые используют некачественный ИИ или не используют ИИ, HR, использующие высококачественный ИИ, станут ленивыми, небрежными и менее уверенными в своих суждениях. выбрал некоторые качественные таланты и принял худшие решения. Такая ситуация возникала и в экспериментах BCG.
Итак, когда ИИ станет очень хорошим, люди станут более ленивыми и позволят ИИ взять верх вместо того, чтобы использовать его в качестве инструмента. Фабрицио Делл'Аква, профессор Гарвардской школы бизнеса, называет это явление «засыпанием за рулем», утверждая, что оно вредит обучению человека, развитию навыков и производительности.
03「Будущее здесь」
Исследователи пришли к выводу, что какие бы философские и технические дебаты ни велись о природе и будущем ИИ, в настоящий момент ИИ на самом деле подрывает человеческое производство и образ жизни — это не такая уж огромная сумма денег, на которую уйдут n лет. «большой пирог», требующий инвестиций, уже доступен и может использоваться каждым мобильным телефоном и компьютером.
**Инструменты, используемые этими консультантами BCG, элитными мастерами тестирования в реальном мире, представляют собой просто «простой» ChatGPT, без какого-либо специального API или эксклюзивных данных — ничем не отличающийся от нашего. **
Технологические изменения происходят спокойно. С появлением более мощных программ LLM зигзагообразные границы все еще расширяются. Человечество, несомненно, столкнется с более сложным миром.
В эту эпоху перемен всегда важно понимать и контролировать ИИ, а также учиться сотрудничать с ИИ.