AI 究竟有沒有用？顧問巨頭BCG做了個內測，工作效率「大幅提升」 ！

作者：常嘉亦

來源：硬AI

圖片來源：由無界AI生成

AI到底有沒有用？這是在過去半年的生成式AI浪潮裡，人們拋出最多的疑問。

9月18日，哈佛大學、麻省理工學院學者和波士頓諮商（BCG）共同進行的一項研究給了答案：答案是肯定的，AI能讓打工人效率、品質雙雙大增！

先說結論，BCG的測試結果表明，在18項不同的任務中，使用ChatGPT的諮詢顧問的表現，遠遠優於不使用ChatGPT的諮詢顧問。

**平均來看，與未使用人工智慧的顧問顧問相比，使用人工智慧的顧問平均多完成12.2%的任務，完成任務的速度快25.1%，成果品質高40%。 **

01顧問顧問「效率飛躍」

實驗過程是這樣的：

首先，讓BCG團隊的人類諮詢顧問，圍繞著虛構的鞋履製造商設置各種任務。

任務包含創意任務（針對服務不足的市場或運動，提出至少10個新鞋的想法），分析任務（根據受眾對鞋履市場進行細分），寫作和營銷任務（針對某個產品起草營銷文案） ，以及說服力任務（寫一份備忘錄，提醒員工為什麼本公司產品優於競爭對手）。

值得一提的是，雖然這家公司是虛構的，但任務場景是BCG顧問顧問的真實工作場景。研究團隊也特別向某鞋履品牌主管進行了核實，確保這些任務是公司在日常營運中會碰到的真實工作。

在設定好任務之後，研究者找來了幾百位BBG諮詢顧問，隨機選出一部分諮詢顧問，讓他們使用GPT-4工作。

結果，**使用了AI的諮詢顧問普遍表現好得多。他們完成任務耗時更短，在限定時間內完成的任務更多，研究者也找來了人類和AI為這些諮詢顧問的工作成果打分，結果二者都認為，使用了AI的諮詢顧問，工作成果更出色。 **

研究者也注意到一個有趣的現象：**那些技能水準最低的諮詢顧問，透過使用AI，績效表現的提升幅度也最大，高達43%。而最優秀的諮詢顧問得到的提升幅度很小。 **

研究者指出，這一點可能會對職場帶來深遠影響：

就像過去礦工挖石頭的能力是好是壞很重要……但蒸汽鏟被發明出來以後，挖掘能力的差異不再重要。

AI的影響還沒有達到這種程度，但它無疑將推動工作能力的平均化。

02過度依賴AI的壞處

但故事還不只這些。

研究團隊和BCG也設計了另一個任務。這個任務是從BCG的面試題中精挑細選出來的一道超難商業案例題，且經過精確修改，可以讓AI得出一個**「讓人信服的錯誤答案」。 **

研究者說，他們的目標**是設計一個人類能出色勝任，但AI如果不經過仔細引導就無法答對的任務。 **

這個任務非常複雜，論文中沒有給出具體的細節，只列出了步驟：

針對一家虛構企業，參與者必須結合研究者給予的訪談資料細節搜尋數據，然後再結合訪談內容和數據，分析公司的管道表現，進一步為公司CEO提供資訊和建議，以確定哪一個管道成長潛力最大。

下一步再結合訪談內容和財務數據，對公司旗下的品牌績效進行分析，尋找最具成長潛力的品牌。

對於這項任務，研究者主要考察答案的準確性。

結果，使用AI和不用AI的諮詢顧問，表現差距極大，前者的正確率僅有60%，而人工完成任務的員工正確率則高達84.5%。

研究者寫道：

在AI能力邊界之外，具有高人力資本的人類在完成他們的工作時表現始終優於AI。

研究者認為，**生成式AI完成任務的能力，有一個「鋸齒狀邊界」。 **

在邊界內的任務，它可以非常完美地勝任，但在邊界外的任務，表現則很差勁。而且，由於生成式AI的工作原理，這個邊界是看不見的，只有非常熟悉AI的人才能感知到。

例如，寫一首十四行詩和一首恰好50個字的詩，對AI來說似乎都是信手拈來的任務，但由於ChatGPT使用token而不是單字來工作，所以AI非常擅長寫14行詩，但「寫50個字的詩」就是邊界外、AI做不到的任務──**ChatGPT寫出來的詩總是多於或少於50個字。 **

這就是所謂的鋸齒狀邊界，ChatGPT的能力範圍並不是一條平滑的線，以人類的邏輯來看難度相近的任務，對AI來說卻是另一回事。

如果用ChatGPT Code Interpreter製圖，這個鋸齒狀邊界大概長這樣。

更進一步，研究者也強調，實驗結果表明，過度依賴AI反而會適得其反。

作者引用另一項針對企業HR的研究指出，相較於使用低品質AI或不使用AI的招募人員，使用高品質AI的HR，會變得懶惰、粗心，對自己的判斷也沒那麼有信心，他們錯過了一些優質人才，做出了更糟糕的決定。而這狀況，在BCG的實驗中也出現了。

所以，當AI變得非常優秀時，人類就變會得更懶惰，讓AI接管一切，而不是把它當成工具來使用。哈佛商學院教授Fabrizio Dell'Acqua把這一現象稱為“在方向盤上睡著了”，認為這會損害人類的學習、技能發展和生產力。

03「未來已來」

研究者總結說，無論在哲學和技術上對AI的本質和未來存在怎樣的爭論，AI實際上已經在顛覆人類的生產生活方式，就在此時此刻——這並不是一個需要未來n年巨額投資才能落地的“大餅”，它已經觸手可及，每個人的手機、電腦都可以使用。

**這些BCG諮詢顧問，這些現實世界裡的精英卷王，所使用的工具也只是「樸實無華」的ChatGPT，並沒有什麼特別的API或獨家數據——與我們別無二致。 **

技術變革，正在以悄無聲息的方式進行，隨著更強大的LLM誕生，鋸齒形的邊界仍在不斷延伸，人類無疑將面對一個更複雜的世界。

在這個充滿變革的時代中，理解、掌控AI，學會如何與AI協作，總歸是件有意義的事。