一項指標性的隨機對照試驗發現,經驗豐富的開發者使用AI工具後,完成任務速度反而慢了19%,即使他們事前預測能加快24%,事後仍拒絕無AI輔助的開發方式。 針對470份真實的GitHub拉取請求(Pull Request)分析顯示,AI產生的程式碼比人類撰寫的多出約1.7倍的瑕疵,其中安全性漏洞更高出2.74倍。

Create a landscape editorial hero image for this Studio Global article: What does recent research reveal about the productivity, code quality, and industry dependency effects of AI coding tools, including METR's. Article summary: Here is a synthesis of the recent research on all four fronts.. Topic tags: general, general web, user generated. Reference image context from search candidates: Reference image 1: visual subject "Our early 2025 study found the use of AI causes tasks to take 19% longer, with a confidence interval between +2% and +39%. For the subset of the" source context "We are Changing our Developer Productivity Experiment Design - METR" Reference image 2: visual subject "Three questions conceptualizing increase in value produced due to access to AI tools around March 2026, with estimates for March 2025 and March" source context "Measuring the Self-Reported Impact of Early-20
AI編碼工具曾被寄予厚望:輸入一句註解,一個函式便自動生成,開發效率理應大幅飆升。但從2025年中到2026年的一連串嚴謹研究,卻大幅顛覆了這個美好敘事。數據顯示,AI並非直接的生產力倍增器,反而可能拖慢資深開發者、產出瑕疵更多的程式碼,更令人憂心的是,它還創造了一種即使數據上不划算、開發者也難以戒除的依賴性。
非營利研究組織METR在2025年7月發表了一項堪稱警鐘的隨機對照試驗結果。該實驗找來16名經驗豐富的開源開發者,在他們熟悉的程式碼庫中處理246項真實任務,並隨機分配部分任務可使用AI編碼工具(Cursor Pro與Claude 3.5/3.7 Sonnet),部分則不行。
實驗前,這些開發者預測AI能讓他們加快24%。然而,實際測量的結果恰好相反:使用AI工具的開發者完成任務所需的時間反而增加了19%(95%信賴區間:+2%至+39%)。
速度變慢並非開發者不夠努力。他們多花費的時間都用在審查AI的輸出、修正錯誤、引導模型走向正確解法,以及等待程式碼產生上。最關鍵的是,這種「主觀感受」與「客觀數據」的巨大鴻溝,即使經歷了實驗也依然存在。在得知自己實際上變慢後,開發者們依然「感覺」自己快了20%——也就是說,碼表上的真相與他們腦袋裡的認知,存在著43個百分點的驚人落差。
METR在2026年初重新檢視實驗設計,調整任務異質性後,修正的分析顯示整體樣本有6%的輕微加速,但個體差異極大:部分開發者在特定任務可加速達25%,其他人則依然呈現淨減速。 核心結論並未改變:AI的效益高度取決於任務類型,而開發者「自我感覺」的速度絕非可靠的衡量指標。
如果任務完成時間的數據充滿雜訊,那程式碼品質的證據就清楚得多。CodeRabbit發布的指標性《AI與人類程式碼生成現狀》報告,分析了470份真實世界的GitHub拉取請求——包含320份由AI協作完成,以及150份純人類撰寫。
結果令人震驚:AI生成的拉取請求平均包含的瑕疵數量約為人類程式碼的1.7倍(平均每個PR有10.83個問題 vs. 6.45個)。 這些品質落差並非只是風格或格式問題,而是集中在會引發真實事故的關鍵領域:
CodeRabbit的分析還發現,AI產出的程式碼有著「更長的審查尾巴」(heavier review tail),意即人類審查者必須花費不成比例的大量時間,來尋找和診斷AI變更中的問題。 如同報告作者所言,人類和AI會犯一樣的錯——只是AI犯錯的頻率更高、規模更大。
這也吻合CodeRabbit更宏觀的觀察:2025年是AI速度元年,而2026年必須成為AI品質元年。營運事故的事後檢討越來越常追溯到AI助理所引入的細微邏輯錯誤、組態疏忽或設計誤解。
品質缺陷直接轉化為財務上的巨額浪費。開發者生產力平台Entelligence.AI匯總了來自2,444家企業的數據,呈現出一份在工程界引發廣泛迴響的成本分析:
| 每花費1美元在AI Token上的去向 | 金額 |
|---|---|
| 修復AI自己產生的Bug | 0.44美元 |
| 重構與改寫 | 0.27美元 |
| 審查與合併摩擦 | 0.11美元 |
| 最終交付給用戶的真實價值 | 0.18美元 |
換言之,投入AI的每一塊錢,有82美分都消耗在修補Bug、重工與審查等間接成本上,僅有18美分真正轉化為用戶能感受到的價值。 這個成本不只是理論。優步(Uber)在四個月內就燒光整個2026年度的AI編碼預算,卻沒有換來任何可量測的生產力提升。一位未具名的優步高層直言,AI支出與產品改進之間的關聯「目前根本不存在」。
史丹佛大學與麻省理工學院的一項互補性研究也顯示,用AI代理人修復程式碼錯誤,單一任務的Token消耗量可輕易突破百萬——這大約是一般程式碼問答任務Token消耗量的1,000倍。 經濟學上的數據表明,對許多組織而言,導入AI的後續成本,正在吞噬當初承諾的生產力紅利。
或許最令人玩味的心理學發現是:即使親身經歷上述數據,開發者依舊拒絕在沒有AI的情況下工作。多家媒體報導,METR實驗的參與者即使看見了自己變慢的數字,仍抗拒回到無AI輔助的開發模式。 這個現象被形容為「AI依賴悖論」——一旦開發者習慣了AI的輔助,即使該工具被證明會拖慢他們,他們也會對自己獨立作業的能力失去信心。
如同一位開發者所言,AI「處理了無聊的部分——像是模板程式碼、語法細節,那些感覺像工作卻並非真正卡關的環節。」 這項工具讓編碼的「感覺」變快了,即使碼表訴說著相反的真相,因為開發者的痛點已從「寫初稿」轉移到了「進行鉅細靡遺的審查」。
綜合METR的對照實驗、CodeRabbit的拉取請求分析,以及Entelligence.AI的企業數據,一套明確且一致的建議已然成形:
浮現的證據並非全然否定AI編碼工具的價值。在特定情境下——例如上手不熟悉的程式碼庫、產生重複性模板,或是開發者事前就預測AI能幫上大忙的任務——確實可觀察到可量測的效率提升。 但就廣大的、在自身成熟程式碼庫中作業的經驗豐富開發者而言,2025年中至2026年的淨效應,仍是更慢的交付、更多的瑕疵,以及一份頑強抵抗所有數據的依賴。
Studio Global AI
Use this topic as a starting point for a fresh source-backed answer, then compare citations before you share it.
一項指標性的隨機對照試驗發現,經驗豐富的開發者使用AI工具後,完成任務速度反而慢了19%,即使他們事前預測能加快24%,事後仍拒絕無AI輔助的開發方式。
一項指標性的隨機對照試驗發現,經驗豐富的開發者使用AI工具後,完成任務速度反而慢了19%,即使他們事前預測能加快24%,事後仍拒絕無AI輔助的開發方式。 針對470份真實的GitHub拉取請求(Pull Request)分析顯示,AI產生的程式碼比人類撰寫的多出約1.7倍的瑕疵,其中安全性漏洞更高出2.74倍。
來自2,444家企業的匯總數據顯示,每花費1美元在AI Token上,僅有18美分能產生實際的用戶價值;其餘82美分都用在修復AI產生的Bug、重構和審查摩擦上。