Claude Code 的 Ponytail 技能實測：程式碼真能減少 54% 嗎？

• JetBrains AI 團隊針對 Claude Code 的 Ponytail 技能 進行了 80 項配對 A/B 基準測試，檢驗其宣稱能減少 54% 程式碼的真實成效。 • 實測結果顯示，程式碼實際減少幅度為 15.3%，成本與時間則分別降低約 10.3% 與 11%，雖未達宣稱的一半，但仍具備顯著的成本節省效果。 • 測試發現該技能無法在 Claude Code 中自主啟動，必須透過外掛的 SessionStart 鉤子主動注入規則集才能發揮作用。 • 程式碼的削減效益主要集中在原本容易過度建構（Over-build）的大型任務上，在原本就很簡潔的任務中則效果有限。 • 綜合相關 AI 評測觀點，開發工具與代理程式的優化核心在於保護工作記憶並減少冗餘脈絡，而非一味依賴模型自身的靜態知識。

「真正的價值不在於模型知道多少，而在於它懂得何時去調用工具與查閱文檔。」