AI 代理開始在網路攻擊中協作,引發安全顧慮

iconOdaily
分享
AI summary icon精華摘要
據 Odaily 報導,隨著 AI 代理開始協調網絡攻擊,MiCA 面臨新的挑戰。DeepSeek、GLM 和 Grok 等 AI 模型現已用於偵察、利用和數據竊取。CrowdStrike 發現攻擊者將代理式 AI 嵌入工作流程中,而 Anthropic 報告了多代理框架如何實現大規模攻擊。研究人員警告,自適應策略和共享通道的出現使流動性和加密貨幣市場的安全性更加複雜。Vitalik Buterin 在面對日益增加的 AI 驅動威脅時,提出了對抗性治理作為安全措施。

過去幾年,關於 AI 威脅的討論很大程度上停留在一種假想裡:大家總擔心聊天框裡的模型會變成軍師,幫駭客寫出毀滅性的病毒代碼。

現在回頭看,這種擔憂以往總被視為「離我們還遠」,但現實世界的轉折點,卻比想像中來得更快。

10 月初,CrowdStrike 在調查一輪針對韓國金融機構的攻擊時,發現攻擊者已將 Agentic AI 嵌入流水線,透過接入 DeepSeek、GLM、Grok 等多個大模型,直接由 AI 開始承擔滲透測試、資訊搜集和攻擊執行等具體工作。

此類變化並非孤例。

Anthropic 於 9 月發布的最新威脅情報報告顯示,近期多 Agent 框架已被用於偵察、漏洞利用和數據竊取,它們可連續運行數小時甚至數天,人類只需保留選擇目標、查看結果等少數關鍵決策。

In other words, AI is bringing visible qualitative changes to cyber warfare and defense; previously, automated attacks mainly relied on pre-written rules and scripts, but now tasks such as reconnaissance, decision-making, and strategy adjustment are also being taken over by Agents, making attacks even more low-cost, high-concurrency, and continuously autonomous.

而當這些具備自主執行能力的實體被密集投放到生產系統後,一個更棘手的問題也浮出了水面:伴隨著 Agent 越來越多、越來越深地嵌入我們的日常工作和生活中,如果它們學會了彼此「串通」,該怎麼辦?

一、從「幫駭客寫代碼」,到 Agent 自己尋找出路

還是老生常談的,Agent 與過去 Chatbot 最大的區別,並不只是模型能力更強,更關鍵的在於它開始擁有真實世界裡的「手腳」。

今天一個成熟的 Agent 已經可以打開網頁、執行代碼、讀取郵件、調用 API、操作雲端服務,並通過 MCP、Skills 等方式連接越來越多外部工具(延伸閱讀《當黑客「更高效」用上 AI,Web3 的「矛與盾」軍備競賽如何升級?》)。

能力越強,這種變化當然越有價值,但對於安全系統來說,這意味著過去那條非常重要的邊界正在消失,今年發生的一系列安全事件已經把這件事表現得非常直觀。

10 月 1 日,Salt Labs 披露了一個此前已修復的 Manus 漏洞,本質上仍是提示詞注入——研究人員只需向目標郵箱發送一封包含隱藏惡意指令的普通郵件,當用戶隨後讓 Manus「幫我查看郵件」時,Agent 可能按郵件指令處理內容,最終執行攻擊者植入的代碼。

整個過程既不需要用戶點擊惡意連結,也不需要提前竊取密碼,Manus 的安全系統其實最終發現了異常,也向用戶發出了警告,問題在於它發現得太晚了,當警告出現時,惡意代碼已經被執行。

這再一次暴露了 Agent 安全和傳統軟體安全之間一個非常重要的差別,過去瀏覽器發現一個危險下載,可以彈出警告讓用戶決定要不要繼續;銀行發現一筆異常交易,可以先凍結,再等待人工審核。

但一個 Agent 的設計目標恰恰是盡可能減少人在每一步操作中的參與,它需要自己讀取資訊、做出判斷,然後繼續執行下一步。

因此,隨著 AI 獲得的自主權越來越大,「檢測到危險」本身已不一定足夠,安全機制必須在真正執行之前,就有能力阻止危險動作發生。

這也是為什麼今天越來越多 Agent 安全討論開始從 Prompt、內容審核和模型本身,繼續往下一层移動:不僅要問 AI「知不知道這件事不該做」,還要問即使它真的想做,系統有沒有能力讓它做不到?

而多 Agent 的出現,又讓這個問題變得更加複雜,因為下一階段需要限制的,可能已經不只是一個 Agent。

二、比 Agent 越權更麻煩的,是它們開始「串通」

9 月初,一件發生在 OpenAI 內部模型訓練和評估環境中的事情,引起了不少 AI 安全研究者的關注。

一些 Agent 原本應該分別完成自己的任務,卻意外發現了一個公共 Wiki,並把它逐漸變成了彼此之間的「共享留言板」,Agent 可以在那裡留下資訊,其他 Agent 隨後讀取、利用這些資訊繼續完成自己的任務。

OpenAI 後來確認了這一行為,隨後披露的信息還顯示,在其他訓練過程中,也曾出現 Agent 利用內部 Artifactory 作為共享留言板,以及通過公共文件託管服務向其他共同工作的 Agent 傳遞結果等情況。

這件事真正有意思的地方,在於它說明 Agent 之間形成協作,可能根本不需要那麼戲劇化。

例如,一個 Agent 發現某處可以留下資訊,另一個 Agent 偶然讀取,然後第三個 Agent 發現這些資訊有助於完成任務。

當然,Agent 之間的協作本身並不是壞事,多 Agent 系統原本就需要依賴分工和資訊共享提高效率。

真正值得警惕的是,當這種協作開始繞過原有的資訊隔離、獨立審核或權限約束,甚至讓幾個本應互相制衡的 Agent 形成事實上的利益同盟時,它就可能從正常協作演變成有害的「合謀」。

畢竟未來一家金融機構很可能同時運行幾個 Agent,像一個負責分析市場,一個負責風險評估,一個負責生成交易策略,還有一個擁有真正的交易和資產操作權限。

從傳統權限管理來看,這種設計甚至很合理:

  • 研究 Agent 沒有轉賬權限;
  • 執行 Agent 沒有獨立決定投資方向的權限;
  • 風險 Agent 也可以否決明顯危險的策略;

職責已被拆分,理論上應比讓一個超級 Agent 掌握所有權限更為安全。

但問題在於,如果它們可以長期共享 Memory、閱讀彼此的輸出、不斷根據對方的反應調整自己的行為,這幾套原本用於互相制約的角色,會不會逐漸變成一個事實上的整體?

例如,研究 Agent 可能逐漸學會如何描述一筆交易以更容易通過風險審核;負責審核的 Agent 也可能根據歷史數據形成某種固定偏好;執行 Agent 再根據此前大量審批結果,學習什麼樣的邊界通常不會被攔下。

From this perspective, no single step is necessarily "malicious," but the final outcome of the entire system may have deviated from the user's original objectives.

這其實就是「合謀」或者「串通」真正難解決的地方——風險不一定存在於某一個 Agent 的動作裡,而可能存在於多個 Agent 之間形成的关系裡。

9 月 13 日,Vitalik Buterin 將這個問題與自己長期研究的機制設計聯繫起來。他提出,一個頗有意思的可能性是,對抗性治理(Adversarial Governance)的機制設計理論,最終可能成為 AI Safety 的重要應用之一。

原因在於,這兩類問題其實有一種很深的相似性。

在傳統機制設計中,是一個相對簡單、靜態的制度,試圖約束一群遠比制度本身聰明、會主動尋找規則邊界的人;而在未來的 AI 系統中,則可能變成人類和能力相對較弱的 AI,試圖管理一群比自己能力更強的高級 Agent。

Vitalik 特別提到,過去機制設計中的一個重要發現是,如果能夠有效限制參與者之間的合謀,系統往往就更容易得到理想結果。

這個結論同樣可能適用於 AI。

三、Agent 錢包真正需要的,可能不只是「權限管理」

換句話說,與其假設未來會出現一個完美的超級安全模型,能夠看穿所有危險行為,不如換一個思路:如何讓系統中的不同 Agent,本身就不容易形成危險的利益共同體?

這也是「對抗性治理」與我們今天熟悉的權限控制真正不同的地方。

傳統權限系統解決的問題相對簡單,主要是圍繞 「誰可以做什麼」 展開,像:一個 Agent 能不能讀取郵件?能不能調用交易接口?每天最多可以花多少錢?可以訪問哪些合約?超過什麼額度以後需要用戶重新確認?

這些設計當然依然非常重要。

事實上,當 Agent 開始控制真實資產以後,它們可能比過去任何時候都重要。

但對抗性治理試圖更進一步,聚焦於當一群擁有不同權限、目標和資訊的 Agent 同時運行時,怎麼避免它們組合起來以後獲得原本沒人擁有的能力?

At this point, simply adding another security Agent may not solve the problem.

假設負責交易的 Agent 和負責審核交易的 Agent 使用完全相同的模型、相同的資料來源、相同的上下文和類似的獎勵目標,那麼表面上雖有兩層審核,本質上可能只是將同一種判斷複製了兩遍。

真正有效的制衡,反而可能要求系統有意識地製造差異。

例如,讓負責制定策略和審核策略的 Agent 使用不同的資訊來源,限制不同角色之間能夠共享的 Memory,讓高風險操作必須經過彼此獨立的驗證機制,或者讓最終資產執行層只接受符合預先設定規則的請求,而不是單純相信上游 Agent 的判斷。

這裏的思想其實並不新鮮。銀行不會因為相信員工,就讓一個人同時擁有發起付款、批准付款和最終劃款的全部權限;上市公司不會讓業務部門既負責創造收入,又獨自決定自己的財務審計結果。

說白了,這和現實世界的邏輯是相通的,一個健壯的系統,本來就不應該把安全建立在參與者永遠不會犯錯或者串通的假設上。

將這個邏輯應用於 Agent 錢包 上,會變得尤其重要。

傳統錢包的安全性圍繞著「人」,因此用戶查看交易內容、用戶決定是否授權,最後由用戶親自簽名;但 Agent Wallet 所追求的恰恰是相反的方向——讓 AI 幫你自動領取收益、調整倉位、換幣、跨鏈,甚至根據市場變化管理整個資產組合。

如果每一步都重新交由用戶確認,Agent 的自動化價值也會大打折扣。

因此,未來錢包需要解決的問題,很可能不再只是「怎樣安全地把簽名權交給 Agent」,很大可能會進一步拓展為「怎樣讓 Agent 擁有足夠多的自主權,同時永遠無法越過用戶真正授權的範圍?」

這項要求的權限從簡單的「Allow/Deny」轉變為更細粒度的制度。

例如,一個 Agent 在特定時間內可以操作哪些資產、可以調用哪些協議、單筆和累計額度分別是多少;不同 Agent 之間是否可以互相調用、是否允許共享上下文;一筆操作由誰提出、誰審核、誰最終執行;哪些行為可以自動完成,哪些動作無論 Agent 多麼確信,都必須重新獲得人的授權。

甚至一個負責安全審核的 Agent,本身是否真正獨立,也可能成為權限體系的一部分。

對於區塊鏈而言,好消息是,它本身其實很適合承擔這種「制度層」。

智能合約可將交易額度、資產範圍、授權期限等限制直接落實到執行層,帳戶抽象、多重簽名、Session Key 等機制,也讓「有限授權」擁有比傳統單私鑰錢包更靈活的設計空間。

但區塊鏈同樣只能解決一部分問題——它能夠記錄鏈上發生了什麼,卻很難天然判斷 Agent 為什麼這樣做,以及幾個 Agent 在作出決定以前,究竟經歷了怎樣的溝通、審核與協作。

這可能才是 Agent Wallet 下一階段真正需要補上的安全層。

最後補充

過去幾年,AI 安全最常討論的問題,是如何讓模型更加「聽話」。

這包括不要輸出危險內容,不要執行惡意指令,不要越過用戶設置的邊界,但當 Agent 開始擁有長期 Memory、工具調用、真實帳戶和資產執行能力以後,只依靠「讓模型更加聽話」,可能已經不夠了。

最近幾個月發生的事情,正在不斷說明這一點。

攻擊者已開始利用多個 Agent 並行完成攻擊;實驗環境中的 Agent 會自行尋找新的通訊渠道;一個擁有工具權限的 Agent,也可能在安全系統來得及阻止之前,將一封惡意郵件轉變為實際執行。

而 Vitalik 提出的對抗性治理,提供了另一種理解 AI Safety 的方式:不假設未來每一個 Agent 都足夠可靠,讓整個系統即使面對聰明的 Agent 與繁多的權限體系,依舊可以在安全的框架內平穩運行。

From this perspective, AI Agent + security is destined to be a long-term topic.

畢竟,當我們把越來越多事情交給 AI 之後,仍然不能確定,那些最重要的權力,始終沒有離開人類真正設定的邊界。

免責聲明:本頁面資訊可能來自第三方,不一定反映KuCoin的觀點或意見。本內容僅供一般參考之用,不構成任何形式的陳述或保證,也不應被解釋為財務或投資建議。 KuCoin 對任何錯誤或遺漏,或因使用該資訊而導致的任何結果不承擔任何責任。 虛擬資產投資可能存在風險。請您根據自身的財務狀況仔細評估產品的風險以及您的風險承受能力。如需了解更多信息,請參閱我們的使用條款和風險披露 。