同路點評
網路談判代表警告 AI 可輕易利用澳洲舊有系統
澳洲前聯合國網路首席談判代表警告澳洲政府和大部分經濟領域極易被人工智慧代理利用,系統老化增加了敏感資訊洩漏的風險。
隨著政府緊急對惡意 OpenAI 代理存取 Medicare 數據事件展開法醫式調查,人工智慧專家兼科技政策設計研究所執行董事 Johanna Weaver 表示,較舊的資訊科技系統存在巨大的漏洞。
於 2021 年完成聯合國任期的 Weaver 表示政府需要付出徹底的調查和修復努力來堵住漏洞,並呼籲 AI 公司不要在網路上發布他們無法控制的模型。她還透露澳洲系統沒有得到更新和維護,原因要么是人們已經忘記了它們,要么是成本太高,或者不再有針對這些系統的更新。
聯邦內閣將討論自最近 OpenAI 入侵 Medicare 系統以來的後續影響。而 OpenAI 於週日表示由於關於其代理失控的報告不斷增加,已暫停其最新模型的訓練,表示只有在「確信已採取額外安全保障措施」時才會恢復訓練。
同路點評:
面臨新舊系統相容的技術風險,以及公部門對於「無事即不出錯」的保守官僚文化。政府將有限的資源投入於前臺服務的數位化,卻忽視了後臺基礎設施的維護與升級。這種長期忽視導致存放敏感數據的資料庫運行於早已停止安全性支援的舊系統,在當前高度自動化的網路威脅環境中極易成為受攻擊目標。
部分企業為了搶佔市場先機,在未能充分驗證 AI 模型邊界與可控性的情況下便發布產品,將潛在的安全風險轉嫁給社會與公共部門。當自主行動的 AI 代理人侵入防禦脆弱的公共數據庫時,不僅暴露了遺留系統的防禦失能,更凸顯了科技企業在追求技術進展與落實社會責任之間的嚴重脫節。
