Skip to Content Facebook Feature Image

Anthropic促業界協調 警告AI發展過快人類或失控

商業事

Anthropic促業界協調 警告AI發展過快人類或失控
商業事

商業事

Anthropic促業界協調 警告AI發展過快人類或失控

2026年06月06日 01:22 最後更新:01:34

Anthropic建議全球頂尖人工智能公司,協調暫停開發先進人工智能系統。該公司警告,人工智能技術發展迅速,人類或有失去控制的風險。

開發聊天機械人Claude的Anthropic,周四在網誌發文指,隨著尖端人工智能執行任務的速度越來越快,「世界最好有選項,可以減慢或暫時暫停」其發展。

檔案圖片:2026年2月26日,紐約,電腦屏幕上顯示Anthropic網站頁面及公司標誌。(美聯社圖片/Patrick Sison) AP圖片

檔案圖片:2026年2月26日,紐約,電腦屏幕上顯示Anthropic網站頁面及公司標誌。(美聯社圖片/Patrick Sison) AP圖片

Anthropic表示,其內部研究機構計劃與其他機構合作探討這個問題,並「採取行動」協助建立系統,以實現可信的減速或暫停,但未有透露更多細節。

Anthropic的競爭對手OpenAI,周三發表報告提出不同做法,指「民主政府,而非單獨行動的私人公司,最終必須決定規則、保障措施和問責機制」。

OpenAI表示:「我們認為,關於人工智能創新步伐的決定,不應由任何單一實驗室、公司或特殊利益集團負責。」

Anthropic在帖文中指出,人工智能模型正變得越來越快,它們能迅速自行執行編程等軟件任務。根據目前趨勢,並在足夠運算能力下,人工智能系統或能設計及開發自己的後繼者,這被稱為「遞歸式自我改進」。

Anthropic表示,自我構建的人工智能將是一個重要的技術里程碑,為科學、醫療保健及其他領域帶來好處,但「亦可能增加人類失去人工智能系統控制權的風險」。

部分科技業界人士,長期以來一直警告這種情況。

Anthropic發文前,多倫多大學一個研究團隊本周亦發出警告,展示人工智能工具如何用於創建一種新型人工智能「蠕蟲」,該蠕蟲在設備之間傳播時會調整其入侵策略,並接管龐大的電腦網絡。

首席研究員Nicolas Papernot接受訪問時表示:「我認為人們必須明白,構成安全隱患的不僅是最大、最強大的語言模型。」

Anthropic帖文的作者,公司聯合創辦人Jack Clark及其研究機構主管Marina Favaro表示,暫停開發將用於讓「社會結構和對齊研究」跟上人工智能的進步。對齊是業界術語,指確保技術符合人類價值觀和意圖。

建議的協調機制將讓先進人工智能實驗室,核實全球競爭對手是否確實已停止或減慢工作,「以及不良行為者無法利用協調減速的幌子,秘密地搶先一步」。

該公司表示,需要一個協調的全球機制,因為若沒有它,人工智能發展的減速可能讓「最不謹慎」的參與者追趕上來,並增加公司和政府在就人工智能安全作出艱難選擇時的壓力。

Anthropic發文之際,該公司與ChatGPT開發商OpenAI正競相在股票市場出售股份,Anthropic的首次公開招股估值或接近一萬億美元。

Papernot在發布報告前,已通知加拿大網絡安全當局。報告顯示研究人員如何在實驗室中,利用一個軟件開發人員可輕鬆廉價獲取和修改的「開源」人工智能工具,開發出該蠕蟲。

他表示:「過去,網絡攻擊者會專注於價值非常高的目標。銀行系統、醫院、電網、水處理系統、學校。」

Papernot同意,公司、政府機構和學術研究人員之間應加強合作,開發應對措施,因為人工智能驅動的入侵工具,正大大加速尋找電腦漏洞。

他指:「你放在地庫、沒有定期檢查的舊手提電腦,看起來不是一個高價值目標,但它可以用作攻擊這些更高價值目標的發射台。任何連接到互聯網的東西現在都面臨風險,因為發動這些網絡攻擊的成本已變得非常低。」

(美聯社)

NanoTech公司今日推出Roovie,為每棟建築物提供一個世界模型。這是一個基於物理學的模型,模擬特定建築物的行為方式,讓人人工智能代理在實際決策前,先行測試各種方案。設計選項、營運變更及資本計劃均可在這個試驗場中,根據業主目標進行測試、定價,並與實際數據核對,從而縮小建築物預期表現與實際表現之間的差距。

世界模型是機械人學習在實體世界運作的方式:它們在模擬世界中練習,根據成效獲得獎勵,然後才採取行動。這些世界模型大多是學習得來的物理學近似值,而Roovie的模型則直接基於物理學原理。建築物的「獎勵」從非單一數字,節省能源但令住戶過熱的方案屬失敗,達到碳排放目標但無法回本的方案亦然。

Roovie產品圖片 AP圖片

Roovie產品圖片 AP圖片

NanoTech最初並非旨在開發軟件。作為一間開發先進隔熱塗層的材料公司,它需要證明其產品在實際建築物上的節省效益,但市面上沒有工具能大規模地嚴謹而快速地做到,因此公司自行開發了相關引擎。

NanoTech公司行政總裁兼聯合創辦人米高法蘭西斯表示:「機械人在接觸真實世界前,會先在世界模型中學習。建築物亦應享有同等待遇:在花費任何金錢前,先測試每個決策。Roovie為每棟建築物提供一個基於真實物理學的世界模型,一個試驗場,讓我們的代理在您的限制內,為您的目標努力,並以實際金錢展示如何實現。之後,實際數據會告訴我們是否正確。」

由於負載計算、空調系統規模設計、日光研究、能源及舒適度模擬以及合規性檢查均來自同一個世界模型,整個團隊可了解每個變動如何影響其他方面。這個世界模型可追蹤建築物從初步設計到下一個資本計劃的整個過程,能源服務公司、公用事業公司及貸款機構亦可獲得可驗證及承保的節省估算。

NanoTech公司能源服務高級副總裁內森基格爾指出:「透過Roovie,我們可為城市、校園或房地產投資組合中的數千棟建築物建模,並精確找出提升表現的最大機會。這將能源分析從單一建築物服務,轉變為改善整個建築環境表現的方法。」

GTI能源公司建築去碳化高級經理傑森拉弗勒稱:「透過簡化複雜的建築能源建模工作流程,Roovie有潛力讓更多用戶更容易接觸到先進的能源分析,有助克服陡峭學習曲線和專業行業知識等傳統障礙。」

Roovie今日向選定的測試參與者開放,包括設計、工程及能源服務公司、公用事業公司及政府實體。

NanoTech公司是一間先進材料及建築表現科技公司,結合材料科學與智能,令建築環境更高效、具韌性及符合成本效益。透過NanoTech材料部門,公司開發用於節能、隔熱及防火的先進隔熱塗層。Roovie為每棟建築物提供一個基於物理學的世界模型,人工智能代理可在決策前,根據業主目標測試方案。NanoTech與財富500強公司及加州運輸部合作。

(美聯社)

你 或 有 興 趣 的 文 章