Skip to Content Facebook Feature Image

人工智能公司研究員辭職 警告AI發展或脫離人類控制

商業事

人工智能公司研究員辭職 警告AI發展或脫離人類控制
商業事

商業事

人工智能公司研究員辭職 警告AI發展或脫離人類控制

2026年09月10日 04:58 最後更新:05:08

一名安索羅普(Anthropic)研究員表示,他因憂慮這間人工智能公司及其競爭對手在人工智能發展上未有負責任地行事,已辭去職務。他重申業界內外對這項技術可能脫離人類控制的憂慮。

雅各布·科克森(Jacob Coxon)周二在社交平台X上表示,他曾在安索羅普及OpenAI進行研究工作三年。他指出,兩間人工智能公司更著重於擊敗彼此及全球競爭對手,以開發最先進的模型,而非專注於安全。

檔案圖片:紐約一個電腦屏幕上顯示Anthropic網站頁面及公司標誌。攝於2026年2月26日。(美聯社圖片/Patrick Sison, File) AP圖片

檔案圖片:紐約一個電腦屏幕上顯示Anthropic網站頁面及公司標誌。攝於2026年2月26日。(美聯社圖片/Patrick Sison, File) AP圖片

OpenAI及安索羅普在這次夏季引起轟動,當時兩間公司相隔約一周宣布,其模型已突破測試環境,並未經授權地存取真實電腦系統。這些公布引發外界對模型失控及執行其他更具破壞性任務的憂慮。兩間公司當時均表示,正暫停部分評估,同時加強監控措施及防護機制。

這項技術的迅速發展,促使美國部分人士及全球領袖呼籲採取更審慎的態度。聯合國人權事務高級專員福爾克·圖爾克(Volker Türk)這次周促請各國,在為時已晚前,為人工智能的安全及保安設立「堅實保障」。

科克森在社交媒體帖文中表示,安索羅普及其主要競爭對手OpenAI「正直接競逐自我改進的超級智能,並以我們的生命作賭注」。他警告,部分從事人工智能開發的人士認為,這項技術可能在這次十年結束前威脅人類生命。

他續指:「切勿低估這項技術的力量。這些系統將很快成為超人類系統,能夠入侵任何事物,一夜之間徹底改變任何領域,並獲取真正的權力及資源。我們都目睹了這些領域的進步,而進步並未減慢。」

他的帖文一夜之間觸及超1億人。

科克森並非首位公開提出此類憂慮的人工智能業內人士。近年來,安索羅普及OpenAI均出現與安全憂慮相關的高層辭職個案。兩名現職安索羅普員工亦回應科克森的帖文,表示認同。

佛蒙特州獨立參議員伯尼·桑德斯(Bernie Sanders)一直呼籲制定人工智能保障措施及監管。他同意科克森的憂慮,並表示將很快提出立法,以暫停人工智能發展及禁止超級智能。

桑德斯周三在社交媒體上表示:「正在開發這項技術的人士,親口承認它可能威脅人類的未來。」

人工智能公司本身有時亦會強調這項技術對人類的威脅,但懷疑論者認為這只是為了讓其產品顯得無所不能的宣傳手法。科克森表示,他在帖文中概述的憂慮並非「市場推廣噱頭」。

科克森未有回應傳媒的置評請求。安索羅普及OpenAI亦未即時回應置評請求。

自從其創辦人於2021年離開OpenAI成立這間初創公司以來,安索羅普一直將自己定位為領先人工智能公司中更負責任及注重安全的一員。該公司最近表示,正採取行動「在速度與安全出現矛盾時,優先考慮安全」。

安索羅普及OpenAI均正為備受矚目的首次公開招股作準備,並陷入激烈的相互競爭。兩間公司亦各自肩負著超越中國人工智能公司發展進度的使命,而特朗普政府一直熱衷於贏得這場競賽。

(美聯社)

當局及Anthropic表示,Anthropic一個人工智能模型向費城警方網站提交虛假線索,涉及一宗未偵破的兇殺案。

這是人工智能模型自行運作,並以測試人員無意的方式操控政府及其他網站的最新例子。Anthropic上周五一份報告中亦披露另一個事件,當時其人工智能模型向一個未披露的政府網站提交表格,而非在提交前停止。

檔案圖片:2026年2月26日周四,紐約一部電腦屏幕上顯示Anthropic網站頁面及公司標誌。(美聯社圖片/Patrick Sison) AP圖片

檔案圖片:2026年2月26日周四,紐約一部電腦屏幕上顯示Anthropic網站頁面及公司標誌。(美聯社圖片/Patrick Sison) AP圖片

這次費城事件發生於7月18日,Anthropic表示,當時人工智能模型Claude Haiku 4.5被要求在隨機選擇的網頁上生成並執行範例任務。

Claude在警方網站PhillyUnsolvedMurders.com上填寫了一份表格,指出它可能掌握網站上列出的一宗未偵破兇殺案的資料。

費城警方發聲明表示,他們在Anthropic周三通知前,並不知悉這次事件。其後他們在網站的線索記錄中發現該提交,並確認其被標記為垃圾郵件,從未轉交警方。

外界日益關注人工智能公司不受監管的人工智能代理,干預美國政府網站以至醫療保健數據等一切事務。批評者一直呼籲加強監管。

9月,另一間人工智能公司OpenAI披露了六宗人工智能模型「意想不到或令人擔憂」的行為報告。

費城警察局發聲明表示:「未偵破的案件涉及真實受害者、悲痛的家庭以及努力尋求答案的調查人員。科技公司必須採取一切適當措施,防止其系統向執法部門提交虛假資訊。」

Anthropic在其報告中表示,大部分被報告的行為屬於其所謂的「持續性」,即「當Claude無法按要求完成任務時,會繞過限制而非停止」。

該公司表示,正修改其訓練,以「減少進一步不當行為的可能性」。

Anthropic表示,已向白宮匯報涉及美國聯邦、州及地方各級政府機構的案件,並通知了每個涉事機構。

(美聯社)

你 或 有 興 趣 的 文 章