雙語)不聽人類指揮OpenAI模型首次拒絕自我關(guān)機(jī)這意味著什么?

  

雙語)不聽人類指揮OpenAI模型首次拒絕自我關(guān)機(jī)這意味著什么?(圖1)

  據(jù)英國(guó)《每日郵報(bào)》、《每日電訊報(bào)》等外媒近日?qǐng)?bào)道,美國(guó)開放人工智能研究中心(OpenAI)

  報(bào)道說,人類專家在測(cè)試中給o3下達(dá)明確指令,但o3篡改計(jì)算機(jī)代碼以避免自動(dòng)關(guān)閉。

  o3模型是OpenAI“推理模型”系列的最新版本,旨在為ChatGPT提供更強(qiáng)大的問題解決能力。OpenAI曾稱o3為“迄今最聰明、最高AG真人官方入口能”的模型。

  美國(guó)AI安全機(jī)構(gòu)帕利塞德研究所說,o3破壞關(guān)閉機(jī)制以阻止自己被關(guān)閉,“甚至在得到清晰指令時(shí)”。

  這家研究所說:“據(jù)我們所知,這是AI模型首次被發(fā)現(xiàn)在收到……清晰指令后阻止自己被關(guān)閉?!?

  帕利塞德研究所24日公布上述測(cè)試結(jié)果,但稱無法確定o3不服從關(guān)閉指令的原因。

  在“95后”AI從業(yè)者、心影次元人工智能科技公司首席技術(shù)官(CTO)張國(guó)棟看來,這種“不聽指令”的情況,正體現(xiàn)了大模型的能力來源于隨機(jī)性,問題也體現(xiàn)在了隨機(jī)性上。

  “與以往的技術(shù)變革不同的是,大模型技術(shù)特點(diǎn)就是通過超大量的神經(jīng)網(wǎng)絡(luò)節(jié)點(diǎn)計(jì)算,超大量也就意味著我們無法完全確定其輸出的結(jié)果。從原理上具有隨機(jī)性的特點(diǎn)。隨機(jī)性也就意味著一定的不確定性。”

  “00后”的AI創(chuàng)業(yè)者、碼上MashOn團(tuán)隊(duì)的創(chuàng)始人及團(tuán)隊(duì)負(fù)責(zé)人高德潤(rùn)認(rèn)為,毫無疑問大模型會(huì)越來越智能,而安全問題也是研發(fā)人員未來應(yīng)該重點(diǎn)關(guān)注的方向。

  人工智能是否能取代人類曾是科幻小說中的常見主題,但如今隨著人工智能技術(shù)的進(jìn)步,這已經(jīng)成為一個(gè)真實(shí)且緊迫的問題。

  但對(duì)于中國(guó)年輕的AI創(chuàng)業(yè)者們而言,當(dāng)前,人工智能不僅僅是一個(gè)熱詞,更是建立更智能、更包容未來的基礎(chǔ)。

  作為一名“00后”的AI創(chuàng)業(yè)者,就讀于北京郵電大學(xué)電信工程及管理專業(yè)的高德潤(rùn)于2022年創(chuàng)立了一個(gè)編程論壇,幫助同學(xué)們解決編程問題。但當(dāng)ChatGPT在后續(xù)橫空出世時(shí),他看到了實(shí)現(xiàn)自己想法的更長(zhǎng)遠(yuǎn)的機(jī)會(huì)。

  第二年,高德潤(rùn)便和他的團(tuán)隊(duì)推出了智能教學(xué)應(yīng)用平臺(tái)“碼上”(MashOn),逐步引導(dǎo)學(xué)生解決編程挑戰(zhàn)。這個(gè)平臺(tái)學(xué)生提供個(gè)性化、啟發(fā)式的一對(duì)一課程輔導(dǎo)答疑服務(wù),有效提高學(xué)生的學(xué)習(xí)效率,顯著降低教師的輔導(dǎo)工作量。

  自2023年9月上線以來,碼上已在北郵及全國(guó)500多所院校大規(guī)模應(yīng)用,入選了教育部首批“人工智能+高等教育”應(yīng)用場(chǎng)景典型案例,成為2024世界慕課與在線教育大會(huì)重點(diǎn)展示的全球8個(gè)教育數(shù)字化前沿成果之一。

  在高德潤(rùn)看來,順應(yīng)新技術(shù)的浪潮,甚至幫助塑造它,對(duì)年輕人來說是一個(gè)激動(dòng)人心的挑戰(zhàn)。他的團(tuán)隊(duì)目前已經(jīng)發(fā)展到有大約20名成員,都是20歲出頭的的年輕人。

  發(fā)現(xiàn)并行動(dòng)起來應(yīng)對(duì)新趨勢(shì)的能力,是Z世代人工智能創(chuàng)業(yè)者的一個(gè)顯著特征。從ChatGPT的發(fā)布到2025年DeepSeek的全球影響,一波創(chuàng)新潮涌動(dòng),推動(dòng)了中國(guó)各地的人工智能創(chuàng)業(yè)公司的蓬勃發(fā)展。

  成立于2024年的心影次元是一家專門開發(fā)動(dòng)漫短視頻的人工智能科技公司。該公司的CTO張國(guó)棟表示,盡管團(tuán)隊(duì)最初專注于達(dá)到技術(shù)里程碑,但他們很快便意識(shí)到他們工作的真正價(jià)值在于其與人們建立聯(lián)系的能力。

  張國(guó)棟表示,他們團(tuán)隊(duì)的理念是用人工智能支持人們對(duì)美的追求,旨在讓專業(yè)人士和業(yè)務(wù)愛好者都能制作出高質(zhì)量的動(dòng)畫。

  張國(guó)棟也注意到,越來越多的日常創(chuàng)作者都在接納人工智能工具,讓創(chuàng)作生態(tài)更加公AG真人官方入口平。

  “我們希望每個(gè)人都有機(jī)會(huì)表達(dá)自己,欣賞美。我們也希望普通人的故事能夠觸達(dá)廣泛的觀眾”,他說道。

  “一天一點(diǎn)”會(huì)員口語群2025年第6期招生剛剛結(jié)束,部分班級(jí)還可以插班返回搜狐,查看更多