A系列最大電池!OPPO A5入網:6330mAh超越A5 ProOPPO Find X8 Ultra渲染圖首曝:外觀與Pro版幾乎一致微軟重申Win10將結束支持!督促趕緊升級Win11:不升用不了Microsoft 365六年磨一劍!iPhone 17 Air真機泄露:橫向三攝設計大變革小米超級小愛升級計劃公布:小米13/K60等也能用上 1月27日前推送摩托羅拉新款折疊屏手機或提前發(fā)布 型號XT2551獲印度BIS認證攬獲多項CES 2025科技大獎,蟬聯(lián)全球消費電子品牌TOP10國產動畫電影《哪吒之魔童鬧海》宣布全版本上映:支持IMAX、CINITY等多制式擎朗智能攜手科大訊飛,共啟具身智能服務機器人新征程“借機玩!?多家互聯(lián)網公司在小紅書發(fā)英文貼攬客OPPO Find X8 Ultra渲染圖曝光:外觀設計基本保持不變1月16日發(fā)布!真我14 Pro系列官宣:全球首款溫感變色手機三星Galaxy S25 Slim細節(jié)曝光:厚度僅6.5mm 對標iPhone 17 Air斥資134億!TCL買下LG顯示廣州廠訊飛星火X1成為全國產算力平臺上唯一的深度推理大模型董明珠稱格力自研芯片設計制造封裝全鏈條完成微軟再次強調Win10將于10月14日終止支持,敦促用戶免費升級至Win11Arm曾考慮將授權價格提高300% 并曾探討設計自有芯片OpenAI推出新功能“Tasks” ChatGPT可變身成AI私人助理三星Galaxy S25系列手機AI創(chuàng)作新境界:語音/文字加持“草圖轉圖像”
  • 首頁 > 企業(yè)IT頻道 > 軟件即服務

    微軟AI安全報告揭示:最有效的攻擊源自“快速工程”而非復雜技術

    2025年01月15日 15:28:59   來源:AIbase基地

      自2021年以來,微軟的 AI 安全團隊對100多種生成式 AI 產品進行了測試,以尋找薄弱環(huán)節(jié)和道德問題。他們的發(fā)現(xiàn)挑戰(zhàn)了一些關于 AI 安全的常見假設,并強調了人類專業(yè)知識的持續(xù)重要性。

      事實證明,最有效的攻擊并不總是最復雜的攻擊。微軟報告中引用的一項研究指出:“真正的黑客不會計算梯度,而是使用快速工程。”該研究將人工智能安全研究與現(xiàn)實世界的實踐進行了比較。在一次測試中,該團隊僅通過將有害指令隱藏在圖像文本中就成功繞過了圖像生成器的安全功能——無需復雜的數學運算。

      人情味依然重要

      雖然微軟已經開發(fā)了 PyRIT,一種可以自動進行安全測試的開源工具,但該團隊強調,人類的判斷力是無法被取代的。當他們測試聊天機器人如何處理敏感情況(例如與情緒困擾的人交談)時,這一點變得尤為明顯。評估這些場景既需要心理學專業(yè)知識,也需要對潛在心理健康影響的深刻理解。

      在調查人工智能偏見時,該團隊還依賴人類的洞察力。在一個例子中,他們通過創(chuàng)建不同職業(yè)的圖片(不指定性別)來檢查圖像生成器中的性別偏見。

      新的安全挑戰(zhàn)出現(xiàn)

      人工智能與日常應用的融合帶來了新的漏洞。在一次測試中,該團隊成功操縱語言模型,創(chuàng)造出令人信服的欺詐場景。當與文本轉語音技術相結合時,這就創(chuàng)建了一個可以以危險的逼真方式與人互動的系統(tǒng)。

      風險并不局限于人工智能特有的問題。該團隊在一款人工智能視頻處理工具中發(fā)現(xiàn)了一個傳統(tǒng)的安全漏洞(SSRF),表明這些系統(tǒng)面臨著新舊安全挑戰(zhàn)。

      持續(xù)的安全需求

      這項研究特別關注“負責任的人工智能”風險,即人工智能系統(tǒng)可能生成有害或有道德問題的內容的情況。這些問題特別難以解決,因為它們通常嚴重依賴于背景和個人解讀。

      微軟團隊發(fā)現(xiàn),普通用戶無意接觸有問題的內容比故意攻擊更令人擔憂,因為這表明安全措施在正常使用過程中沒有按預期發(fā)揮作用。

      研究結果清楚地表明,人工智能安全并非一次性解決。微軟建議持續(xù)尋找和修復漏洞,然后進行更多測試。他們建議,這需要有法規(guī)和財務激勵措施的支持,使成功的攻擊更加昂貴。

      研究團隊表示,仍有幾個關鍵問題需要解決:我們如何識別和控制具有潛在危險的人工智能能力,如說服和欺騙?我們如何根據不同的語言和文化調整安全測試?公司如何以標準化的方式分享他們的方法和結果?

      文章內容僅供閱讀,不構成投資建議,請謹慎對待。投資者據此操作,風險自擔。

    即時

    新聞

    明火炊具市場:三季度健康屬性貫穿全類目

    奧維云網(AVC)推總數據顯示,2024年1-9月明火炊具線上零售額94.2億元,同比增加3.1%,其中抖音渠道表現(xiàn)優(yōu)異,同比有14%的漲幅,傳統(tǒng)電商略有下滑,同比降低2.3%。

    企業(yè)IT

    重慶創(chuàng)新公積金應用,“區(qū)塊鏈+政務服務”顯成效

    “以前都要去窗口辦,一套流程下來都要半個月了,現(xiàn)在方便多了!”打開“重慶公積金”微信小程序,按照提示流程提交相關材料,僅幾秒鐘,重慶市民曾某的賬戶就打進了21600元。

    3C消費

    華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,高能實力,創(chuàng)

    華碩ProArt創(chuàng)藝27 Pro PA279CRV顯示器,憑借其優(yōu)秀的性能配置和精準的色彩呈現(xiàn)能力,為您的創(chuàng)作工作帶來實質性的幫助,雙十一期間低至2799元,性價比很高,簡直是創(chuàng)作者們的首選。

    研究

    中國信通院羅松:深度解讀《工業(yè)互聯(lián)網標識解析體系

    9月14日,2024全球工業(yè)互聯(lián)網大會——工業(yè)互聯(lián)網標識解析專題論壇在沈陽成功舉辦。