新聞中心

EEPW首頁 > 智能計算 > 市場分析 > 生成式人工智能對中國CIO和安全團隊的影響

生成式人工智能對中國CIO和安全團隊的影響

作者:Gartner研究總監(jiān) 趙宇 Gartner高級研究總監(jiān) 高峰 時間:2023-12-21 來源:電子產(chǎn)品世界 收藏

ChatGPT的熱烈炒作、廣泛使用和快速蔓延提升了最終用戶對LLMGenAI的認識,引發(fā)了一波商業(yè)實驗和AI初創(chuàng)企業(yè)的浪潮。20234月的Gartner網(wǎng)絡研討會發(fā)現(xiàn),381名中國參會人員有70%已經(jīng)或計劃啟動GenAI?,其中6%已在生產(chǎn)環(huán)境部署了GenAI,26%在試點GenAI38%處于規(guī)劃階段。

本文引用地址:http://2s4d.com/article/202312/454130.htm

 

及其需要為GenAI的影響做好準備,在以下四個方面采取措施:

1. 為構建GenAI應用提供安全保護:AI應用攻擊面不斷擴大,產(chǎn)生了新的潛在風險,需要對現(xiàn)有應用安全實踐進行調(diào)整。

2. 管理和監(jiān)控使用GenAI的方式:各企業(yè)機構正在探索如何使用嵌?現(xiàn)有應用的GenAI助手,這些應用都有獨特的安全要求,是傳統(tǒng)安全控制措施無法滿足的。

3. 利用生成式網(wǎng)絡安全AI進行防御:有效抓住GenAI機遇,從而改善安全和風險管理、 優(yōu)化資源、抵御新興攻擊技術,甚至降低成本。Gartner將生成式?絡安全AI定義為 GenAI技術在網(wǎng)絡安全中的應用。

4. 為受到GenAI攻擊做好準備:GenAI工具和技術不斷發(fā)展,各企業(yè)機構必須適應惡意行為者不斷發(fā)展的技術或新的攻擊向量。 

圖1對此進行了說明

image.png

 

及其不應只是試圖跟上新技術發(fā)展的步伐,也需要規(guī)劃和建立一致而有效的AI安全治理計劃,以應對GenAI采用激增的局面和各類新興場景。

AI安全治理項目應整體覆蓋組織架構、技術和政策。其早期任務之一就是制定所有構建或部署AI的團隊必須遵循的標準,包括安全AI開發(fā)、AI數(shù)據(jù)安全和AI安全應急響應標準。中國應與利益相關者和企業(yè)機構領導者合作,制定五個階段的AI安全治理計劃(見表1)。

1: AI安全治理項目的五個階段及主要行動

階段

主要行動

1.樹立意識

這一階段的關鍵是了解AI安全現(xiàn)狀。初步建立跨職能的指導委員會,可為確保所有利益相關者的參與打下基礎。

具體任務:

§  清點AI應用和服務

§  了解威脅態(tài)勢

§  設立指導委員會,該委員會可以獨立運行,也可以是現(xiàn)有的AI指導委員會或網(wǎng)絡安全指導委員會的一部分

2.發(fā)現(xiàn)與維護

發(fā)現(xiàn)過程在這一階段真正開始。很多CIO發(fā)現(xiàn),并沒有人在負責AI安全,也沒有人可以準確地清點企業(yè)的全部AI應用。

具體任務:

§  根據(jù)業(yè)務影響識別用例并進行分類

§  識別相應的攻擊面

§  進行安全風險評估

§  起草“負責、批準、咨詢、告知(RACI)”矩陣,用于責任分配

3.彌補差距

在這一階段,安全漏洞被明顯摸清,為制定補救規(guī)劃奠定了基礎。使用第三方Gen AI應用或與供應商合作時,會明確定義選擇標準和流程。

具體任務:

§  制定用戶政策、培訓和指南

§  定義廠商選擇流程和標準

§  更新RACI矩陣

4.集成

在這一階段,初步的關鍵網(wǎng)絡安全修復工作已經(jīng)完成,重點轉向持續(xù)監(jiān)控和長期管理

具體任務:

§  將AI保護集成到集中統(tǒng)一的安全控制措施中

§  定義指標

§  加強指導委員會的參與和監(jiān)督

§  任命“安全大使”或“安全冠軍”

5.優(yōu)化

重點是優(yōu)化網(wǎng)絡安全工作,以實現(xiàn)業(yè)務韌性、運營差異化和增長。

具體任務:

§  培訓安全和業(yè)務人員

§  建立跨職能實踐社區(qū)(CoP)和開展研討會

§  針對集中式安全工具,開放共享訪問并共同承擔責任




評論


相關推薦

技術專區(qū)

關閉