人工智能雙刃劍，如何把好“安全關”？

中新網北京11月3日電 (記者 夏賓)“以深度學習為核心的人工智能技術是一把雙刃劍，其作為賦能技術有著極其豐富的應用空間，更帶來了前所未有的安全挑戰。”中國工程院院士鄔江興近日在京參加2024綠盟科技TechWorld智慧安全大會時這樣說。

面對人工智能這把雙刃劍，我們該如何把好“安全關”？鄔江興首先指出，AI算法模型存在“三不可”的基因缺陷，即不可解釋性、不可判識性以及不可推論性。

他認為，整個AI安全可分為內生安全問題和非內生安全問題，內生又分為個性問題和共性問題，當下，網絡內生安全問題正在全面挑戰當今世界生態系統底層驅動技術。網絡內生安全范式應當是AI可信應用系統理論發展方向，智能時代需要正確的理論方向，以確保AI技術的健康發展。

中國科學院院士馮登國談到，當前，人工智能技術已經從較為單一的算法發展階段跨越到了軟件、硬件與應用場景相結合的全方位、一體化的發展階段，AI算法的更新迭代，使得傳統安全分析技術無法適應人工智能領域出現的新算法和新模型。

馮登國表示，應對網絡空間安全形勢變化，需要更堅實、富有彈性的網絡空間安全保障體系。他從數據泄露、關基保護、深度偽造、錯誤信息涌現等角度解讀大模型伴生的安全風險和挑戰，并從政策法規制定、前沿技術探索和創新能力提升三個維度思考應對之策。

綠盟科技集團董事長、總裁胡忠華直言，近年來持續加大在數據安全、人工智能等領域的創新投入。一方面，圍繞日志降噪、推理研判、自動化滲透攻擊三個安全實戰場景，持續迭代安全垂域大模型，通過提示詞工程構建安全專家思維鏈，并使用檢索增強、知識圖譜提升可信度和專業度，為用戶提供具備可落地的安全檢測、研判能力。

另一方面，持續加強技術研究與創新，從構建可信任的安全智能生態出發，逐步構建“大模型+小模型”協同安全運營新體系，并在大模型安全性方向進行深入研究，發布了AI大模型安全威脅矩陣及風險評估工具，幫助用戶在自有模型時管理安全風險。

教育部信息技術新工科聯盟網絡空間安全工委會主任、杭州市人工智能學會副理事長胡瑞敏認為，在數據被列為第五大生產要素的今天，應對數據供不出、流不動、安全保障難等挑戰，亟需構建一個面向數據要素化的數據生命周期安全防護體系。

胡瑞敏以數據安全風險事件為切入點，引出當前數據安全面臨的困境，即數據分級分類、可信確權以及數據安全利用，并進一步對其團隊在數據安全防護密碼技術領域的研究工作進行了介紹。

國家工業信息安全發展研究中心首席專家、數據安全所所長李俊指出，數據作為數字經濟時代的關鍵新興生產要素，保障數據安全已成為事關國家安全與經濟社會發展的重大問題。隨著新一代信息技術與制造業深度融合，工業企業數字化、網絡化、智能化加速推進，工業數據載體漏洞和后門、非受控運維、數據暴露面等數據安全風險日益突出。

李俊稱，在此形勢下，行業主管部門已構建工信領域數據安全“1+5”政策體系，加快數據安全監管技術能力建設與實踐落地，切實指導工業企業提升數據安全管理和防護水平。(完)