本文旨在展示開源數據的潛力,結合大數據分析和數據可視化,以表明特定領域的彈性水平,其中包括北約彈性評估的基線要求(blr)。
本文中描述的概念驗證提取了特定領域的相關彈性指標,涵蓋了包括能源和交通在內的選定基線要求。概念驗證使用交互式儀表板,允許終端用戶從多個角度探索可用的公共數據,以及對這些數據進行高級分析和機器學習模型的結果。
關鍵詞:大數據分析,機器學習,彈性,能源,交通,媒體
軍隊越來越意識到大數據分析在作戰和戰略決策中的重要性和作用。在正確的時間獲得相關信息一直是做出最佳決策的關鍵因素。今天,這種影響甚至更大,因為數據和信息可以大規模收集并提供給每個人。技術和人工智能方法成為利用數據的巨大推動者[1]。
廣泛可用的開源數據來自媒體、科學文章、相關(專家)門戶網站,涵蓋經濟、政治、社會、能源、交通運輸等帶來了創造更有洞察力的背景的可能性,并通過分析各種來源和整合結果為任何評估提供了有價值的新維度。
從軍事角度來看,我們從開源數據中確定了許多跨不同領域的重要指標,這些指標可以用于評估整個聯盟的戰備和恢復能力。來自不同領域的許多指標似乎相互影響,可以相互關聯。
在去年,北約CI機構數據科學團隊參與了一項創新性的概念驗證,包括轉型和作戰命令,如ACT、SHAPE和JFCBS;為了識別、提取、計算和呈現開源數據中最相關的指標,以支持整個聯盟的彈性評估。由于彈性評估是一項復雜的評估,它依賴于許多不同領域和事件的關系,因此該項目定義了較小的范圍,重點關注以下關鍵領域:
?關鍵基礎設施——醫院、發電廠、港口、液化天然氣接收站和軍事設施
?能源——專注于電力和天然氣
?交通——專注于空運、公路、海運和接近實時的交通指標
?媒體——態勢感知
其主要目標是通過使用來自公開數據集的大數據來確定相關指標。然后創建有用的策劃數據和機器學習(ML)模型,以識別相關關系,并提供對當前情況和破壞性事件影響的見解。為了提高結果的準確性,我們最初關注于一個特定的地理區域。
不確定性是混合沖突的一個核心概念。許多混合沖突是隱蔽的、可否認的,并在正常的國家間關系和武裝沖突之間的灰色地帶進行。此外,混合沖突的信號可能來自于在很長一段時間內收集的大量公開和秘密來源,并且具有不同程度的可靠性。這些因素加在一起,對混合沖突的決策構成了重大挑戰。處理高層次的不確定性要求在情報分析和評估方面有創新的解決方案。在這方面,一個有希望的方法是對不確定性的明確估計。在這項研究中,我們借鑒了統計學、情報分析和人工智能的知識,提出了一種新的方法,并為量化和系統地估計不確定性開發了一個統計模型。該模型考慮了情報分析中不確定性的幾個重要因素:來源可靠性、信息可信度、概率語言和及時性。我們使用標記的和模擬的數據測試了我們的方法,并討論了使用人工智能和數據科學實現這一過程自動化的機會和挑戰。通過這樣做,這項研究向智能分析工具邁出了一步,以減輕混合沖突決策中的不確定性挑戰。
不確定性是情報分析中的一個基本概念。幾乎所有的情報評估都應該用不確定性來表達。這是因為評估要么試圖從不完整的或往往是模糊的數據中做出推斷,要么試圖預測未來的事件(Mandel & Irwin, 2020)。混合沖突的幾個特點1增加了情報分析和評估的不確定性。許多混合沖突是隱蔽的、可否認的,并在正常的國家與國家之間的關系和武裝沖突之間的灰色地帶進行,導致新出現的威脅的信號很弱,而且往往不完整(Monaghan, Cullen & Wegge, 2019)。此外,混合沖突的信號可能來自于長期收集的大量公開和秘密來源,并具有不同的可靠性。這些問題因日益數字化而被放大,數字化導致了公開來源信息的爆炸性增長,而這些信息越來越容易被誤傳或假傳(Treverton, 2021)。
混合沖突的這些特點給情報分析人員帶來了一些挑戰:不確定性增加、模糊性、不可捉摸性、低于檢測閾值的活動、信息過載和數字來源的爆炸(Cullen,2018)。這些挑戰反過來又加劇了情報界對不確定性的系統和定量估計的呼吁。在混合沖突的情報分析中,需要創新方法來處理這些前所未有的不確定性和模糊性。這反過來將支持決策者制定應對復雜的混合威脅的政策。這些呼吁得到了實證研究的響應,實證研究顯示有可能減少分析偏差,改善合作,促進分析透明度,并為實現(半)自動化的情報分析過程鋪平道路(TR-SAS-114,2020)。
盡管各國情報組織之間存在定性標準,并且已經提出了改進不確定性估計的方法,但據我們所知,沒有任何情報組織采用系統的不確定性估計方法(Friedman & Zeckhauser, 2012)。換句話說,不確定性的估計或多或少地隱含在 "分析者的頭腦中"。此外,不確定性最常以定性方式(如 "極有可能")而非定量方式(如 "75%可能")來表達。盡管對不確定性的量化存在一些不情愿的態度--擔心涉及到對 "最佳估計 "的判斷的虛幻的具體感(有 "硬數字")--數值有可能緩解語言障礙,解決不確定性詞匯中的語義差異,并鼓勵分析者的責任感(Dhami & Mandel, 2020)。
這項研究試圖解決這些差距,并提出一種系統地、定量地估計和表達不確定性的方法。這項工作的新穎之處在于,它提出并測試了一種從情報報告本身提取不確定性信息的方法,而不是嚴重依賴分析員的判斷(例如,Lesot, Pichon & Delavallade, 2013;Schum & Morris, 2007)。因此,我們的方法也旨在對不確定性進行更客觀和可重復的估計。另一個主要貢獻是,我們考慮了這個過程自動化的步驟、機會和挑戰(使用數據科學和人工智能的技術)。畢竟,系統地手工估計不確定性將極大地增加分析者的工作量。通過這樣做,這項工作向更快、更系統、更客觀的不確定性判斷邁出了一步,減輕了混合沖突中決策支持的挑戰。
作者領導了一項跨學科的基準測試工作:決策分析、運籌學、風險建模、管理科學、沖突和戰斗模擬以及物流和供應鏈模擬。實踐者們自愿描述他們的做法并向其他人學習。雖然不同的實踐者群體對局部實踐達成了共識,但群體之間的互動卻很少。
以前的出版物描述了從基準測試中突出最佳實踐。我們發現了兩個差距:一個是令人不安的高比例的不良實踐,另一個是缺乏執行層面的風險評估。高管們往往缺乏時間或技術背景來對提供給他們的分析結果進行風險評估。
本文為高管們提供了一種新的、簡單的風險評估方法。六個非技術性的問題解決了在基準測試中看到的大部分風險。該方法是基于一個建立在國際基準工作基礎上的檢查表。作者還對具體的風險進行了研究,包括因對分析的依賴程度增加而產生的法律風險。在這些風險中,有一些與人工智能有關的獨特問題。
識別風險的工作表明危險來自幾個方面,并產生了一個不需要深入的建模、仿真和分析(MS&A)知識的風險檢查表。本文介紹了該清單,以及支持該清單的一些更深入的MS&A原則。這對管理人員和從業人員都很有用。
該研究得到了一些專業協會、行業團體和非營利性教育協會的支持,包括國際服務/行業培訓、模擬和教育會議(I/ITSEC)、石油工程師協會、電氣和電子工程師協會和概率管理。
我們之前已經發表了(Roemerman等人)研究的本質和我們的數據收集。回顧一下,在2014年和2015年,作者提出了一個跨領域的基準研究。作為在多個領域工作的從業者,我們注意到一些領域的 "正常 "仿真和建模實踐在其他領域是未知的。我們向幾個組織提出了一個多領域的研究。普遍來說,反饋是積極的,但沒有人愿意領導這項工作。
最終,我們決定自己進行,并開始招募幫助。我們得到了許多我們曾經接觸過的組織的幫助,還有一些組織也加入了我們的行列:
總的來說,這些組織有大約200,000名會員(不包括這兩家公司,他們的雇員可能是我們所接觸的協會的會員)。其中,我們估計只有不到10%的會員是建模、仿真和分析(MS&A)的積極從業者。在這些會員中,我們估計大約有2100人看到了我們的調查和采訪邀請。
除了與這些大型團體合作外,我們最初以40多個個人為目標,因為他們的組織聲譽或他們個人的卓越聲譽而參與我們的數據收集。我們點名征集這些目標,事實證明他們是一個豐富的信息來源。最后,我們接觸了來自65個組織的126名個人,涉及許多領域(見圖1)。
混合沖突的分析、評估和決策是復雜的,原因有很多:混合活動的信號是多維的;結合多種類型的信息是必要的;許多混合沖突是隱蔽的,或者很難從正常的國家與國家的關系中分辨出來。對混合沖突的評估需要包括對手行為者的戰略目標、被利用的社會脆弱性和背景事件、跨社會領域的活動,以及對目標社會的影響。在早期的工作中,我們根據混合沖突的這五個要素提出了一個分析過程。在本文中,我們在這項工作和更廣泛的情報文獻的基礎上,解決如何進行混合沖突評估的問題。具體來說,我們概述了一個詳細的評估過程,為決策者提供對形勢的了解,以選擇對混合威脅的預防性和反應性反應。所提議的程序的優點在于它對混合沖突的綜合評估,結合了目標社會的觀點和對手行為者的觀點。此外,所提出的評估功能依賴于人類產生的分析性見解--考慮到背景、模糊性、規范性--和從傳入數據中產生的信號--考慮到結構化和結合來自多個來源的信息--之間的持續互動。這種綜合視角超越了傳統的分析方法。我們提出的評估很適合引導人類和自動化情報的結合,并提供了一個分析方法和工具的藍圖,以應對混合沖突中的決策挑戰。
混合沖突是國家之間的一種沖突,大多低于公開戰爭的門檻(見歐盟等的定義,2018年,北約,2019年和荷蘭層面的定義,NCTV,2019年)。混合沖突中的國家使用許多國家權力的措施來影響其他社會。這些措施包括外交、信息、軍事、經濟、金融、情報和執法手段。戰略層面上的混合沖突案例研究需要敘事和社交媒體操縱、針鋒相對的金融和經濟制裁、外交威脅、大規模軍事演習和許多其他全社會的互動。許多類型的混合威脅在前些年的經驗中是已知的。例如,美國的選舉影響,中國通過基礎設施投資的影響,以及俄羅斯在破壞烏克蘭穩定方面的努力。
混合沖突給決策者帶來了不同的挑戰。這是因為公開的軍事對抗大多被避免,只有低于武裝沖突的法律門檻的活動才被應用。網絡領域和信息領域是針對政府和社會的影響活動發生的主要領域。由于混合沖突中許多活動的隱蔽性或模糊性,在將活動歸于國家行為者方面存在很大問題。最后,混合沖突是對各種手段和方法的創造性安排,它創造了新的情況,對分析來說具有內在的挑戰性。在這篇文章中,更詳細地研究了在面臨上述挑戰時對混合沖突的評估。
混合戰爭為沖突推波助瀾,以削弱對手的實力。相關的行動既發生在物理世界,也發生在媒體空間(通常被稱為 "信息空間")。防御混合戰爭需要全面的態勢感知,這需要在兩個領域,即物理和媒體領域的情報。為此,開源情報(OSInt)的任務是分析來自媒體空間的公開信息。由于媒體空間非常大且不斷增長,OSInt需要技術支持。在本文中,我們將描述對物理世界的事件以及媒體事件的自動檢測和提取。我們將討論不同類型的事件表征如何相互關聯,以及事件表征的網絡如何促進情景意識。
開源情報(OSInt)的任務是探索和分析可公開獲取的媒體空間,以收集有關(潛在)沖突的信息,以及其他主題。所謂 "媒體空間",我們指的是通過傳統媒體(如電視、廣播和報紙)以及社交媒體(包括各種網絡博客)傳播的非常龐大、快速且持續增長的多語種文本、圖像、視頻和音頻數據語料庫。社會媒體大多是平臺綁定的。平臺包括YouTube、Twitter、Facebook、Instagram和其他[1,2]。在很大程度上,媒體空間可以通過互聯網訪問。很多部分是對公眾開放的。然而,也存在一些半開放的區域,其中有潛在的有價值的信息,但并不打算讓所有人都能接觸到,例如Telegram和Facebook頁面。
媒體空間提供關于物理世界的信息:發生了什么?哪些事件目前正在進行?未來計劃或預測會發生什么?它對物理世界的事件反應非常快,也就是說,幾乎是立即提供信息[3]。因此,媒體空間似乎是物理世界中事件的一個有希望的 "傳感器"。然而,從鋪天蓋地的大量信息中檢索出特別相關的信息仍然是一個挑戰,因為到目前為止,所提供的大多數信息是完全不相關的,至少對軍隊來說是如此。此外,媒體空間并不一致--它包括真實和虛假信息,因此,事實核查是一個進一步的挑戰。
除了作為物理世界的傳感器,媒體空間還是意識形態、意見和價值觀的論壇。它是一個重要的空間,用于協商一個社會認為是允許的、規定的或禁止的東西,并用于表現情緒和偏見。因此,它已成為混合戰爭的戰場,即以 "通過暴力、控制、顛覆、操縱和傳播(錯誤的)信息"([4],第2頁)為目的進行的行動。(錯誤的)信息行動導致我們稱之為 "媒體事件"。媒體事件可以被觸發,以影響情緒、意識形態和公眾對物質世界的看法。
在當前復雜的多域作戰中,白圖是指揮官了解威脅及其對任務的影響的關鍵因素。建模和仿真(M&S)與數據科學(DS)可以支持 a)最新的白圖開發 b)SME的分析工作,估計任何指揮級別的軍事行動的相關風險。本文討論了北約實施的M&S和數據科學用例,以支持SACEUR的責任區(AOR)彈性風險表述。開源數據經過分析、結構化和操作,以自動方式和按需生成與彈性7基線要求(7BLR)相關的地理參考數據/信息,涵蓋政府的連續性、能源供應、人員流動、食品和水、大規模傷亡、通信系統和運輸系統在JFC的AOR。它作為預測 SACEUR運營風險的北約彈性模型的輸入。系統動力學范式被用來開發北約彈性模型,作為在戰略層面處理定性和定量輸入數據和抽象彈性語言的混合的理想方法。戰略沖擊會影響白圖狀態的當前和未來。實施機器學習技術來估計戰略沖擊參數。該原型已在最終用戶的實驗中使用,并且已確定驗證步驟。
價值1750億美元的電子游戲生態系統龐大且不斷發展,為全球28億游戲玩家提供服務,包括與當前和未來軍事建模和仿真(M&S)直接相關的技術和工作方式。英國國防科學與技術實驗室(Dstl)的研究計劃委托進行了一項研究,分析游戲生態系統,以了解哪些新興或現有方法可以為軍事訓練和更廣泛的M&S提供顯著收益。重點是“建模和仿真即服務 (MSaaS)” ,以及為更復雜的多域操作培訓的成本效益可能出現“階梯式變化”。首先生成了游戲和軍事M&S功能的熱圖,以突出與軍事最相關的領域。通過與Dstl主題專家合作,確定了軍事M&S通過利用游戲行業內的技術和能力實現現代化的20個關鍵機會。它們是跨技術、人員和流程的速贏和長期機會的混合體。其中的關鍵是游戲引擎技術不斷增長的潛力;社區在游戲和游戲開發中的價值;以及廣泛的網絡訪問作為M&S發現、共享和創新的推動者的作用。
人工智能領域的進展繼續擴大這組技術的潛在軍事應用范圍。本文探討了信任在人機聯合作戰中的關鍵作用,以及依靠人工智能來補充人類認知的潛在影響。如果依靠人工智能來準確處理傳感器數據,操作自主系統和平臺,或通過擬議的作戰概念(如以決策為中心的戰爭)提供有利的決策支持,設想機器智能的中央指揮和控制作用,那么信任機器智能將是未來作戰中的一個關鍵組成部分。鑒于這些技術和理論的發展,信任的概念對于機器智能在戰術和作戰層面的軍事行動中的使用變得高度相關,正確校準的信任水平是安全和有效行動的基礎。在簡要回顧了機器智能的最新進展和對信任概念的探索之后,本文概述了人工智能在戰場上的當前和潛在應用,以及由不充分或不合理的高信任度帶來的挑戰。
縱觀歷史,技術已經擴大了武裝沖突的領域,戰術交戰的節奏,戰場的地理范圍,以及指揮官與部隊溝通的手段。技術創新--包括軍事和民用--改變了軍隊的作戰方式以及國家計劃和進行這些沖突的方式。在21世紀,迄今為止,很少有進步能像統稱為人工智能(AI)的一組技術那樣獲得如此多的關注。人工智能正準備迎來一個新的時代,在這個時代,機器智能和自主性正在為軍事行動的規劃和執行產生明顯的新概念。算法戰爭可能會帶來一些獨特的東西:增強甚至取代人類決策過程的系統,其速度可能超過人類規劃者的認知能力。
新興技術的整合提出了任何數量的基本組織和倫理問題,值得關注。本文將采用定性的社會科學方法,重點討論人類-自治團隊(HAT)的一個重要方面:鼓勵對機器智能的適當信任程度。有大量的學術文獻關注自動化或機器人技術中的信任問題,但有關具體軍事應用的工作較少。當人工智能在聯合作戰中被實際部署時,在信任方面有哪些挑戰和機會?在簡要回顧人工智能和概述機器智能在戰場上的可能應用之后,本文在分析鼓勵適當信任水平的陷阱和潛在解決方案之前,探討了信任和信任校準的概念。
幾十年來,人類一直對賦予機器某種形式的人工智能的可能性著迷,Nils Nilsson將其定義為 "致力于使機器智能化的活動,而智能是使一個實體在其環境中適當運作并具有預見性的品質"。在數字時代的早期,出現了兩種廣泛的人工智能方法。自上而下的專家系統方法使用復雜的預編程規則和邏輯推理來分析一個特定的數據集。對于具有可預測規則的明確定義的環境--諸如分析實驗室結果或下棋等應用--專家系統或 "符號 "人工智能(基于符號邏輯)的性能主要取決于處理速度和算法的質量。另一大類使用自下而上的機器學習方法,模擬人類通過檢測數據中的模式進行學習的方式。神經網絡是一種以人腦為模型的機器學習形式,能夠通過使用多個(因此是 "深")人工神經元層來識別復雜的模式,是被稱為 "深度學習 "的技術的基礎。通過其在數據集中尋找關系的能力,這種技術也被稱為 "連接主義"。
自上而下、基于規則的符號系統和自下而上的機器學習連接主義技術之間的差異是很大的,特別是關于它們的潛在應用范圍和靈活性。深度學習方法的顯著特點是能夠將學習與它所訓練的數據集分開,因此可以應用于其他問題。基于規則的算法可以在狹義的任務中表現得非常好,而深度學習方法能夠迅速找到模式,并在 "蠻力 "專家系統計算方法無效的情況下有效地自學應用。最近的一些人工智能進展顯示了模仿創造力的能力,產生了有效的解決問題的方法,這些方法對人類來說可能是反直覺的。
然而,總的來說,人工智能仍然是狹窄的或 "脆弱的",即它們在特定的應用中功能良好,但在用于其他應用時仍然不靈活。與人類的認知相比,鑒于機器的計算速度遠遠超過人腦,機器智能在將邏輯規則應用于數據集時要優越得多,但在嘗試歸納推理時,它必須對數據集或環境進行一般性的觀察,這就顯得不足。大多數機器學習仍然需要大量的訓練數據集,盡管新的方法(包括生成對抗網絡(GAN)和 "小于一次 "或LO-shot學習)正在出現,需要非常小的數據集。圖像識別算法很容易被混淆,不能像人類那樣立即或直觀地理解情景背景。這種脆性也延伸到了其他問題,比如游戲。雖然人工智能在視頻游戲中經常表現出超人的能力,但他們往往不能將這種專業知識轉移到具有類似規則或玩法的新游戲中。
雖然人工智能技術繼續在變得更加適應方面取得重大進展,但任何接近人類的人工通用智能仍然難以實現。評估人工智能的近期前景因該技術的漸進式進展而變得更加復雜。圍繞著人工智能的炒作--在很大程度上被深度學習方法的成功所推動--既導致了對該技術未來的不切實際的期望,也導致了對其非常大的進展的正常化。正如一份報告所指出的,"人工智能將一項新技術帶入普通人的視野,人們對這項技術習以為常,它不再被認為是人工智能,而出現了更新的技術"。盡管象征性的人工智能和各種形式的機器學習構成了該領域最近的大部分進展,也許除了融合這兩種方法的嘗試之外,未來仍然不確定。一些人猜測,機器學習技術帶來的進展可能會趨于平穩,而另一些人則保持樂觀。相關的技術進步,如短期內的計算機芯片設計和長期內的量子計算,可能會影響進一步進展的速度。
當代和新出現的安全威脅以及從最近的軍事行動中吸取的教訓已經證明,為了在傳統的物理領域(陸地、空中、海上、太空)實現作戰目標,確保在非物理領域的主導地位至關重要,即網絡空間、電磁環境(EME)和信息環境。因此,除了物理作戰領域之外,在非物理領域取得優勢的能力對于實現戰役的軍事和非軍事目標具有決定性意義。
作戰人員將面臨消除沖突,協作,同步和整合行動的挑戰,以實現并發揮協同效應以應對多種威脅,其中可能還包括來自每個作戰領域對手的武裝沖突閾值以下的行動,包括非物質的。
本文探討了作戰環境聯合情報準備 (JIPOE) 作為支持聯合作戰規劃、執行和評估的主要工具的作用和意義,從而有助于多域作戰 (MDO) 的同步和協調。在這方面,基于政治、軍事、經濟、信息、基礎設施-物理、時間(PMESII-PT)方法,不可能將對當代作戰環境(OE)的分析局限于物理領域及其與非物理領域的關系。相反,作者們相信,確定一種合適的方法來關注在非物理領域單獨或聯合進行的活動影響,它們在PMESII-PT所有領域的相互融合和實際操作領域的相關性,將大大有助于友軍識別和評估對手的重心(COG)、關鍵弱點、意圖和行動路線(COAs)的能力,包括各自的指標。JIPOE將為聯合部隊指揮官(JFC)提供OE的整體視圖,將與戰術層面密切合作、共享和開發,通過結合不同領域的能力,應該能夠壓倒對手的部隊。這種集中控制和分散執行的方法將有助于在作戰和戰術層面之間產生協同效應。
未來的軍事行動將以物理和非物理層面的融合為特征,眾多不同的行為者將在其中運作。任何部隊都需要適應極其復雜的作戰環境和大量的作戰變量,需要適應性地使用一系列武器系統來產生致命和非致命的效果。因此,除了物理作戰領域(即陸地、空中、海上和太空),在非物理領域(網絡空間、EME、信息環境)取得優勢的能力將對實現戰役的軍事和非軍事目標具有決定性意義[1, p.280]。
OE是影響能力運用和影響指揮官決策的條件、環境和影響因素的綜合體[2, p.3]。了解OE的因素和條件不僅是所有計劃活動,特別是行動設計的關鍵前提,也是友軍保護和許多其他相關任務的關鍵前提[3, p.41]。
JIPOE代表了一種系統的方法,用于分析有關OE和對手的信息。它可以應用于全部的軍事行動。指揮官和參謀部在危機背景、根本原因和具體動態方面,對戰區形成共同的理解和整體的看法。它使指揮官能夠直觀地看到問題的程度,以及他們如何塑造和改變OE,使之成為他們的優勢,這將為他們的決策提供信息[2, p.3-5]。
JIPOE產品極大地促進了聯合(即作戰)層面的軍事行動的規劃和執行。現代軍隊,特別是北大西洋公約組織(NATO)內的軍隊,幾十年來在討論跨領域(陸、海、空)的協調行動時一直使用聯合這一術語。如今,由于全球安全環境的巨大變化以及俄羅斯和中國日益增長的野心,為了挑戰潛在的同行對手,需要采取多領域的方法。在傳統的戰爭門檻下,盟國及其合作伙伴已經受到了跨越物理和非物理領域的持續攻擊[4, p.2]。MDO一詞不同于聯合行動,因為它旨在關注跨越多個領域的行動,而不考慮服務的歸屬,不一定是由多個部門進行的行動[5,p.49]。
圖1:支持聯合行動的當前JIPOE流程的可視化。
圖2:提出支持MDO的JIPOE過程方案。