智慧公安以大數據、云計算、人工智能、物聯網和移動互聯網技術為支撐,以“打、防、管、控”為目的,綜合研判為核心,共享信息數據資源,融合業務功能,構建公安智慧大數據平臺,實現公安信息數字化、網絡化和智能化。智慧公安大數據平臺,全面感知、綜合分析、整合公安業務資源和社會化信息資源,提供高效的警務管理手段,拓展便民服務空間。
視頻監控是安全防范系統的重要組成部分,監控系統包括前端攝像機、傳輸線纜、視頻監控平臺。視頻監控以其直觀、準確、及時和信息內容豐富而廣泛應用于許多場合。視頻監控主要包括城市公共區域建設的“天網”系統、社會視頻監控系統、卡口監控系統。視頻監控采集的視頻圖像數據具有極高的價值。當發生案件時,可以運用視頻監控發現線索、鎖定目標、證實犯罪,作為新的偵查途徑。
視頻識別主要包括視頻信息的采集及傳輸、視頻檢測和分析處理三個環節。通過智能分析模塊,對視頻畫面進行識別、檢測、分析,對異常情況進行目標和軌跡標記。智能分析模塊基于人工智能和模式識別原理的算法。
智慧公安視頻偵查研判大數據平臺
智慧公安視頻偵查研判大數據平臺,包括數據中心、案件視頻資料管理、視頻偵查系統、模糊圖像智能處理系統、人臉比對系統、卡口車輛智能檢索系統、軌跡分析系統、串并案分析系統。
數據中心
大數據中心提供對海量數據的處理、存儲、計算、分析、數據挖掘和數據服務。數據資源涉及公安所有的數據資源類型,包括市局各部門、各專業警種等業務系統數據,各種社會數據資源和部省資源;涵蓋各種結構化數據,以及視頻、圖片、音頻、文檔、互聯網數據、電子筆錄等半結構化和非結構化數據。
數據中心建設包括以下內容:
數據接入,包括元數據管理、數據定義、數據讀取、數據處理;數據來源包括視頻圖像、外部數據、內部警務數據。
數據治理,包括資源編目、數據血緣管理、標簽管理、數據質量管理、數據運維管理。
數據組織,建立基礎數據庫、主數據庫、關聯數據庫、專題數據庫、主題數據庫。
數據服務,包括數據服務接口、API網關。
基于沃達德大數據平臺,通過對海量數據采集、處理、存儲、分析和數據挖掘,根據數據的特性,采用合適的可視化方式,將數據直觀地展現出來,以幫助人們認識數據、理解數據,同時找出包含在海量數據中的規律或者信息,預測未來發展趨勢,進行智能化決策分析,使得數據資產成為核心競爭力。
數據是一種寶貴的資源。利用新技術新方法挖掘現有數據的價值,找到數據間的關聯關系,提高基礎數據的利用率,并預測未來趨勢及行為,是面臨的迫切問題。一批新興的數據處理、挖掘與分析技術不斷涌現,使分析處理海量數據變得更加容易、更加便捷。
通過建設大數據基礎平臺,對已有海量數據進行整合、挖掘和分析,由傳統的經驗決策模式逐步轉變為數據決策模式,可以進一步提升管理水平以及決策效率,并充分挖掘數據資產的重要價值。大數據基礎平臺采用模塊化結構,模塊高內聚、松耦合,應滿足高可靠、實時響應快、安全性好、開放性好,系統應易于操作、易于維護、可擴展性好。
大數據平臺進行數據采集時通常要面對數據結構、業務規則、技術特性(網絡、安全、性能約束)等方面的綜合挑戰。如果數據源和大數據平臺處于相同的網絡環境,具有類似的數據結構和編碼映射,可以通過工具配置或腳本進行采集,如使用Sqoop。當需要面對和對接第三方的數據生產系統,需要遵循對方的抽取協議,以及跨網段的數據訪問,從而需要對采集應用進行一定程度上的定制,可以使用Java NIO、Netty或Mina。
Hadoop是一個成熟的大數據處理框架,允許在集群中使用簡單的編程模型對大規模數據集進行分布式計算。它被設計為可以從單一服務服務器擴展到數以千計的本地計算和存儲節點,并且Hadoop會在應用層面監測和處理錯誤,而不依靠硬件的高可用性,所以Hadoop能夠在一個每個節點都有可能出錯的集群之上提供一個高可用服務。
Hadoop集群主要由兩部分構成:分布式文件系統HDFS和統一資源管理和調度系統YARN。分布式文件系統主要用于海量數據存儲,YARN主要是管理集群的計算資源并根據計算框架的需求進行調度。構成HDFS集群的主要是兩類節點,以主從(master/slave)模式,即一個NameNode(管理者)和多個DataNode(工作者)。構成YARN集群的是兩類節點:ResourceManager和NodeManager,也采用主從(master/slave)架構。
基于沃達德大數據平臺,通過對海量數據采集、處理、存儲、分析和數據挖掘,根據數據的特性,采用合適的可視化方式,將數據直觀地展現出來,以幫助人們認識數據、理解數據,同時找出包含在海量數據中的規律或者信息,預測未來發展趨勢,進行智能化決策分析,使得數據資產成為核心競爭力。