2024-01-29 分類: 網(wǎng)站建設(shè)
(此篇文檔僅用于技術(shù)交流)
一、項(xiàng)目概述:
德清城市大腦以阿里巴巴城市數(shù)據(jù)大腦的技術(shù)框架來組織實(shí)施德清縣級(jí)區(qū)域的智能化城市建設(shè),在基礎(chǔ)技術(shù)框架中,綜合運(yùn)用云計(jì)算、大數(shù)據(jù)、人工智能等多項(xiàng)前沿技術(shù)作為支撐,用數(shù)據(jù)思維重塑城市管理模式,探索開發(fā)的城市管理和城市服務(wù)的前瞻性實(shí)踐項(xiàng)目,建立數(shù)據(jù)資源采集、匯聚、共享和應(yīng)用機(jī)制,強(qiáng)化數(shù)據(jù)智能應(yīng)用。該項(xiàng)目將以德清治理模式突破、服務(wù)模式突破以及德清產(chǎn)業(yè)發(fā)展突破的目標(biāo)出發(fā),建設(shè)能覆蓋德清縣域重點(diǎn)區(qū)域的交警、交通運(yùn)輸、旅游、教育的實(shí)戰(zhàn)應(yīng)用,業(yè)務(wù)應(yīng)用向多維度、精準(zhǔn)化預(yù)測(cè)、精準(zhǔn)化預(yù)警方向深化。未來城市大腦平臺(tái)統(tǒng)一向德清縣各部門提供大數(shù)據(jù)、人工智能和云計(jì)算基礎(chǔ)設(shè)施資源服務(wù),實(shí)現(xiàn)德清縣基礎(chǔ)設(shè)施資源的集約化使用和數(shù)據(jù)的共建共享共用,打造利用城市大腦進(jìn)行城市治理、社會(huì)治理、行業(yè)治理的典范。
一、 軟件部分采購(gòu)需求清單:
附錄:軟件詳細(xì)功能、性能要求:
(一)計(jì)算平臺(tái)基礎(chǔ)軟件擴(kuò)容
1、彈性計(jì)算云服務(wù)器(ECS)軟件
根據(jù)需求動(dòng)態(tài)的創(chuàng)建和分配計(jì)算資源與存儲(chǔ)資源,滿足多樣化的計(jì)算和存儲(chǔ)需求。
根據(jù)上層應(yīng)用需求動(dòng)態(tài)調(diào)整分配給虛擬機(jī)的底層資源,如CPU、內(nèi)存、網(wǎng)絡(luò)和磁盤的份額,根據(jù)負(fù)載變化情況自適應(yīng)調(diào)整虛擬機(jī)到底層物理資源的映射,實(shí)現(xiàn)數(shù)據(jù)中心各資源節(jié)點(diǎn)的負(fù)載均衡;根據(jù)虛擬網(wǎng)絡(luò)的動(dòng)態(tài)構(gòu)建技術(shù),將分布在不同網(wǎng)絡(luò)的虛擬機(jī)連接起來形成獨(dú)立的虛擬網(wǎng)絡(luò)。實(shí)現(xiàn)以虛擬網(wǎng)絡(luò)為單元的資源動(dòng)態(tài)分配,并解決虛擬網(wǎng)絡(luò)到底層物理節(jié)點(diǎn)的資源映射問題,實(shí)現(xiàn)虛擬網(wǎng)絡(luò)多機(jī)協(xié)同計(jì)算。
2、負(fù)載均衡服務(wù)(SLB)
負(fù)載均衡(Server Load Balancer,簡(jiǎn)稱SLB)是對(duì)多臺(tái)云服務(wù)器進(jìn)行流量分發(fā)的負(fù)載均衡服務(wù)。SLB可以通過流量分發(fā)擴(kuò)展應(yīng)用系統(tǒng)對(duì)外的服務(wù)能力,通過消除單點(diǎn)故障提升應(yīng)用系統(tǒng)的可用性。
SLB服務(wù)通過設(shè)置虛擬服務(wù)地址(IP),將位于同一地域(Region)的多臺(tái)云服務(wù)器(ECS)資源虛擬成一個(gè)高性能、高可用的應(yīng)用服務(wù)池;再根據(jù)應(yīng)用指定的方式,將來自客戶端的網(wǎng)絡(luò)請(qǐng)求分發(fā)到云服務(wù)器池中。
SLB服務(wù)會(huì)檢查云服務(wù)器池中ECS的健康狀態(tài),自動(dòng)隔離異常狀態(tài)的ECS,從而解決了單臺(tái)ECS的單點(diǎn)問題,同時(shí)提高了應(yīng)用的整體服務(wù)能力。在標(biāo)準(zhǔn)的負(fù)載均衡功能之外,SLB服務(wù)還具備TCP與HTTP抗DDoS攻擊的特性,增強(qiáng)了應(yīng)用服務(wù)器的防護(hù)能力。
根據(jù)業(yè)務(wù)的不同,負(fù)載均衡提供四層及七層負(fù)載均衡服務(wù)。
(1)SLB(Server Load Balance)服務(wù)通過設(shè)置虛擬服務(wù)地址(IP),將位于同一地域(Region)的多臺(tái)云服務(wù)器(Elastic Compute Service,簡(jiǎn)稱ECS)資源虛擬成一個(gè)高性能、高可用的應(yīng)用服務(wù)池;再根據(jù)應(yīng)用指定的方式,將來自客戶端的網(wǎng)絡(luò)請(qǐng)求分發(fā)到云服務(wù)器池中。
(2)SLB服務(wù)會(huì)檢查云服務(wù)器池中ECS的健康狀態(tài),自動(dòng)隔離異常狀態(tài)的ECS,從而解決了單臺(tái)ECS的單點(diǎn)問題,同時(shí)提高了應(yīng)用的整體服務(wù)能力。
(3)在標(biāo)準(zhǔn)的負(fù)載均衡功能之外,SLB服務(wù)還具備TCP與HTTP抗DDoS攻擊的特性,增強(qiáng)了應(yīng)用服務(wù)器的防護(hù)能力。
(4)SLB服務(wù)是ECS面向多機(jī)方案的一個(gè)配套服務(wù),需要同ESC結(jié)合使用。
(5)整個(gè)SLB系統(tǒng)由3部分構(gòu)成:四層負(fù)載均衡,七層負(fù)載均衡 和 控制系統(tǒng);
(7)七層負(fù)載均衡,采用開源軟件Tengine;
(8)控制系統(tǒng),用于配置和監(jiān)控 負(fù)載均衡系統(tǒng)。
流計(jì)算產(chǎn)品Blink支持無單點(diǎn)故障;服務(wù)可用性不低于99.9%;實(shí)時(shí)計(jì)算服務(wù)底層通過分布式冗余存儲(chǔ)保證中間計(jì)算狀態(tài)可靠性;狀態(tài)可靠性不低于99.99%;datahub組件承載規(guī)模能力支持單集群規(guī)模支持1000臺(tái)物理機(jī)以上,日均壓縮后數(shù)據(jù)量PB級(jí)別。
(1) 安全隔離
a) 不同用戶的云服務(wù)器部署在不同的專有網(wǎng)絡(luò)里。
b) 不同專有網(wǎng)絡(luò)之間通過隧道ID進(jìn)行隔離。專有網(wǎng)絡(luò)內(nèi)部由于交換機(jī)和路由器的存在,所以可以像傳統(tǒng)網(wǎng)絡(luò)環(huán)境一樣劃分子網(wǎng),每一個(gè)子網(wǎng)內(nèi)部的不同云服務(wù)器使用同一個(gè)交換機(jī)互聯(lián),不同子網(wǎng)間使用路由器互聯(lián)。
c) 不同專有網(wǎng)絡(luò)之間內(nèi)部網(wǎng)絡(luò)完全隔離,只能通過對(duì)外映射的IP(彈性公網(wǎng)IP和NAT IP)互聯(lián)。
(2)訪問控制
a) 靈活的訪問控制規(guī)則。
b) 滿足政務(wù),金融的安全隔離規(guī)范。
(3)軟件定義網(wǎng)絡(luò)
a) 按需配置網(wǎng)絡(luò)設(shè)置,軟件定義網(wǎng)絡(luò)。
b) 管理操作實(shí)時(shí)生效。
(4)網(wǎng)絡(luò)連接方式
b) 支持專線連接。
4、關(guān)系型數(shù)據(jù)庫(kù)服務(wù)(RDS)
關(guān)系型數(shù)據(jù)庫(kù)服務(wù)RDS為用戶提供無運(yùn)維的云數(shù)據(jù)庫(kù)服務(wù);可以服務(wù)于有傳統(tǒng)數(shù)據(jù)庫(kù)需求的用戶,可以不用改動(dòng)代碼直接將應(yīng)用移植到該服務(wù)之上。
提供高效的調(diào)度系統(tǒng),備份系統(tǒng),高可用控制系統(tǒng),在線遷移系統(tǒng)以及監(jiān)控系統(tǒng)。解決容量動(dòng)態(tài)擴(kuò)展的挑戰(zhàn),不用擔(dān)心數(shù)據(jù)庫(kù)的容量(性能與空間)瓶頸。能夠隨著用戶數(shù)和訪問量的變化,可以靈活的調(diào)整數(shù)據(jù)庫(kù)的容量;提供99.9%的高可用性(提供有效服務(wù)時(shí)間占總時(shí)間的比例),每份數(shù)據(jù)都保留兩份并可實(shí)時(shí)切換;實(shí)現(xiàn)數(shù)據(jù)庫(kù)的動(dòng)態(tài)遷移。
支持HA功能,提供高達(dá)99.9%的在線率,達(dá)到國(guó)內(nèi)先進(jìn)水平。
雙機(jī)熱備,數(shù)據(jù)備份,數(shù)據(jù)恢復(fù),多副本冗余。
兼容MySQL與SQL Server兩種商用數(shù)據(jù)庫(kù)。
能夠提供如下功能:
(1)云數(shù)據(jù)庫(kù)代理:主要通過對(duì)SQL語句的分析,可以做到對(duì)SQL注入監(jiān)測(cè),防暴力攻擊,SQL日志查詢,慢SQL日志查詢等功能,如果某些SQL語句匹配了常見的SQL注入模型的話,將會(huì)被截獲。本模塊在提供系統(tǒng)安全性的同時(shí),用戶還可以使用此模塊對(duì)自己執(zhí)行的SQL語句進(jìn)行查詢和管理,并可根據(jù)監(jiān)測(cè)結(jié)果對(duì)SQL語句進(jìn)行優(yōu)化。
(3)調(diào)度系統(tǒng):調(diào)度系統(tǒng)中最為核心的部分,全面負(fù)責(zé)整個(gè)系統(tǒng)中所有任務(wù)的調(diào)度,以前各大組件之間的協(xié)調(diào)工作;他首先要處理的是各個(gè)任務(wù)之間的互斥關(guān)系,防止并發(fā)任務(wù)帶來的任務(wù)之間沖突;另外要處理的是自身體系的高可用以及穩(wěn)定性;它可以支持多服務(wù)節(jié)點(diǎn)任務(wù)搶占模式進(jìn)行工作,并在服務(wù)節(jié)點(diǎn)之間的健康檢查和任務(wù)接管;使得整個(gè)系統(tǒng)更安全可靠。
(4)備份系統(tǒng):主要負(fù)責(zé)所有集群內(nèi)所有實(shí)例數(shù)據(jù)的備份 ,并進(jìn)行集中存儲(chǔ);系統(tǒng)自身有高可用保護(hù),在多個(gè)備份管理機(jī)之間有健康檢查;發(fā)現(xiàn)有成員不健康會(huì)自動(dòng)接管其任務(wù);備份任務(wù)可以并發(fā)地進(jìn)行,并發(fā)度可以受到精確控制,這樣可以防止IO資源,網(wǎng)絡(luò)資源撐滿。
(5)高可用控制系統(tǒng):負(fù)責(zé)所有實(shí)例主備之間的健康檢查以及實(shí)時(shí)切換。同時(shí)對(duì)于集群擴(kuò)展,新節(jié)點(diǎn)會(huì)自動(dòng)探測(cè)壓力大的節(jié)點(diǎn),并接管任務(wù)。
(6)在線遷移系統(tǒng):在線遷移系統(tǒng)主要負(fù)責(zé)實(shí)例在不同主機(jī)之間的遷移工作,觸發(fā)遷移作業(yè)有一般是物理機(jī)已接近飽和時(shí),為保障用戶使用,我們會(huì)主動(dòng)將部分實(shí)例進(jìn)行遷移,另外當(dāng)用戶需要擴(kuò)容而物理資源不滿足需求時(shí)會(huì)觸發(fā)遷移工作,將該用戶遷移到資源空余的RDS設(shè)備。
(7)監(jiān)控系統(tǒng):負(fù)責(zé)系統(tǒng)正常運(yùn)轉(zhuǎn)的檢查,以及實(shí)例相關(guān)狀態(tài)和性能數(shù)據(jù)收集;如實(shí)例監(jiān)控、物理資源監(jiān)控、實(shí)例使用資源監(jiān)控、系統(tǒng)一致性監(jiān)控、網(wǎng)絡(luò)監(jiān)控及報(bào)警功能。
5、數(shù)據(jù)管理
提供RDS數(shù)據(jù)管理系統(tǒng)、ADS數(shù)據(jù)管理系統(tǒng)。
6、開放存儲(chǔ)服務(wù)軟件(OSS)
需要提供海量、安全、低成本、高可靠的云存儲(chǔ)服務(wù)??梢赃M(jìn)行以下操作:
a) 創(chuàng)建一個(gè)或者多個(gè)存儲(chǔ)空間
b) 每個(gè)存儲(chǔ)空間中添加一個(gè)或多個(gè)文件
c) 通過獲取已上傳文件的地址進(jìn)行文件的分享和下載
d) 通過修改存儲(chǔ)空間或文件的屬性或元信息來設(shè)置相應(yīng)的訪問權(quán)限
e) 通過云控制臺(tái)執(zhí)行基本和高級(jí) OSS 任務(wù)
f) 通過開發(fā)工具包 SDK 或直接在應(yīng)用程序中進(jìn)行 RESTful API 調(diào)用執(zhí)行基本和高級(jí) OSS 任務(wù)。
實(shí)現(xiàn)高效的文件分布式存儲(chǔ)和訪問,保證數(shù)據(jù)在系統(tǒng)中有 3 個(gè)備份以及在軟硬件錯(cuò)誤發(fā)生以后的故障恢復(fù)。OSS 系統(tǒng)的這一設(shè)計(jì)提供不低于 99.9% 可用性和 99.99999999% 數(shù)據(jù)可靠性。
1) 使用方式:
提供標(biāo)準(zhǔn)的 RESTful API 接口、豐富的 SDK 包、客戶端工具、控制臺(tái)。您可以像使用文件一樣方便地上傳、下載、檢索、管理用于 Web 網(wǎng)站或者移動(dòng)應(yīng)用的海量數(shù)據(jù)。
a) 不限文件數(shù)量和大小??梢愿鶕?jù)所需存儲(chǔ)量無限擴(kuò)展存儲(chǔ)空間,
b) 支持流式寫入和讀出。特別適合視頻等大文件的邊寫邊讀業(yè)務(wù)場(chǎng)景。
c) 支持?jǐn)?shù)據(jù)生命周期管理??梢宰远x將到期數(shù)據(jù)批量刪除。
2) 安全機(jī)制
靈活的鑒權(quán),授權(quán)機(jī)制。提供 STS 和 URL 鑒權(quán)和授權(quán)機(jī)制,以及白名單、防盜鏈、主子賬號(hào)功能。
3) 圖片處理服務(wù)
支持 jpg、png、bmp、gif、webp、tiff 等多種圖片格式的轉(zhuǎn)換,以及縮略圖、剪裁、水印、縮放等多種操作。
7、表格存儲(chǔ)OTS
實(shí)現(xiàn)數(shù)據(jù)規(guī)模與訪問并發(fā)上的無縫擴(kuò)展,提供海量結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)和實(shí)時(shí)訪問。
8、大數(shù)據(jù)離線計(jì)算服務(wù)(MaxCompute)- 基礎(chǔ)功能
大數(shù)據(jù)離線計(jì)算服務(wù)于批量結(jié)構(gòu)化數(shù)據(jù)的存儲(chǔ)和計(jì)算,可以提供海量數(shù)據(jù)倉(cāng)庫(kù)的解決方案以及針對(duì)大數(shù)據(jù)的分析建模服務(wù)。需支持:
a) 分布式架構(gòu),規(guī)??梢愿鶕?jù)需要平行擴(kuò)展。
b) 自動(dòng)存儲(chǔ)容錯(cuò)機(jī)制,保障數(shù)據(jù)高可靠性。
c) 所有計(jì)算在沙箱中運(yùn)行,保障數(shù)據(jù)高安全性。
d) 以RESTful API的方式提供服務(wù)。
e) 支持高并發(fā)、高吞吐量的數(shù)據(jù)上傳下載。
f) 支持離線計(jì)算、機(jī)器學(xué)習(xí)兩類模型及計(jì)算服務(wù)。
g) 支持基于SQL、Mapreduce、Graph、MPI等多種編程模型的數(shù)據(jù)處理方式。
h) 支持多租戶,多個(gè)用戶可以協(xié)同分析數(shù)據(jù)。
i) 支持基于ACL和policy的用戶權(quán)限管理,可以配置靈活的數(shù)據(jù)訪問控制策略,防止數(shù)據(jù)越權(quán)訪問。
具備百PB的存儲(chǔ)處理能力和每日PB級(jí)別的計(jì)算吞吐能力,支持多應(yīng)用多實(shí)例并發(fā)同時(shí)計(jì)算并隔離應(yīng)用數(shù)據(jù)和程序的能力,支持MapReduce和類SQL的查詢方式。
9、分析型數(shù)據(jù)庫(kù)(ADS)
需要支持PB級(jí)實(shí)時(shí)數(shù)據(jù)倉(cāng)庫(kù),兼容MySQL協(xié)議以及SQL:2003 語法標(biāo)準(zhǔn),可以毫秒級(jí)針對(duì)未來城市大腦萬億級(jí)數(shù)據(jù)進(jìn)行即時(shí)的多維分析透視和業(yè)務(wù)探索;可以使用標(biāo)準(zhǔn)SQL 、現(xiàn)有的商業(yè)智能 (BI) 工具和ETL工具經(jīng)濟(jì)高效地輕松分析與集成數(shù)據(jù)。支持:
b) 毫秒級(jí)的千億級(jí)數(shù)據(jù)多維透視,支持毫秒級(jí)的多個(gè)大表關(guān)聯(lián)計(jì)算
c) 用戶間的存儲(chǔ)和計(jì)算資源進(jìn)行精確隔離。可定制的數(shù)據(jù)多副本和動(dòng)態(tài)資源管理機(jī)制提供不間斷在線服務(wù)
d) 提供精確到列級(jí)別的權(quán)限管理,利用公私鑰機(jī)制保護(hù)數(shù)據(jù)安全
e) 全面兼容MySQL協(xié)議(包括數(shù)據(jù)元信息),天生具備與商業(yè)分析工具、應(yīng)用的兼容性,內(nèi)置支持多種數(shù)據(jù)源數(shù)據(jù)快速接入,大幅度降低業(yè)務(wù)系統(tǒng)和商業(yè)軟件的接入成本
f) 自動(dòng)為每一列數(shù)據(jù)建立最合適的索引格式,無需用戶關(guān)心索引優(yōu)化
g) 支持快速dump功能,海量數(shù)據(jù)能夠快速dump到云上其他系統(tǒng),dump速度可達(dá)到上百萬條一秒,離線通道、在線通道雙模式并行數(shù)據(jù)導(dǎo)入,導(dǎo)入性能隨集群規(guī)模線性擴(kuò)展。
h) 無需空間索引即可使用地理LBI函數(shù)圈選地理坐標(biāo)數(shù)據(jù)。內(nèi)建動(dòng)態(tài)分段函數(shù)、快速聚合函數(shù)等多種函數(shù)方便OLAP應(yīng)用的開發(fā)。
10、流計(jì)算服務(wù)(Streamcompute)-Blink引擎
(1)流計(jì)算集成諸多全鏈路功能,方便用戶進(jìn)行全鏈路流計(jì)算開發(fā),包括:
a) 提供流式計(jì)算的標(biāo)準(zhǔn)StreamSQL,支持各類Fail場(chǎng)景的自動(dòng)恢復(fù),保證故障情況下數(shù)據(jù)處理的準(zhǔn)確性;支持多種內(nèi)建的字符串處理、時(shí)間、統(tǒng)計(jì)等類型函數(shù);精確的計(jì)算資源控制,徹底保證多租戶之間作業(yè)的隔離性。
b) 支持多樣的數(shù)據(jù)采集工具,涵蓋從無結(jié)構(gòu)化日志采集到結(jié)構(gòu)化的數(shù)據(jù)庫(kù)變更采集,從簡(jiǎn)單易懂的一鍵式拖拽上傳數(shù)據(jù)到開放可定制化的編程SDK,讓用戶隨心所欲采集并上傳業(yè)務(wù)流式數(shù)據(jù)。
c) 支持整合各類云數(shù)據(jù)存儲(chǔ),包括ODPS、DataHub、SLS、RDS、OTS、ADS等各類數(shù)據(jù)存儲(chǔ)系統(tǒng),無需額外的數(shù)據(jù)集成工作,流計(jì)算軟件可以直接讀寫上述產(chǎn)品數(shù)據(jù)。
(2)性能
數(shù)據(jù)計(jì)算延遲優(yōu)化到秒級(jí)乃至毫秒級(jí),單個(gè)作業(yè)吞吐量可做到數(shù)百萬級(jí)別,單集群規(guī)模在數(shù)千臺(tái),計(jì)算能力線性擴(kuò)展。
(3)簡(jiǎn)易性要求
支持標(biāo)準(zhǔn)SQL,提供內(nèi)建的字符串處理、時(shí)間、統(tǒng)計(jì)等各類計(jì)算函數(shù),替換業(yè)界低效且復(fù)雜的Storm開發(fā),讓更多的BI人員、運(yùn)營(yíng)人員通過簡(jiǎn)單的SQL可以完成實(shí)時(shí)化大數(shù)據(jù)分析和處理。
11、流計(jì)算(StreamCompute)- Datahub
12、流計(jì)算(StreamCompute)- GPU
提供基于Blink GPU版本的支持。
13、日志服務(wù)(Log Service)
提供是針對(duì)日志服務(wù)的一站式解決方案,解決海量日志數(shù)據(jù)采集/訂閱、轉(zhuǎn)儲(chǔ)與查詢功能。
14、DataWorks數(shù)據(jù)匯聚
數(shù)據(jù)資源平臺(tái)軟件Dataworks所需基礎(chǔ)組件模塊。
15、DTBoost-標(biāo)簽中心
以標(biāo)簽中心為基礎(chǔ),支持建立跨多個(gè)云計(jì)算資源之上的統(tǒng)一邏輯模型,可以在標(biāo)簽這種邏輯模型視圖上結(jié)合畫像分析、規(guī)則預(yù)警、文本挖掘、個(gè)性化推薦、關(guān)系網(wǎng)絡(luò)等多個(gè)業(yè)務(wù)場(chǎng)景的數(shù)據(jù)服務(wù)模塊,通過接口的方式進(jìn)行快速的應(yīng)用搭建。
16、DTBoost-整合分析
可以將分布在多個(gè)存儲(chǔ)資源的數(shù)據(jù)整合起來,在標(biāo)簽?zāi)P蜕蠘?gòu)建大數(shù)據(jù)畫像類的交互式分析應(yīng)用,讓業(yè)務(wù)人員可以自由靈活的分析這些對(duì)象各種屬性與行為之間的關(guān)聯(lián)性。
18、云服務(wù)總線
高可用分布式技術(shù)構(gòu)建的服務(wù)API開放平臺(tái),幫助打通內(nèi)外新舊系統(tǒng),實(shí)現(xiàn)跨技術(shù)平臺(tái)、跨應(yīng)用系統(tǒng)、跨企業(yè)組織的服務(wù)互通,以服務(wù)API的形式,加以一致的組織和管控,構(gòu)建內(nèi)部以及與上下游、第三方之間融合、重塑、創(chuàng)新的合作平臺(tái)。
(二)應(yīng)用支撐平臺(tái)
1、事件中心
統(tǒng)一事件預(yù)警、處理分發(fā)中心,支撐各部門事件預(yù)警類業(yè)務(wù)應(yīng)用場(chǎng)景。
2、規(guī)則引擎
基于流計(jì)算的規(guī)則引擎適用于業(yè)務(wù)決策的實(shí)時(shí)評(píng)估,包括風(fēng)險(xiǎn)攔截和預(yù)警、資源分配、流程改進(jìn)等。用于在狀態(tài)或行為數(shù)據(jù)頻繁變化的場(chǎng)景下,針對(duì)特定的業(yè)務(wù)目標(biāo)進(jìn)行實(shí)時(shí)決策。
3、預(yù)警平臺(tái)
服務(wù)終端用戶進(jìn)行預(yù)警布控, 同時(shí)可以在預(yù)警平臺(tái)之上開發(fā)預(yù)警類的其他擴(kuò)展應(yīng)用, 如:預(yù)警大屏,消防預(yù)警,重點(diǎn)人員管控。
4、高精度位置專有服務(wù)平臺(tái)
通過部署高精度位置專有服務(wù)平臺(tái)賦予城市大腦及各領(lǐng)域應(yīng)用以精準(zhǔn)時(shí)空能力,提供至動(dòng)態(tài)厘米級(jí)高精度服務(wù)、并支持海量位置數(shù)據(jù)管理及電子圍欄千尋厘米級(jí)定位專有服務(wù)平臺(tái)具備如下特點(diǎn):
本項(xiàng)目應(yīng)充分利用分布式計(jì)算、并行計(jì)算、資源虛擬化等技術(shù)。
一是應(yīng)采用分布式架構(gòu),具有便捷的計(jì)算和存儲(chǔ)擴(kuò)展能力。
二是數(shù)據(jù)訪問和處理性能高,包括存儲(chǔ)的吞吐量、IOPS、隨機(jī)讀寫等性能。
三是數(shù)據(jù)和計(jì)算的可靠性和并發(fā)訪問性能,應(yīng)具有容災(zāi)和高可用能力。
功能要求
(1)自定義存儲(chǔ)策略
使用分布式存儲(chǔ)集群,可以靈活自定義存儲(chǔ)策略,支持多副本、糾刪碼和二者混合的存儲(chǔ)策略,可以根據(jù)用戶對(duì)存儲(chǔ)容量和存儲(chǔ)性能的不同需求靈活配置,從而提供資源利用率。
(2)高可靠性
支持多副本數(shù)據(jù)一致性校驗(yàn)機(jī)制,自動(dòng)副本重建機(jī)制;支持用戶自定義邏輯故障域,從而將用戶機(jī)房的物理拓?fù)浞磻?yīng)到對(duì)象存儲(chǔ)的存儲(chǔ)節(jié)點(diǎn)選擇過程中,實(shí)現(xiàn)不同的對(duì)象副本存放在不同的故障域中。
(3)高可用性
接入集群無狀態(tài)和存儲(chǔ)計(jì)算集群無中心架構(gòu)設(shè)計(jì),使得系統(tǒng)不存在單點(diǎn)故障,部分接入節(jié)點(diǎn)或存儲(chǔ)節(jié)點(diǎn)的故障,不影響業(yè)務(wù)的連續(xù)性。
支持多區(qū)域部署,不同區(qū)域間的OSS可以互為鏡像,也可以貢獻(xiàn)一份全局元數(shù)據(jù),從而降低單區(qū)域故障對(duì)業(yè)務(wù)的影響范圍。
(4)彈性擴(kuò)展
存儲(chǔ)和計(jì)算資源具有系統(tǒng)的可擴(kuò)張性,使得存儲(chǔ)計(jì)算能力可支持無限擴(kuò)張。
(5)高安全性
提供完善的安全機(jī)制確保訪問安全,提供基于對(duì)稱加密的請(qǐng)求驗(yàn)證、支持HTTPS方式訪問、用戶認(rèn)證機(jī)制和訪問控制。
設(shè)備參數(shù)指標(biāo)要求
定位平臺(tái)軟件技術(shù)指標(biāo)
5、精準(zhǔn)時(shí)空攝像頭
通過在攝像頭中集成北斗高精度定位硬件,來賦予攝像頭精準(zhǔn)時(shí)空能力,由以下幾部分組成:北斗高精度亞米級(jí)差分定位模塊、高精度定位天線、通訊模塊。
時(shí)間方面:北斗芯片通過觀測(cè)北斗衛(wèi)星,可獲取標(biāo)準(zhǔn)的衛(wèi)星原子時(shí),從而輸出高精度、可靠的時(shí)間信號(hào)和時(shí)間信息,精度高達(dá)30納秒;
位置方面:借助千尋覆蓋全國(guó)的北斗地基增強(qiáng)網(wǎng)和高精度定位能力,監(jiān)控?cái)z像頭可獲得30厘米的定位精度。
當(dāng)所有攝像頭都擁有了精準(zhǔn)的時(shí)間和位置信息后,視頻監(jiān)控系統(tǒng)就有了統(tǒng)一的時(shí)空基準(zhǔn)。統(tǒng)一的時(shí)空基準(zhǔn)是所有視頻分析的基礎(chǔ),意義重大:
(1)實(shí)現(xiàn)海量攝像頭的高精度自動(dòng)校時(shí)。有效避免了上傳的視頻沒有時(shí)間戳,或因攝像頭維修而未設(shè)置正確網(wǎng)絡(luò)時(shí)間同步服務(wù)器地址,或因網(wǎng)絡(luò)傳輸延時(shí)而造成時(shí)間戳不同步;
(3)在城市擁堵治理方面:精準(zhǔn)的時(shí)間標(biāo)簽是城市大腦運(yùn)行的基礎(chǔ)。路是空間資源,紅綠燈是時(shí)間資源。在不知道交通情況的時(shí)候,是沒有辦法來優(yōu)化交通的空間與時(shí)間資源的,而攝像頭是了解交通狀態(tài)的重要基礎(chǔ)設(shè)施,但每個(gè)攝像頭上的時(shí)間都是不一樣的。所以,世界上最遙遠(yuǎn)的距離是紅綠燈與攝像頭的距離。未來,城市大腦會(huì)重新定義城市的攝像頭,把一個(gè)城市的道路的空間資源、時(shí)間資源、車輛與人,這些元素組合在一起,作為一個(gè)整體來工作。
在交通違法及事故認(rèn)定方面:通過具備了精準(zhǔn)位置坐標(biāo)的多個(gè)攝像頭,利用智能算法可以計(jì)算出拍攝對(duì)象的位置坐標(biāo)和三維圖像還原。
具備精準(zhǔn)位置的多個(gè)攝像頭,同時(shí)拍攝一個(gè)場(chǎng)景即可實(shí)現(xiàn)拍攝目標(biāo)的三維重建,在圖像中進(jìn)行物體的實(shí)際角度、尺寸進(jìn)行還原,實(shí)現(xiàn)顯示捕捉,為交通事故現(xiàn)場(chǎng)還原,交通責(zé)任認(rèn)定,提供強(qiáng)有力的工具。在多級(jí)攝像頭聯(lián)動(dòng)追蹤目標(biāo)人物或車輛場(chǎng)景,精準(zhǔn)定位結(jié)合人臉識(shí)別、車牌識(shí)別等技術(shù),可實(shí)現(xiàn)目標(biāo)定位、路徑預(yù)測(cè)、根據(jù)目標(biāo)位置自動(dòng)調(diào)度多攝像頭執(zhí)行追蹤任務(wù);結(jié)合智能視覺計(jì)算算法,進(jìn)行移動(dòng)物體的軌跡還原、移動(dòng)速度計(jì)算;
(三)數(shù)據(jù)資源平臺(tái)
1、數(shù)據(jù)資源平臺(tái)軟件
德清城市大腦項(xiàng)目基于阿里云城市大腦架構(gòu)建設(shè),匯聚政府公共服務(wù)數(shù)據(jù)、企業(yè)數(shù)據(jù)、物聯(lián)網(wǎng)、互聯(lián)網(wǎng)的相關(guān)結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù),需要通過一套完備的數(shù)據(jù)體系將這些數(shù)據(jù)有機(jī)的組織在一起,并且可以保障數(shù)據(jù)的安全,質(zhì)量,可靠性。數(shù)據(jù)資源平臺(tái)軟件需要提供如下幾個(gè)模塊功能:
數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、監(jiān)控運(yùn)維、數(shù)據(jù)質(zhì)量、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)服務(wù)、實(shí)時(shí)分析、數(shù)據(jù)安全、全景監(jiān)控、數(shù)據(jù)DNA。
(四)城市視頻分析服務(wù)平臺(tái)
視頻分析服務(wù)平臺(tái)通過對(duì)海量視頻的分析,可以大化的抽取視頻中有價(jià)值的信息和數(shù)據(jù),基于這些數(shù)據(jù),更全面的反映社會(huì)治理的需求和運(yùn)行狀態(tài)。結(jié)合云平臺(tái)的大規(guī)模計(jì)算能力,視頻處理的深度和廣度都可以得到更有效的發(fā)揮。同時(shí),云上的視頻處理技術(shù)相對(duì)于在端上進(jìn)行的視頻分析具備更大的靈活性。挖掘和利用視頻數(shù)據(jù)的價(jià)值,從視頻數(shù)據(jù)中提取出盡可能多的有用信息,而不是針對(duì)某個(gè)應(yīng)用點(diǎn)的需求來進(jìn)行結(jié)構(gòu)化數(shù)據(jù)的提取。數(shù)據(jù)維度越豐富,對(duì)社會(huì)治理元素的掌握就越完整。
視頻分析服務(wù)平臺(tái),根據(jù)其系統(tǒng)架構(gòu)設(shè)計(jì),需要提供:視頻數(shù)據(jù)接入層,通過標(biāo)準(zhǔn)的視頻協(xié)議接入不同廠商的視頻資源,系統(tǒng)基于云平臺(tái)擁有大規(guī)模視頻接入的能力,滿足城市級(jí)視頻接入管理的需求;大規(guī)模的視頻碼流通過交通視頻專網(wǎng)傳入城市視頻分析服務(wù)平臺(tái)的碼流分發(fā)管控系統(tǒng),完成大規(guī)模視頻的解析、存取和管控;通過大規(guī)模視頻計(jì)算資源調(diào)度管控系統(tǒng)和大規(guī)模視頻并行處理系統(tǒng)實(shí)現(xiàn)對(duì)云平臺(tái)大規(guī)模計(jì)算能力的管控,為算法引擎提供計(jì)算支持;此外,城市視頻分析服務(wù)平臺(tái)所包含的球機(jī)多預(yù)置位巡航管理系統(tǒng)、智能規(guī)則配置系統(tǒng)以及各種算法引擎可以為上層豐富的應(yīng)用場(chǎng)景提供支持;。
(五)城市算法服務(wù)平臺(tái)
城市算法服務(wù)平臺(tái)需要集算法管理、資源管理、業(yè)務(wù)場(chǎng)景管理、指標(biāo)評(píng)估、監(jiān)控預(yù)警于一體的算法服務(wù)支持平臺(tái),為項(xiàng)目或產(chǎn)品提供一套算法管理、配置和部署的工程工具。
通過算法服務(wù)平臺(tái)把算法集中起來,構(gòu)成算法模塊,和系統(tǒng)其他部分通過接口進(jìn)行交互,盡量減少算法變更對(duì)系統(tǒng)的影響;缺乏設(shè)計(jì)的系統(tǒng)則有可能到處遍布算法的身影,這使得算法優(yōu)化非常困難。算法服務(wù)平臺(tái)的一個(gè)主要目的就是通過工具來強(qiáng)制規(guī)范項(xiàng)目或產(chǎn)品中使用算法的方式,不但把系統(tǒng)中使用的算法集中起來構(gòu)成算法模塊,還會(huì)規(guī)范算法模塊的使用方式。除了在系統(tǒng)層面上集中管理算法,降低算法模塊和系統(tǒng)其他組件的耦合之外,也對(duì)算法模塊內(nèi)部的實(shí)現(xiàn)提供了一組規(guī)范。算法服務(wù)平臺(tái)是主要面向算法開發(fā)人員的工具,其目標(biāo)是優(yōu)化智能系統(tǒng)的架構(gòu),提高系統(tǒng)的工程化水平,讓算法開發(fā)人員能夠集中精力處理算法問題,提高算法開發(fā)效率。支持功能:
跨平臺(tái):統(tǒng)一管理不同計(jì)算平臺(tái)上的算法,以及支持多種計(jì)算平臺(tái)的算法協(xié)同工作。
開放性:支持多人協(xié)作開發(fā)。
規(guī)范性:多人協(xié)作開發(fā)的結(jié)果遵照算法規(guī)范,可互相復(fù)用。
快速部署:新增算法、算法升級(jí)可通過可視化操作界面快速上線。
易用性:可視化的算法流程,易于理解和調(diào)整算法處理邏輯。
可管理性:可采用多種手段實(shí)現(xiàn)角色管理、資源管理,算法管理、算法模板管理、應(yīng)用場(chǎng)景管理等,能夠?qū)φ麄€(gè)系統(tǒng)進(jìn)行全面和完善的管理。
(六)數(shù)據(jù)治理服務(wù)
數(shù)據(jù)資源接入服務(wù),包括數(shù)據(jù)調(diào)研、數(shù)據(jù)對(duì)接、數(shù)據(jù)集成同步、數(shù)據(jù)標(biāo)準(zhǔn)化處理,數(shù)據(jù)清洗、數(shù)據(jù)整理歸檔、數(shù)據(jù)鏈路維護(hù)、數(shù)據(jù)運(yùn)維。
(七)視頻智能引擎及算法
視頻智能引擎及各部分基于視頻的算法開發(fā)。提供包括:
1、大規(guī)模視頻處理
1)大規(guī)模圖搜引擎
ü 索引壓縮,對(duì)海量索引數(shù)據(jù)進(jìn)行壓縮
ü 特征量化,對(duì)高維特征進(jìn)行量化,創(chuàng)建碼本
ü 實(shí)時(shí)索引,基于高維特征在線實(shí)時(shí)索引視頻圖像數(shù)據(jù)
ü 全量索引,基于高維特征離線全量索引視頻圖像數(shù)據(jù)
2)大規(guī)模視頻分析系統(tǒng)
ü datahub視頻數(shù)據(jù)接入與媒體數(shù)據(jù)編碼、轉(zhuǎn)碼系統(tǒng)
ü 基于流計(jì)算平臺(tái)的大規(guī)模視頻并行處理系統(tǒng)
ü 關(guān)鍵視頻、圖片存儲(chǔ)壓縮、查詢管理
ü 視頻分析實(shí)時(shí)直播點(diǎn)播展示系統(tǒng)
3)在線特征服務(wù)
ü 行人在線特征服務(wù),提供行人搜索query圖片識(shí)別,用于索引檢索比對(duì)
ü 在線特征服務(wù)高并發(fā)管控,支持多個(gè)在線特征服務(wù)節(jié)點(diǎn)的高并發(fā)負(fù)載均衡
ü 在線特征服務(wù)tools,整體系統(tǒng)后臺(tái)監(jiān)控,運(yùn)維,日志維護(hù)等
4)搜索策略引擎
ü 行人搜索策略引擎,連接行人在線特征服務(wù)以及圖搜引擎,對(duì)外提供行人搜索服務(wù)
ü 機(jī)動(dòng)車搜索策略引擎,連接機(jī)動(dòng)車在線特征服務(wù)以及圖搜引擎,對(duì)外提供機(jī)動(dòng)車搜索服務(wù)
ü 搜索策略引擎高并發(fā)管控,支持多個(gè)搜索策略引擎服務(wù)節(jié)點(diǎn)的高并發(fā)負(fù)載均衡
ü 搜索策略引擎tools,整體系統(tǒng)后臺(tái)監(jiān)控,運(yùn)維,日志維護(hù)等
2、視頻分析接入部署
包括從匯聚平臺(tái)接入視頻碼流、預(yù)置位配置、虛擬線圈設(shè)置、算法部署。
(八)安全服務(wù)
1、云盾-態(tài)勢(shì)感知
基于大數(shù)據(jù)分析平臺(tái)之上對(duì)全局威脅攻擊的狀態(tài)檢測(cè)并對(duì)安全威脅進(jìn)行預(yù)測(cè)。
2、云盾-云防火墻
提供集中管控的基于主機(jī)的訪問控制功能,提供可視化的主機(jī)流量管理功能。
3、云盾-WAF
提供運(yùn)行在應(yīng)用平臺(tái)各種業(yè)務(wù)的應(yīng)用入侵檢測(cè)與防護(hù)功能,可及時(shí)發(fā)現(xiàn)并攔截針對(duì)應(yīng)用層的SQL注入、XSS、Http/Https CC等攻擊,并提供應(yīng)用層流量精確控制功能;功能滿足等級(jí)保護(hù)對(duì)應(yīng)用入侵防范的要求。
4、云盾-數(shù)據(jù)庫(kù)審計(jì)
提供基于角色管理的云數(shù)據(jù)庫(kù)運(yùn)維審計(jì)功能,精確到SQL語句,確保專有云核心數(shù)據(jù)資產(chǎn)的合規(guī)使用,支持20個(gè)數(shù)據(jù)庫(kù)實(shí)例。
5、云盾-堡壘機(jī)
提供基于角色管理的運(yùn)維審計(jì)功能。
6、敏感數(shù)據(jù)發(fā)現(xiàn)及脫敏
發(fā)現(xiàn)并梳理專有云平臺(tái)的數(shù)據(jù)資產(chǎn),進(jìn)行分級(jí)分類,提供云平臺(tái)敏感數(shù)據(jù)的脫敏功能,不改變數(shù)據(jù)結(jié)構(gòu)的情況下滿足對(duì)數(shù)據(jù)進(jìn)行模型訓(xùn)練、開發(fā)、測(cè)試等需求。
7、云盾安全運(yùn)營(yíng)及駐場(chǎng)服務(wù)
云盾安全運(yùn)營(yíng)駐場(chǎng)服務(wù)提供租戶安全運(yùn)營(yíng)、云盾安全運(yùn)營(yíng)、應(yīng)急響應(yīng)、問題跟蹤的1年1人5*8現(xiàn)場(chǎng)安全駐場(chǎng)服務(wù)。
(九)城市大腦應(yīng)用平臺(tái)
1、平臺(tái)應(yīng)用
(1)統(tǒng)一門戶,提供城市大腦數(shù)據(jù)資源的門戶和應(yīng)用的導(dǎo)航入口;
(2)實(shí)現(xiàn)各類資源數(shù)據(jù)的全網(wǎng)一鍵式綜合檢索、分類檢索及關(guān)系信息展現(xiàn)。
(十)運(yùn)維服務(wù)
提供:
ü 運(yùn)維基礎(chǔ)包:三年云平臺(tái)運(yùn)維基礎(chǔ)服務(wù)、初裝
ü 培訓(xùn):基礎(chǔ)運(yùn)維培訓(xùn)
ü 云計(jì)算平臺(tái)駐場(chǎng)運(yùn)維服務(wù):云計(jì)算平臺(tái)駐場(chǎng)運(yùn)維服務(wù)
一、 硬件及機(jī)房服務(wù)采購(gòu)需求清單
(一)德清城市大腦主中心(部署在電子政務(wù)外網(wǎng))
1. 服務(wù)器需求:
2.網(wǎng)絡(luò)設(shè)備需求:
(二)德清城市大腦分中心(部署于視頻專網(wǎng),交警應(yīng)用專項(xiàng))
1. 服務(wù)器需求:
附錄:硬件參數(shù)及服務(wù)要求說明:
(一)、服務(wù)器配置及數(shù)量要求
機(jī)型Q47.22
非常感謝您讀完創(chuàng)新互聯(lián)的這篇文章:"IT從業(yè)者學(xué)習(xí)—德清縣城市大腦建設(shè)項(xiàng)目",僅為提供更多信息供用戶參考使用或?yàn)閷W(xué)習(xí)交流的方便。我們公司提供:網(wǎng)站建設(shè)、網(wǎng)站制作、官網(wǎng)建設(shè)、SEO優(yōu)化、小程序制作等服務(wù),歡迎聯(lián)系我們提供您的需求。
文章名稱:IT從業(yè)者學(xué)習(xí)—德清縣城市大腦建設(shè)項(xiàng)目
標(biāo)題URL:http://jinyejixie.com/news41/316041.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供建站公司、做網(wǎng)站、云服務(wù)器、外貿(mào)建站、移動(dòng)網(wǎng)站建設(shè)、網(wǎng)站策劃
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容