1、招標條件

黑龍江省交投信息科技有限責任公司數(shù)據(jù)中臺咨詢服務(wù)及數(shù)據(jù)工程管理工具采購項目（二次）（以下簡稱本項目），招標人為黑龍江省交投信息科技有限責任公司，資金來源為企業(yè)自籌。本項目已具備招標條件，現(xiàn)對本項目進行公開招標。

2、項目概況

2.1項目編號：JT-XM-GKYQZB-FW-******-****

2.2項目名稱：黑龍江省交投信息科技有限責任公司數(shù)據(jù)中臺咨詢服務(wù)及數(shù)據(jù)工程管理工具采購項目（二次）

2.3資金落實情況：已落實

2.4項目概況及標段劃分：本次招標共劃分為1個標段，即A1標段。

本次采購的數(shù)據(jù)工程管理工具，要求面向且精通交通行業(yè)業(yè)務(wù)。通過采購工具，提升我集團數(shù)據(jù)工程的數(shù)據(jù)治理效率，借助此工具完成我集團一站式數(shù)據(jù)全生命周期的管理，需支持數(shù)據(jù)采集、匯聚、清洗、分析、應(yīng)用、監(jiān)控、共享等數(shù)據(jù)全生命周期的管理及應(yīng)用。實現(xiàn)交投集團數(shù)據(jù)資產(chǎn)完成數(shù)據(jù)快速集成、數(shù)據(jù)統(tǒng)一管理、數(shù)據(jù)清洗加工、數(shù)據(jù)分析計算、統(tǒng)一算力分配、任務(wù)統(tǒng)一調(diào)配等業(yè)務(wù)操作。

通過規(guī)劃咨詢完成我集團數(shù)據(jù)工程治理規(guī)劃，指導(dǎo)治理工作快速展開，整合和優(yōu)化交投集團內(nèi)部的各業(yè)務(wù)板塊數(shù)據(jù)資源，利用工具提升我集團數(shù)據(jù)治理效率，最終用數(shù)據(jù)賦能業(yè)務(wù)創(chuàng)新形成核心壁壘，解決數(shù)據(jù)“集”“通”“治”“用”難題，實現(xiàn)交投集團數(shù)據(jù)集中管理、高效利用和價值最大化。

2.5招標內(nèi)容：本次采購咨詢服務(wù)和數(shù)據(jù)工程管理工具兩部分。要求投標人根據(jù)龍江交投集團的實際業(yè)務(wù)、數(shù)據(jù)和預(yù)算等實際情況進行綜合評估，并指導(dǎo)數(shù)據(jù)中臺的建設(shè)和實施，具體標準及要求詳見附件。

2.6最高限價：**4萬元人民幣。

2.7服務(wù)期限：簽訂合同后3個月完成項目并交付(具體時間以簽訂合同為準）。

2.8質(zhì)量要求：符合國家、地方相關(guān)行業(yè)標準及招標人項目管理的要求。

2.9服務(wù)地點：黑龍江省哈爾濱市松北區(qū)創(chuàng)新三路**9號陽光國際大廈b座。

3、對投標人資格要求

3.1本次招標要求投標人是中華人民共和國境內(nèi)注冊的獨立法人，具備有效的營業(yè)執(zhí)照，并在人員、設(shè)備、資金、技術(shù)等方面具有履行合同所必須的能力。

3.2信譽要求：

①近三年(****年7月1日～遞交投標文件截止日)投標人或其法定代表人有行賄犯罪記錄的，不得參加本項目投標。無行賄犯罪行為的認定以投標人提供的在中國裁判文書（https：//wenshu.court.gov.cn/）網(wǎng)站上無行賄犯罪查詢記錄的網(wǎng)頁截圖為準（查詢?nèi)掌趹?yīng)在招標公告發(fā)布后至投標文件遞交截止日期之間）。

②投標人在“信用中國”網(wǎng)站（https://www.creditchina.gov.cn）中，未被列入失信被執(zhí)行人名單；

③投標人在國家企業(yè)信用信息公示系統(tǒng)（https://www.gsxt.gov.cn/）中未被列入嚴重違法失信企業(yè)名單。

3.3投標人不得存在下列情形之一：

(1)與招標人存在利害關(guān)系可能影響采購公正性的法人、非法人組織、自然人。

(2)與本項目其他投標人的單位負責人為同一人。

(3)與本項目其他投標人存在直接控股關(guān)系。

(4)與本項目其他投標人存在管理關(guān)系。

(5)與本項目其他投標人高級管理人員之間存在交叉任職。

(6)近三年（****年7月1日～遞交響應(yīng)文件截止日）內(nèi)在經(jīng)營活動中存在以下嚴重不良情形：

①被本項目所在地省級以上行業(yè)主管部門依法暫停、取消投標或禁止參加采購活動的。

②處于被責令停產(chǎn)停業(yè)、暫扣或者吊銷執(zhí)照、暫扣或者吊銷許可證、吊銷資質(zhì)證書狀態(tài)。

③進入清算程序，或被宣告破產(chǎn)，或其他喪失履約能力情形的。

④根據(jù)《黑龍江省交通投資集團有限公司供應(yīng)商管理辦法》管理要求，被禁止參與采購活動且處于有效期內(nèi)的。

⑤違反法律法規(guī)或招標采購文件規(guī)定的其他情形。

3.4本次招標項目不接受聯(lián)合體參加。

4、招標文件的獲取

4.1招標文件獲取時間：****年7月**日0時**分至****年7月**日0時**分。

4.2招標文件獲取方式：登錄本項目指定的“黑龍江政企招采數(shù)字服務(wù)平臺”（以下簡稱“電子交易平臺”）（https://zc.hljsjtjt.com/）進行操作；投標人僅限于為本單位繳納CA數(shù)字證書，若出現(xiàn)任一投標人為多家投標單位代繳CA數(shù)字證書費用的行為，涉及的所有投標人一年內(nèi)禁止參加集團及權(quán)屬企業(yè)實施的采購活動。

凡有意參與本項目的投標人，須在本平臺完成投標人注冊，并辦理CA數(shù)字證書后方可下載招標文件。數(shù)字證書可選擇線上或線下辦理方式，投標人應(yīng)合理考慮郵寄時間（1-2個工作日），CA辦理咨詢電話：**********0（李女士）；

4.3本項目采用網(wǎng)上申請方式，投標人登錄系統(tǒng)后，按要求提交資料上傳至電子交易平臺。

4.4 交納招標文件工本費

(1)招標文件售價**0元人民幣（售后不退）。

(2)投標人僅限于為本單位支付平臺使用費及招標文件費用。若存在任一投標人為多家投標單位代繳上述費用的行為，根據(jù)《中華人民共和國招標投標法實施條例》第四十條“（二）不同投標人委托同一單位或者個人辦理投標事宜”視為投標人相互串通投標。同時，依據(jù)《黑龍江省交通投資集團有限公司供應(yīng)商管理辦法》中關(guān)于供應(yīng)商失信行為的認定標準，此類行為被定性為采購活動中的串通投標或圍標。涉及的投標人將在一年內(nèi)禁止參加集團及權(quán)屬企業(yè)實施的采購活動。

5、投標保證金：本項目無需繳納。

6、投標文件的遞交

投標文件遞交的截止時間（投標截止時間，下同）為****年7月**日9時**分；投標人應(yīng)使用電子交易平臺提供的“投標文件制作工具”編制電子投標文件，并按招標文件要求進行加密、遞交。投標人應(yīng)在投標文件規(guī)定的開標截止時間前，通過互聯(lián)網(wǎng)使用CA數(shù)字證書登錄電子交易平臺，將加密的投標文件上傳，并保存上傳成功后系統(tǒng)自動生成的電子簽收憑證，遞交時間即為電子簽收憑證時間。投標人應(yīng)充分考慮上傳文件時的不可預(yù)見因素，未在遞交截止時間前完成上傳的，視為逾期送達，將不予受理。

7、投標文件開標時間及地點

7.1投標文件開標時間：投標文件遞交截止時間。

7.2投標文件開標地點：登錄“黑龍江政企招采數(shù)字服務(wù)平臺”，進入“開標大廳”選擇所投標段進行簽到，并在投標文件開標時間實時在線關(guān)注招標人的文件開標情況。

8、其他說明

8.1本次招標評標采用綜合評估法，對投標人的資格審查采用資格后審形式。

8.2本項目采用全流程電子招采，通過黑龍江政企招采數(shù)字服務(wù)平臺（https://zc.hljsjtjt.com/）開展招投標活動，注冊及操作等相關(guān)內(nèi)容，請先查閱門戶網(wǎng)站→幫助中心→操作指南內(nèi)的操作手冊，參與投標過程中遇到的平臺問題可撥打技術(shù)支持電話。

9、發(fā)布公告的媒介

本項目招標公告在黑龍江政企招采數(shù)字服務(wù)平臺（https://zc.hljsjtjt.com/）及中國招標投標公共服務(wù)平臺（http://www.cebpubservice.com）、黑龍江省公共資源交易網(wǎng)（http://www.hljggzyjyw.org.cn）、黑龍江陽光采購服務(wù)平臺（https://hljygcg.ejy**5.com/）上同時發(fā)布，其它網(wǎng)址轉(zhuǎn)載無效。

**、受理異議聯(lián)系方式

招 標人：黑龍江省交投信息科技有限責任公司

地 址：黑龍江哈爾濱市松北區(qū)松北街道創(chuàng)新三路**9號陽光國際大廈B座

聯(lián) 系 人：黃先生

電 話：**********4

招標代理：黑龍江省信誠工程招標有限公司

地 址：黑龍江省哈爾濱市松北區(qū)松北大道**5號

聯(lián) 系 人：王女士

電 話：****-********

電子郵箱：********@**3.com

**、監(jiān)督部門聯(lián)系方式

監(jiān)督機構(gòu)名稱：黑龍江省交投信息科技有限責任公司監(jiān)督檢查室

聯(lián)系電話：****-********

附件：

一、咨詢服務(wù)內(nèi)容：

（1）數(shù)據(jù)戰(zhàn)略

①數(shù)據(jù)戰(zhàn)略需求評估。對龍江交投集團的業(yè)務(wù)現(xiàn)狀、數(shù)據(jù)現(xiàn)狀等進行全面調(diào)研和分析，評估集團對數(shù)據(jù)中臺的需求，明確數(shù)據(jù)中臺建設(shè)的目標和方向。

②制定實現(xiàn)路徑根據(jù)數(shù)據(jù)戰(zhàn)略需求評估結(jié)果，制定數(shù)據(jù)中臺建設(shè)的實現(xiàn)路徑，明確各階段的工作任務(wù)、目標、責任。

（2）數(shù)據(jù)治理

①建立數(shù)據(jù)治理組織，明確各組織的職責和權(quán)限。根據(jù)數(shù)據(jù)治理的需要，明確數(shù)據(jù)所有人、管理人等相關(guān)角色，以及數(shù)據(jù)的歸口的具體管理人員，并進行確認。

②指導(dǎo)數(shù)據(jù)治理實施工作，明確治理的指標、方法和流程，對數(shù)據(jù)治理工作的成效進行評估，并進行評審。

（3）數(shù)據(jù)架構(gòu)

①數(shù)據(jù)中臺架構(gòu)設(shè)計,根據(jù)集團的業(yè)務(wù)需求和數(shù)據(jù)現(xiàn)狀，設(shè)計數(shù)據(jù)中臺的技術(shù)架構(gòu)和存儲架構(gòu)，包括數(shù)據(jù)采集層、數(shù)據(jù)存儲層、數(shù)據(jù)處理層、數(shù)據(jù)服務(wù)層和數(shù)據(jù)應(yīng)用層等，確保數(shù)據(jù)中臺的架構(gòu)具有先進性、可擴展性和安全性。

②制定數(shù)據(jù)模型規(guī)范，進行數(shù)據(jù)模型開發(fā)制定數(shù)據(jù)模型規(guī)范，明確數(shù)據(jù)模型的設(shè)計原則和規(guī)范，進行數(shù)據(jù)模型開發(fā)，確保數(shù)據(jù)模型的規(guī)范性和一致性。

（4）數(shù)據(jù)應(yīng)用

①梳理并撰寫交投集團數(shù)據(jù)應(yīng)用場景清單，對集團的業(yè)務(wù)流程進行全面梳理，挖掘數(shù)據(jù)應(yīng)用場景，并進行優(yōu)先級排序和評審。重點梳理職能類、物流貿(mào)易類數(shù)據(jù)應(yīng)用場景，為后期其他業(yè)務(wù)域的拓展規(guī)劃奠定基礎(chǔ)。

②交投集團數(shù)據(jù)應(yīng)用產(chǎn)品服務(wù)規(guī)劃，根據(jù)數(shù)據(jù)應(yīng)用場景清單，制定交投集團數(shù)據(jù)應(yīng)用產(chǎn)品服務(wù)規(guī)劃，并進行優(yōu)先級排序和評審。

（5）數(shù)據(jù)安全

①撰寫數(shù)據(jù)安全風險評估報告，對集團的數(shù)據(jù)安全現(xiàn)狀進行全面調(diào)研和分析，識別數(shù)據(jù)安全風險，為數(shù)據(jù)安全管理提供依據(jù)。

②根據(jù)數(shù)據(jù)安全風險評估報告，建立統(tǒng)一的數(shù)據(jù)安全標準和管理流程，包括數(shù)據(jù)分類分級、數(shù)據(jù)訪問控制、數(shù)據(jù)加密脫敏、數(shù)據(jù)備份與恢復(fù)等，并進行評審。

（6）數(shù)據(jù)質(zhì)量

①結(jié)合集團的業(yè)務(wù)需求和數(shù)據(jù)現(xiàn)狀，定義數(shù)據(jù)質(zhì)量管理目標，明確數(shù)據(jù)質(zhì)量管理范圍，并建立數(shù)據(jù)質(zhì)量規(guī)則庫。

②設(shè)計數(shù)據(jù)質(zhì)量提升策略，根據(jù)數(shù)據(jù)質(zhì)量評估的結(jié)果，設(shè)計數(shù)據(jù)質(zhì)量提升策略，提高數(shù)據(jù)質(zhì)量。

（7）數(shù)據(jù)標準

①撰寫現(xiàn)有數(shù)據(jù)標準梳理報告，對集團現(xiàn)有的數(shù)據(jù)標準現(xiàn)狀進行全面梳理和分析，找出數(shù)據(jù)標準中存在的問題和不足，撰寫數(shù)據(jù)標準現(xiàn)狀梳理報告。

②根據(jù)數(shù)據(jù)標準梳理報告，撰寫數(shù)據(jù)標準規(guī)范文檔，并進行評審。

（8）數(shù)據(jù)生命周期管理

①撰寫數(shù)據(jù)生命周期流程梳理報告

對集團的數(shù)據(jù)生命周期流程現(xiàn)狀進行全面梳理和分析，找出數(shù)據(jù)生命周期管理中存在的問題和不足，撰寫數(shù)據(jù)生命周期流程梳理報告，并進行評審。

②撰寫數(shù)據(jù)生命周期管理策略文檔

根據(jù)數(shù)據(jù)生命周期流程梳理報告，撰寫數(shù)據(jù)生命周期管理策略文檔，明確數(shù)據(jù)的創(chuàng)建、存儲、使用、歸檔和銷毀等環(huán)節(jié)的管理要求，并進行評審。

（9）數(shù)據(jù)資產(chǎn)管理

①設(shè)計數(shù)據(jù)資產(chǎn)目錄，對數(shù)據(jù)資產(chǎn)進行分類、編碼和描述，實現(xiàn)數(shù)據(jù)資產(chǎn)的可視化管理。

②定義數(shù)據(jù)資產(chǎn)所有者，明確其職責和權(quán)限，設(shè)計數(shù)據(jù)資產(chǎn)管理制度，包括數(shù)據(jù)資產(chǎn)的登記、使用、共享等方面。

（**）其他

在項目中通過開展數(shù)據(jù)治理相關(guān)工作，形成交投集團數(shù)據(jù)模型定義、數(shù)據(jù)編碼與命名規(guī)范、數(shù)據(jù)安全規(guī)范等標準，數(shù)據(jù)生命周期管理、數(shù)據(jù)共享與開放交換等管理制度。

二、數(shù)據(jù)工程管理工具內(nèi)容

具體包括以下工具：數(shù)據(jù)治理工具、任務(wù)調(diào)度工具、運維監(jiān)控工具、共享交換工具以及數(shù)據(jù)融合展示工具。

①數(shù)據(jù)治理工具

為提升我集團數(shù)據(jù)接入、處理效率，本工具需滿足是基于精通交通行業(yè)業(yè)務(wù)，打通數(shù)據(jù)治理各個環(huán)節(jié)，智能高效的完成對數(shù)據(jù)的集成、積累、沉淀和共享，快速建立企業(yè)數(shù)據(jù)資產(chǎn)地圖，發(fā)揮數(shù)據(jù)效能。

產(chǎn)品功能需包括但不限于：元數(shù)據(jù)管理、數(shù)據(jù)標準、數(shù)據(jù)質(zhì)量、數(shù)據(jù)分類分級、數(shù)據(jù)服務(wù)、數(shù)據(jù)集成、數(shù)倉建模、數(shù)據(jù)開發(fā)、數(shù)據(jù)探查、數(shù)據(jù)訂閱等內(nèi)容。

產(chǎn)品需滿足以下重點業(yè)務(wù)要求：

?滿足Kafka，HTTP等多種接口的集成能力，具備日志記錄能力；

?滿足接入包括Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive、Impala、TiDB等多種異構(gòu)數(shù)據(jù)源信息；

?滿足對Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive、HDFS、Kudu等數(shù)據(jù)源創(chuàng)建元數(shù)據(jù)采集任務(wù)；

?滿足實施人員針對數(shù)據(jù)表結(jié)構(gòu)進行同步配置，實現(xiàn)異構(gòu)源數(shù)據(jù)庫與目標數(shù)據(jù)庫一鍵式數(shù)據(jù)同步，滿足單表同步和多表批量同步，支持的數(shù)據(jù)源類型包括Oracle、MySQL、Doris、StarRocks、Hive等；

?數(shù)據(jù)血緣信息精確到字段級別，支持根據(jù)SQL自動生成，動態(tài)解析對象血緣關(guān)系，同時支持實施人員手動拖拽編輯數(shù)據(jù)血緣關(guān)系，實現(xiàn)快速追溯上下游表關(guān)聯(lián)便于影響分析；

?要求提供可視化數(shù)據(jù)地圖，基于元數(shù)據(jù)應(yīng)用，以數(shù)據(jù)搜索為核心，提升找到數(shù)據(jù)的效率，讀懂數(shù)據(jù)，理清數(shù)據(jù)脈絡(luò)；

?要求通過向?qū)椒绞絼?chuàng)建發(fā)布管理API接口，完成API參數(shù)配置、在線測試，對API進行分組，可查看API發(fā)布狀態(tài)、使用應(yīng)用數(shù)、調(diào)用總次數(shù)、以及API接口的情況測試；

?支持創(chuàng)建應(yīng)用，可配置接入的API、日調(diào)用次數(shù)限制，系統(tǒng)自動生成APPKEY和秘鑰信息，支持接口調(diào)用限流功能；

?工具需按照集團職能管理和物流貿(mào)易兩大分類，參考標準行業(yè)體系或地方定制體系，以樹形結(jié)構(gòu)展示集團數(shù)據(jù)資源目錄，且支持目錄編輯；

?工具需根據(jù)數(shù)據(jù)治理團隊配置的方案規(guī)則，支持輸出數(shù)據(jù)質(zhì)量報告，供數(shù)據(jù)治理團隊監(jiān)控數(shù)據(jù)質(zhì)量；

?滿足對不同數(shù)據(jù)源中的內(nèi)容按照類別和安全等級進行數(shù)據(jù)分類分級管理，數(shù)據(jù)分類包括基礎(chǔ)數(shù)據(jù)、統(tǒng)計數(shù)據(jù)和動態(tài)數(shù)據(jù)，數(shù)據(jù)分級需包括公開數(shù)據(jù)、秘密數(shù)據(jù)、機密數(shù)據(jù)和絕密數(shù)據(jù)等。

?滿足數(shù)據(jù)治理團隊實現(xiàn)快速數(shù)據(jù)建模，展示數(shù)倉內(nèi)已存在的數(shù)據(jù)表所有數(shù)據(jù)，支持對數(shù)據(jù)表進行增刪改查操作，支持自定義創(chuàng)建字段，或引用標準數(shù)據(jù)元創(chuàng)建字段，配置數(shù)倉內(nèi)數(shù)據(jù)表結(jié)構(gòu)的標準設(shè)計；

?滿足數(shù)據(jù)治理團隊實現(xiàn)數(shù)據(jù)表探查，可查看Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive等多種數(shù)據(jù)源內(nèi)的數(shù)據(jù)表數(shù)據(jù)情況，支持探查結(jié)果的下載。

?也支持可通過sql語句對Oracle、MySQL、PostgreSQL、達夢數(shù)據(jù)庫、人大金倉數(shù)據(jù)庫、翰高數(shù)據(jù)庫、Doris、StarRocks、Hive等多種數(shù)據(jù)源內(nèi)的數(shù)據(jù)表進行數(shù)據(jù)的自由探查；

②調(diào)度計算工具

為解決數(shù)據(jù)處理流程中錯綜復(fù)雜的依賴關(guān)系，保證數(shù)據(jù)計算及時性，采購調(diào)度計算工具，要求支持調(diào)度系統(tǒng)在數(shù)據(jù)流程中開箱即用，支持流批一體混合計算模式，實現(xiàn)對多源異構(gòu)數(shù)據(jù)的離線處理、實時分析和流式計算處理，實時可視化監(jiān)控任務(wù)的運行狀態(tài)。

產(chǎn)品功能需包括但不限于：總覽、離線項目管理、實時項目管理、資源中心、數(shù)據(jù)源中心、監(jiān)控中心、配置中心等內(nèi)容。

產(chǎn)品需滿足以下重點業(yè)務(wù)要求：

?支持離線任類型包括Shell、SQL語句、數(shù)據(jù)庫存儲過程、條件任務(wù)、嵌套子任務(wù)、Python、Spark、Flink、MR、HTTP、DataX、Sqoop等，支持拖拉拽任務(wù)繪制DAG工作流任務(wù)；

?離線任務(wù)工作流定義運行后，支持查看每個工作流的運行情況，以甘特圖形式查看各個狀態(tài)的運行節(jié)點時間軸；

?支持離線任務(wù)查看每條任務(wù)的運行信息、運行時長、重試次數(shù)等任務(wù)詳情信息，展示運行日志；

?支持執(zhí)行類SQL任務(wù)的方式進行實時數(shù)據(jù)處理，提供數(shù)據(jù)聚合、分析、計算、JSON處理以及數(shù)組處理相關(guān)SQL算子，此外還支持以自定義算子的形式實現(xiàn)實時業(yè)務(wù)處理邏輯；

?支持導(dǎo)入腳本模版，格式化代碼，語法提示，SQL預(yù)校驗等可幫助快捷準確錄入；

?支持多個數(shù)據(jù)源采集流式數(shù)據(jù)，如API接口、數(shù)據(jù)庫、消息隊列等；

?支持多種不同協(xié)議和傳輸方式收集數(shù)據(jù)，如TCP、UDP、HTTP等，支持由多個數(shù)據(jù)源并行收集數(shù)據(jù)；

?提供包括filter、keyby、distinct、flatMap、map等算子，支持數(shù)據(jù)過濾數(shù)據(jù)分組、數(shù)據(jù)去重、數(shù)據(jù)扁平化、數(shù)據(jù)格式轉(zhuǎn)換以及數(shù)據(jù)類型轉(zhuǎn)換等數(shù)據(jù)預(yù)處理功能；

?支持實時任務(wù)查看及檢索各個Flink實時任務(wù)的運行日志信息，包括各版本運行日志情況、任務(wù)狀態(tài)，日志存放位置，日志詳情等信息；

?支持從數(shù)據(jù)治理工具進行數(shù)據(jù)源信息同步，支持對Oracle、MySQL、PostgreSQL、Clickhouse、Doris、StarRocks、Hive、Impala、TiDB等數(shù)據(jù)源的創(chuàng)建、測試、增刪改查管理；

③運維監(jiān)控工具

為提升數(shù)據(jù)工程管理工具相關(guān)產(chǎn)品的運維效率，本工具需實現(xiàn)對大數(shù)據(jù)集群的自動化部署、運維、監(jiān)控、巡檢、告警等一站式管理，支持管理網(wǎng)絡(luò)設(shè)備、服務(wù)器、數(shù)據(jù)庫、中間件、服務(wù)、安全設(shè)備、虛擬機集群、存儲運維管理、機房動環(huán)等，并提供7***不間斷監(jiān)測服務(wù)，支持故障快速定位，幫忙實施團隊掌握全局網(wǎng)絡(luò)運行狀態(tài)，保障整個數(shù)據(jù)工程管理工具的平穩(wěn)運行。

產(chǎn)品功能需包括但不限于：監(jiān)控管理、運維管理、巡檢管理、告警管理、日志管理、配置管理等內(nèi)容。

產(chǎn)品需滿足以下重點業(yè)務(wù)要求：

?提供拓撲圖，展示主機和服務(wù)資源的結(jié)構(gòu)分布、鏈路關(guān)系、性能指標和運行狀態(tài)，需包含主機拓撲圖和服務(wù)集群拓撲，主機拓撲支持查看各主機設(shè)備健康狀態(tài)及連接狀況，查閱告警信息，定位告警問題；服務(wù)集群拓撲支持查看各大數(shù)據(jù)服務(wù)組件、類型、實例、角色鏈路關(guān)系及異常情況，高亮閃動提示，支持在拓撲圖上直接操作啟動、重啟、停止服務(wù)運維事件。

?提供服務(wù)器監(jiān)控、服務(wù)監(jiān)控、網(wǎng)絡(luò)監(jiān)控等功能，監(jiān)控各服務(wù)器、服務(wù)集群、接口端口的網(wǎng)絡(luò)狀態(tài)、當前運行的性能參數(shù)指標，每個服務(wù)指標的變化可視化統(tǒng)計及異常告警統(tǒng)計信息；

?服務(wù)器監(jiān)控需提供以服務(wù)器維度查看各個服務(wù)器狀態(tài)，性能參數(shù)需包括：服務(wù)器組、服務(wù)器、狀態(tài)、CPU、5分鐘負載、內(nèi)存、本地存儲、磁盤讀寫、網(wǎng)絡(luò)上傳/下載信息，并可清晰查看每個服務(wù)器下的服務(wù)監(jiān)控狀態(tài)及日志檢索；

?服務(wù)監(jiān)控需提供各服務(wù)集群的狀態(tài)監(jiān)控，針對不同的組件支持不同的監(jiān)控內(nèi)容（包括hdfs、yarn、kafka等服務(wù)類型），服務(wù)監(jiān)控支持級聯(lián)查看服務(wù)集群、服務(wù)類型、服務(wù)角色、服務(wù)實例，監(jiān)控數(shù)據(jù)包含角色指標和jvm指標，如：JVM堆內(nèi)存、GC、CPU使用率、線程數(shù)、TPS、吞吐量等；

?網(wǎng)絡(luò)監(jiān)控需提供針對接口和端口的監(jiān)控，接口實時在線監(jiān)控需包括：接口名稱、源主機、監(jiān)控地址、請求方式、返回碼、響應(yīng)時間、監(jiān)控狀態(tài)；端口實時在線監(jiān)控需包括：源主機、IP、端口、監(jiān)控狀態(tài)以及響應(yīng)時長對比；

?支持線上服務(wù)運維，可以進行啟動、重啟、停止操作事件，便于發(fā)現(xiàn)異常后直接通過工具便捷操作，查看運行狀態(tài)及操作日志。

?支持線上巡檢，支持通過自定義設(shè)置巡檢對象，檢查指標、周期策略等進行即時性、周期性等巡檢工作的自動化執(zhí)行，并生成標準可視化報告；

④ 數(shù)據(jù)共享交換工具

為解決跨行業(yè)、跨部門間的數(shù)據(jù)資源共享，實現(xiàn)數(shù)據(jù)資源有序可控的統(tǒng)籌管理與得當利用，本工具需要結(jié)合行業(yè)標準或技術(shù)規(guī)范梳理形成交投集團信息資源目錄，完成各類數(shù)據(jù)資源進行歸集匯總，通過文件或接口等共享方式提供給第三方平臺或系統(tǒng)。

產(chǎn)品功能需包括但不限于：數(shù)據(jù)資源、數(shù)據(jù)統(tǒng)計、共享管理、審核管理等內(nèi)容。

產(chǎn)品需滿足以下重點業(yè)務(wù)要求：

?支持結(jié)合行業(yè)標準或技術(shù)規(guī)范（集團職能管理和物流貿(mào)易等）等梳理形成信息資源目錄，按行業(yè)、業(yè)務(wù)、主題、數(shù)據(jù)提供單位進行資源的分類展示，數(shù)據(jù)使用方可根據(jù)應(yīng)用場景選擇合適的數(shù)據(jù)進行數(shù)據(jù)接口申請或數(shù)據(jù)文件下載；

?數(shù)據(jù)資源目錄是以信息資源核心元數(shù)據(jù)為基礎(chǔ)，對信息資源進行分級分類和格式標準化，形成有序組織，不同的業(yè)務(wù)展示不同的資源目錄。

?支持數(shù)據(jù)資源詳情展示，包括資源目錄的基本信息：資源名稱、資源簡介、共享條件、數(shù)據(jù)來源、更新頻率、更新方式、數(shù)據(jù)使用情況以及數(shù)據(jù)項信息、掛接的接口信息或數(shù)據(jù)文件。

?支持數(shù)據(jù)實施團隊進行接口配置，通過接口服務(wù)申請，審核通過后生效，申請內(nèi)容包括資源名稱、申請用途、申請要求、申請人、申請單位、共享方式等內(nèi)容。

?支持實施團隊進行數(shù)據(jù)配置共享，包括：是否允許共享、共享條件、共享方式、提供數(shù)據(jù)下載和接口服務(wù)，該模塊的數(shù)據(jù)資源（資源目錄管理、接口創(chuàng)建）來源于“數(shù)據(jù)治理工具”，治理工具梳理資源后同步到共享工具進行資源共享關(guān)聯(lián)、共享配置管理。

⑤ 數(shù)據(jù)融合展示工具

數(shù)據(jù)融合展示工具要求連接數(shù)據(jù)庫、大數(shù)據(jù)平臺、API接口等作為數(shù)據(jù)源，將復(fù)雜數(shù)據(jù)直觀映射，實現(xiàn)全局數(shù)據(jù)融合展示，支持通過拖拉拽方式快速制作圖表或大屏頁面進行分享展示。

產(chǎn)品功能需包括但不限于：數(shù)據(jù)處理、儀表板、數(shù)據(jù)大屏、系統(tǒng)配置等內(nèi)容。

產(chǎn)品需滿足以下重點業(yè)務(wù)要求：

?支持管理Oracle、MySQL、PostgreSQL、Clickhouse、Doris、StarRocks、Hive各類數(shù)據(jù)連接信息，是數(shù)據(jù)分析操作中數(shù)據(jù)的來源，支持關(guān)系型數(shù)據(jù)庫、數(shù)據(jù)倉庫、API等多種數(shù)據(jù)源類型；

?支持為數(shù)據(jù)分析或報表制作等操作進行相關(guān)的數(shù)據(jù)準備、加工，支持計算字段可在當前數(shù)據(jù)集字段的基礎(chǔ)上通過公式或函數(shù)生成新的字段。

三、數(shù)據(jù)工程管理工具技術(shù)要求

?需具備高效的數(shù)據(jù)存儲和處理能力，能夠處理TB級別（超過****GB）海量的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，包括數(shù)據(jù)的輸入、清洗、存儲、查詢和計算等。

?采用分布式計算和并行處理技術(shù)，通過橫向擴展提高計算能力和處理效率，同時支持并行訪問和處理大規(guī)模數(shù)據(jù)。橫向擴展后可以支持創(chuàng)建超過****個計算任務(wù)，使用Pipeline架構(gòu)執(zhí)行引擎，支持同時超過**0個任務(wù)的并行執(zhí)行。

?底層采用MPP（Massively Parallel Processing）架構(gòu)設(shè)計，支持PB級別（超過****TB）的數(shù)據(jù)存儲能力，支持對TB級別（超過****GB）的單表數(shù)據(jù)進行秒級讀取和計算操作。

?大數(shù)據(jù)集群上的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)，均采用多副本（默認為3份）的方式進行分布式存儲，同時實現(xiàn)了對數(shù)據(jù)的并發(fā)訪問支持和安全備份能力。

?大數(shù)據(jù)集群，支持服務(wù)的橫向伸縮。當集群訪問增加時，可以通過集群的橫向擴展（節(jié)點成倍擴展，例如從3節(jié)點擴展到6節(jié)點），來滿足數(shù)據(jù)的存儲和計算需求，確保系統(tǒng)的穩(wěn)定性和高可用性。

?簽訂合同后，一周內(nèi)完成產(chǎn)品交付，對數(shù)據(jù)治理團隊進行產(chǎn)品培訓(xùn)，且有專業(yè)工程師7***技術(shù)支持。

?提供一年免費運維，包括使用過程中的技術(shù)答疑、支持、培訓(xùn)、版本升級等內(nèi)容。

?要求投標單位協(xié)助編寫著作權(quán)文檔，且著作權(quán)歸甲方所有。

?要求工具界面風格、工具界面名稱、工具logo圖標等必須滿足交投集團現(xiàn)有系統(tǒng)平臺的界面要求，按照交投集團要求進行調(diào)整。