2019/08/05 招標(biāo)信息
一、采購條件
內(nèi)蒙古蒙草草原生態(tài)大數(shù)據(jù)研究院有限公司針對生態(tài)大數(shù)據(jù)數(shù)據(jù)管理平臺項目競爭性談判。
二、項目概況
(一)項目名稱:生態(tài)大數(shù)據(jù)數(shù)據(jù)管理平臺項目
(二)項目編號:MCSTHJ-2019-FW012
(三)采購方式:公開競爭性談判
(四)資金來源:專項資金
(五)資金落實情況:已落實
三、采購內(nèi)容
(一)數(shù)據(jù)融合采集
1.ETL工具具備豐富的接入適配能力,支持國內(nèi)外主流的關(guān)系型數(shù)據(jù)庫,包含但不限于以下數(shù)據(jù)庫: Oracle、DB2、Teradata、SQL Server、Sybase、Mysql、PostgreSQL等。
2.ETL工具支持大數(shù)據(jù)存儲和訪問,支持大數(shù)據(jù)環(huán)境的數(shù)據(jù)采集。支持MongoDB、HBase等主流大數(shù)據(jù)數(shù)據(jù)庫等,支持大數(shù)據(jù)存儲載體Hadoop,適配SDC Hadoop、Apache開源大數(shù)據(jù)平臺、華為大數(shù)據(jù)平臺安全模式、星環(huán)大數(shù)據(jù)平臺安全模式等國內(nèi)主流大數(shù)據(jù)平臺。
3.ETL工具提供強大的調(diào)度引擎,支撐各種復(fù)雜的任務(wù)調(diào)度流程的高效運行,為海量的異構(gòu)數(shù)據(jù)集成提供保障。支持關(guān)系型數(shù)據(jù)采集、大數(shù)據(jù)采集(Hbase采集)、文件數(shù)據(jù)采集、接口數(shù)據(jù)采集任務(wù)的統(tǒng)一管理和調(diào)度。
4.ETL工具支持文件和數(shù)據(jù)斷點續(xù)傳:支持G級別大小的文件斷點續(xù)傳,傳輸過程中網(wǎng)絡(luò)中斷后,在重新傳輸時,通過檢測文件長度和斷點位置,從斷點處開始傳輸,可節(jié)省時間和其它資源。
5.ETL工具支持可視化任務(wù)監(jiān)控:以可視化界面監(jiān)控任務(wù)運行詳情、數(shù)據(jù)處理流程、任務(wù)執(zhí)行日志、步驟度量和歷史詳情,并提供實時報警。
(二)數(shù)據(jù)綜合治理
數(shù)據(jù)綜合治理
以國標(biāo)、行標(biāo)等數(shù)據(jù)規(guī)范為指導(dǎo),結(jié)合蒙草自有基礎(chǔ)數(shù)據(jù)規(guī)范標(biāo)準(zhǔn),針對蒙草業(yè)務(wù)系統(tǒng),對其數(shù)據(jù)進行整合集成。構(gòu)建元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)資產(chǎn)管理、調(diào)度中心管理、數(shù)據(jù)服務(wù)等功能模塊。具體技術(shù)指標(biāo)要求如下:
1.元數(shù)據(jù)管理
(1)支持基于CWM元數(shù)據(jù)標(biāo)準(zhǔn)實現(xiàn)對業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)、管理元數(shù)據(jù)的統(tǒng)一管理和存儲。
(2)支持通過解析腳本,自動形成技術(shù)元數(shù)據(jù)之間的血緣、影響和全鏈關(guān)系。
(3)元數(shù)據(jù)分析:提供影響分析、血緣分析、全鏈分析、關(guān)聯(lián)分析等功能,支持業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)關(guān)聯(lián)關(guān)系自動解析,提供友好的圖形展示分析功能。
(4)支持元數(shù)據(jù)權(quán)限管理,可按照用戶和角色進行授權(quán),權(quán)限顆粒度細化到按照列和行進行授權(quán)。
2.數(shù)據(jù)標(biāo)準(zhǔn)管理
(1)依據(jù)數(shù)據(jù)訪問頻率、數(shù)據(jù)引用情況、數(shù)據(jù)唯一性、元數(shù)據(jù)屬性、等進行智能識別,基于技術(shù)元數(shù)據(jù)的分類作為樣本進行訓(xùn)練,智能生成數(shù)據(jù)元標(biāo)準(zhǔn)和數(shù)據(jù)集。
(2)智能生成數(shù)據(jù)元與技術(shù)元數(shù)據(jù)、數(shù)據(jù)集與技術(shù)元數(shù)據(jù)的關(guān)聯(lián)關(guān)系。
(3)支持針對數(shù)據(jù)元標(biāo)準(zhǔn)的規(guī)則配置,包括類型,長度,值域,正則表達式,數(shù)據(jù)范圍。
3.數(shù)據(jù)質(zhì)量管理
(1)支持大數(shù)據(jù)主流廠商Hive、HBase數(shù)據(jù)源的數(shù)據(jù)質(zhì)量任務(wù)運行能力,主要包括(SDC Hadoop、CDH、HDP、星環(huán)TDH、華為Fusioninsight)。
(2)支持雙引擎模式,針對不同數(shù)據(jù)量的質(zhì)量任務(wù)提供分布式任務(wù)和集群任務(wù)同時設(shè)計、運行、輸出質(zhì)量報告。
(3)通過識別技術(shù)元數(shù)據(jù)與業(yè)務(wù)元數(shù)據(jù)的關(guān)系,智能生成待治理表的質(zhì)量規(guī)則,智能生成質(zhì)量規(guī)則包括數(shù)據(jù)格式校驗、值域校驗、數(shù)據(jù)范圍校驗、正則表達式校驗、空值校驗。
(4)產(chǎn)品內(nèi)置15種數(shù)據(jù)校驗組件,支持拖拽的方式快速構(gòu)建各種數(shù)據(jù)校驗流程化設(shè)計。校驗組件涵蓋數(shù)據(jù)格式校驗、數(shù)據(jù)范圍校驗、正則表達式、值域校驗、字段值缺失、唯一性校驗、記錄數(shù)缺失、Switch/case、主外鍵一致性校驗、字段值比對、身份證校驗、及時性校驗、精度校驗、JavaScript、Java;支持校驗規(guī)則的自定義,支持校驗流程分支設(shè)計。
(5)部分組件支持跨數(shù)據(jù)庫的數(shù)據(jù)之間的校驗。
(6)探查和識別數(shù)據(jù),可以針對數(shù)據(jù)進行準(zhǔn)確性、完整性、唯一性等類別進行自動識別,自動生成質(zhì)量報告,提升數(shù)據(jù)管理水平。可按照年、月、季度等時間維度,也可按照每個數(shù)據(jù)源的維度生成質(zhì)量報告,支持質(zhì)量報告的下載。
4.數(shù)據(jù)資產(chǎn)管理
(1)支持對數(shù)據(jù)資產(chǎn)全生命周期管理,根據(jù)自定義策略,可將數(shù)據(jù)及關(guān)聯(lián)的文件進行自動化的清理和歸檔。。
(2)支持通過數(shù)據(jù)查詢等功能提供Oracle、DB2、SQL Server、Mysql、PostgreSQL、 Hive(SDC Hadoop、HDP、星環(huán)TDH、華為Fusioninsight)數(shù)據(jù)的SQL查詢能力。
5.數(shù)據(jù)共享服務(wù)
(1)支持通過Oracle、DB2、SQL Server、Mysql、PostgreSQL、Hive(SDC Hadoop、HDP、星環(huán)TDH、華為Fusioninsight)數(shù)據(jù)服務(wù)共享。
(2)支持通過web界面即可完成數(shù)據(jù)服務(wù)接口的服務(wù)發(fā)布、審核、共享,無需編程人員開發(fā)代碼。
(3)支持?jǐn)?shù)據(jù)脫敏:規(guī)則配置簡單易用,支持替換,截斷,掩碼,重排,日期偏移取整脫敏規(guī)則的配置。
(4)支持?jǐn)?shù)據(jù)安全規(guī)范和策略,識別并標(biāo)記敏感數(shù)據(jù),制定針對敏感數(shù)據(jù)的使用權(quán)限,制定用戶對敏感數(shù)據(jù)的訪問權(quán)限,確保數(shù)據(jù)資產(chǎn)在使用過程中具有適當(dāng)?shù)恼J證、授權(quán)、訪問和審計等控制措施。
(三)數(shù)據(jù)倉庫建設(shè)
遵循數(shù)據(jù)標(biāo)準(zhǔn)的數(shù)據(jù)信息項和標(biāo)準(zhǔn)代碼,結(jié)合國內(nèi)外綜合科學(xué)模型建設(shè)方法,作為邏輯數(shù)據(jù)模型建設(shè)的參考標(biāo)準(zhǔn),構(gòu)建蒙草數(shù)據(jù)資源倉庫為四層架構(gòu)設(shè)計,其中包括ODS數(shù)據(jù)準(zhǔn)備層、DWD數(shù)據(jù)基礎(chǔ)層、DM數(shù)據(jù)集市層、數(shù)據(jù)應(yīng)用層。
詳細采購內(nèi)容見《競爭性談判文件》
四、投標(biāo)人資格要求
(一)具有足夠資產(chǎn)和能力來有效地履行合同,近三年無違法違規(guī)行為,沒有處于被責(zé)令停業(yè)或破產(chǎn)狀態(tài),且資產(chǎn)未被重組、接管和凍結(jié)。
(二)有依法繳納稅收和社會保障資金的良好記錄。
(三)有獨立項目開發(fā)成功案例,須提本次項目規(guī)模相當(dāng)?shù)某晒Π咐?/span>
(四)近3年內(nèi)未出現(xiàn)過驗收未獲通過的項目或者應(yīng)由企業(yè)承擔(dān)責(zé)任的用戶重大投訴。
五、公告發(fā)布媒介
(一)中國采購與招標(biāo)網(wǎng) 網(wǎng)址:www.chinabidding.com.cn
(二)內(nèi)蒙古蒙草公司官網(wǎng) 網(wǎng)址:baphoto.com.cn
六、報名須知及資格審查
(一)報名時間:2019年8月5日至2019年8月12日,8:30-12:00, 14:30-18:00時(北京時間,下同),報名截止時間為2019年8月12日18:00,逾期不再受理。
(二)報名方式:投標(biāo)人填寫《投標(biāo)報名表》,簽字確認并連同企業(yè)營業(yè)執(zhí)照、開戶許可證、軟件資質(zhì)于報名截止時間前發(fā)回到服務(wù)中心報名郵箱[email protected]。(注:報名表需word版+掃描蓋章版)采購人在指定日期回復(fù)競談文件至對應(yīng)報名郵箱,不需要現(xiàn)場領(lǐng)取)。
七、競談文件的獲取
(一)獲取時間:2019年8月5日至2019年8月12日,上午8:30-12:00,下午14:00-18:00,逾期不再受理。
八、其他事項
(一)開標(biāo)時間:2019年8月13日上午9:00時
開標(biāo)地點:內(nèi)蒙古呼和浩特市新城區(qū)蒙草集團百草園會議室
(二)本次招標(biāo)不接受聯(lián)合體投標(biāo),不接受郵寄投標(biāo)。
(三)投標(biāo)費用:投標(biāo)人應(yīng)承擔(dān)其編制與遞交投標(biāo)文件所涉及的一切費用,無論投標(biāo)結(jié)果如何,采購人對上述費用概不負責(zé),均由投標(biāo)人承擔(dān)。
九、聯(lián)系方式
采購人:內(nèi)蒙古蒙草草原生態(tài)大數(shù)據(jù)研究院有限公司
投標(biāo)報名聯(lián)系人及電話: 高婷婷 13674746050
需求部門答疑聯(lián)系人及電話: 徐敏 15548139860
電 話:0471-6695191-810
傳 真:0471-6695192
附件一:投標(biāo)報名表
采購人:內(nèi)蒙古蒙草草原生態(tài)大數(shù)據(jù)研究院有限公司
日期:二○一九年八月五日
報名表下載鏈接
aa0228f15b5c8abc789cab4c99dfa297.docx