网址:www



网址:

招标文件

[pic]

项目编号:CZ2018-1152

项目名称:广州市白云区政务大数据云平台建设项目

项目类别:服务类

广州公共资源交易中心

2018年8月20日

温馨提示:供应商投标特别注意事项

1. 参加投标之前,供应商应确认企业信用档案是否办理,以免出现企业信用档案不能被使用等问题。上述情况有可能导致投标报名信息无法导入广州公共资源交易中心(以下简称交易中心)政府采购交易系统。综合信用评价得分计算的具体时间请参阅《关于公共资源交易综合信用指数计算时间的说明》(见本项目招标公告附件)。

2. 一律不接受纸质投标文件,只接受具备法律效力的电子投标文件。供应商参加投标前,应当到依法设立的电子认证服务机构(交易中心办理点)办理CA数字证书和电子签章。

3. 如更正公告有重新发布电子招标文件的,供应商需使用更正公告后最新发布的电子招标文件来制作电子投标文件,否则投标时将无法正常提交电子投标文件。

4. 供应商需在提交投标文件截止时间前完整上传电子投标文件并保存在交易中心政府采购交易系统,且取得回执。逾期送达或错误投递方式送达的投标文件交易中心恕不接收。

5. 对收取投标保证金的项目,只接受以银行转账方式交纳投标保证金,投标保证金到账后须登录银行网页将投标保证金绑定本项目,方为完成投标保证金交纳程序。由于转账当天不一定能够到账,建议至少提前二个工作日转账并绑定。

6. 加★号的条款均被视为重要的指标要求,必须一一响应。若有一项带“★”的指标要求未响应或不满足,将按投标无效处理。

7. 投标人报价低于最高限价60%的,必须在投标文件中说明报价理由。

8. 投标人的报价明显低于其他通过符合性审查投标人的报价,有可能影响产品质量或者不能诚信履约的,应当按评标委员会的要求,在评标现场合理的时间内提供书面说明,必要时提交相关证明材料;投标人不能证明其报价合理性的,将被作为无效投标处理。

9. 对可接受分支机构投标的项目,分支机构投标的,需提供总公司(总所)的营业执照扫描件及授权书,授权书须加盖总公司(总所)公章。总公司(总所)可就本项目或此类项目在一定范围或时间内出具授权书。已由总公司(总所)授权的,总公司(总所)取得的相关资质证书对分支机构有效,法律法规或者行业另有规定的除外。

10. 评标委员会评标时,对供应商部分信息直接取自供应商在交易中心企业库登记的信息,请供应商及时维护、更新企业库的信息,确保其时效性。

11. 供应商一旦依法被确认为中标人,其投标文件中的相关内容(主要中标标的的名称、规格型号、数量、单价、服务要求等),将会随中标结果公告一并发布在采购信息发布网上,接受社会监督。

12. 交易中心为采购代理机构,不对供应商报名时提交的相关资料的真实性负责,如供应商发现相关资料被盗用或复制,应遵循法律途径解决,追究侵权者责任。

(本提示内容非招标文件的组成部分,仅为善意提醒。如有不一致,以招标文件为准。)

广州市白云区政务大数据云平台建设项目

招标公告

广州公共资源交易中心(以下简称交易中心)受广州市白云区政府政务管理办公室(以下简称采购人)的委托,对广州市白云区政务大数据云平台建设项目进行公开招标采购,欢迎符合资格条件的供应商投标。

一、采购项目编号:CZ2018-1152

二、采购项目名称:广州市白云区政务大数据云平台建设项目

三、采购项目预算金额:人民币4000000元

最高限价:人民币4000000元

四、采购数量:1项

五、采购项目内容及需求(采购项目技术规格、参数及要求,需要落实的政府采购政策):

(一)采购内容:本项目确定一家供应商,为采购人提供广州市白云区政务大数据云平台系统开发及运维服务。

(二)按照《财政部关于在政府采购活动中查询及使用信用记录有关问题的通知》(财库﹝2016﹞125号)的要求,根据评审时“信用中国”网站(.cn)的信息,对列入失信被执行人、重大税收违法案件当事人名单、政府采购严重违法失信行为记录名单的供应商,拒绝其参与政府采购活动(如查询结果显示“没查到您要的信息”,视为没有上述三类不良信用记录) 。同时对信用信息查询记录和证据截图存档。

(三)本项目运用公共资源交易综合信用指数(以下简称“信用指数”),综合信用评价得分计入综合评分,请供应商根据《公共资源交易综合信用指数评价标准》对相关资料进行登记或更新,详见本招标公告附件。

(四)本项目要求在评标过程中进行原型演示及答辩,请供应商在解密完成前到达交易中心等候。等候地点:广州市天河区天润路445号广州公共资源交易中心(太阳广场)四楼。

六、供应商资格:

(一)符合《政府采购法》第二十二条所规定的条件;分支机构投标的,必须由总公司(总所)授权。

(二)本项目不接受联合体投标。

七、根据广东省财政厅政府采购监管处《关于做好供应商注册登记有关工作的通知》的要求,供应商应在报名前通过广东省政府采购网(.cn)进行注册登记(相关事宜详见广东省政府采购网《关于做好供应商注册登记有关工作的通知》)。

八、报名前,供应商需办理交易中心供应商信用档案(办理方法请参阅本公告附件3)。符合资格的供应商应当在2018年8月20日公告之时至2018年9月9日 23:59期间登录交易中心网站()会员专区完成本项目报名信息登记(本项目不收取采购文件工本费)。供应商可登录交易中心网站()自行下载招标文件。

九、现场考察及招标答疑会

|   (一) 本项目不需要现场考察。 |

|   (二) 本项目不需要现场招标答疑会。 |

十、提交投标文件时间:2018年8月20日公告之时起至2018年9月10日 9:00。

十一、提交投标文件截止时间和开标时间:2018年9月10日 9:00。

十二、供应商提交投标文件的方式:在交易中心网站会员专区上传电子投标文件。

十三、投标文件解密时间:2018年9月10日 9:00-2018年9月10日 10:00。

     解密完成后及时公布开标结果,投标人可登录交易中心会员专区查看开标情况。

十四、开标地点:在线开标。

十五、本公告期限(5个工作日)自2018年8月20日至2018年8月27日止。

十六、联系事项:

|   (一)采购人 |

|   采购人名称:广州市白云区政府政务管理办公室 |

|   采购人地址:广州市白云区机场路561号 |

|   联 系 人: 郑刚 联系电话:(020) 86052562 |

(二)采购代理机构

名称:广州公共资源交易中心

地址:广州市天河区天润路333号 邮编:510630

对外办公时间:工作日8:30~12:00,14:00~17:30

(三)服务热线:

1.业务咨询:(020)28866000转4 传真:(020)28866414

2.CA数字证书及电子签章:(020)28866000转“CA数字证书及电子签章咨询”

3.电子投标技术支持电话:(020)28866000转“系统帮助咨询服务”、15360503495、15360503496(工作日服务时间:每天8:30-17:30)

4.采购文件咨询:政府采购招标部 董宁,联系电话:(020)28866415

5.项目开标、评审咨询:政府采购交易部 李静春,联系电话:(020)28866413

6.质疑受理:政府采购审核部 陈继桦,联系电话:(020)28866163

发布人:广州公共资源交易中心

发布时间:2018年8月20日

附:交易中心位置图

[pic]

第一章 投标人须知

投标人必须认真阅读招标文件中所有的事项、格式、条款和采购需求等。投标人没有按照招标文件要求提交全部资料,或者投标文件没有对招标文件在各方面都做出实质性响应的可能导致其投标无效或被拒绝。

名词解释

(一)采购代理机构:本项目是指广州公共资源交易中心,负责整个采购活动的组织,依法负责编制和发布招标文件,对招标文件拥有最终的解释权,不以任何身份出任评标委员会成员。

(二)采购人:本项目是指广州市白云区政府政务管理办公室,是采购活动当事人之一,负责项目的整体规划、技术方案可行性设计论证与实施,作为合同采购方(用户)的主体承担质疑回复、履行合同、验收与评价等义务。

(三)投标人:是指完成本项目报名信息登记并提交投标文件的供应商。

(四)招标文件:是指包括招标公告和招标文件及其补充、变更和澄清等一系列文件。

(五)电子投标文件:是指使用交易中心提供的投标文件管理软件制作的投标文件。

(六)电子签名和电子签章:是指广东省内依法设立的电子认证服务机构签发的电子签名认证证书和电子签章,供应商应当到上述服务机构(交易中心办理点)办理。电子签名及电子签章与手写签名或者盖章具有同等的法律效力。

(七)日期、天数、时间:未有特别说明时,均为公历日(天)及北京时间。

(八)采购信息发布网站:广东省政府采购网(.cn)、广州市政府采购平台()和广州公共资源交易中心网()。

一般要求

1 投标的费用

2 不论投标的结果如何,投标人应承担所有与编写和提交投标文件有关的费用。

3 采购人在下载打印电子《中标通知书》前应向交易中心支付公共资源交易服务费。

4 公共资源交易服务费以采购额按差额定率累进法(如下表)计算。

|采购额 |货物类 |服务类 |工程类 |

|采购额≤100万元 |1.2% |1.2% |0.8% |

|100万元<采购额≤500万元 |0.88% |0.64% |0.56% |

|500万元<采购额≤1000万元 |0.64% |0.36% |0.44% |

|1000万元<采购额≤5000万元 |0.4% |0.2% |0.28% |

|5000万元<采购额≤1亿元 |0.2% |0.08% |0.16% |

|1亿元<采购额≤5亿元 |0.04% |0.04% |0.04% |

|5亿元<采购额≤10亿元 |0.028% |0.028% |0.028% |

|10亿元<采购额≤50亿元 |0.0064% |0.0064% |0.0064% |

|50亿元<采购额≤100亿元 |0.0048% |0.0048% |0.0048% |

|采购额>100亿元 |0.0032% |0.0032% |0.0032% |

注:本项目采购额为中标金额。

6 公共资源交易服务费支付方式

采购人凭CA数字证书登录广州公共资源交易中心数字交易平台查询支付金额,并选用以下三种方式支付公共资源交易服务费:

(1)网上支付(推荐方式):

采购人登录交易平台,选定“支付公共资源交易服务费”,选定支付交费项目,输入手机号码、纳税人识别号或统一社会信用代码,使用已具备网上支付功能的个人银行卡或已开通网上支付功能的单位账户进行网上支付。

(2)现场支付:采购人携现金前往交易中心大厅西侧建设银行天润路支行交款,交款后前往财务专窗办理提供纳税人识别号或统一社会信用代码办理支付确认。

(3)汇款支付:采购人将公共资源交易服务费转账(汇款)至公共资源交易服务费结算账户(如下所示)后,到账后凭转账(汇款)凭证前往交易中心大厅西侧建设银行天润路支行财务专窗办理支付确认或使用公共资源交易服务费转账凭证上传确认系统进行支付确认。

公共资源交易服务费结算账户信息:

收款单位:广州公共资源交易中心

开户银行:中国建设银行广州市天润路支行

账号:44001583404059112025-0001

注:采购人在支付过程中输入的手机号码是领取网上电子发票的依据,请谨慎填写。采购人可在支付确认完成的3个工作日后凭上述经办人手机号登录发票通网站“”或微信号“发票通”中下载电子发票用于报账。

7 招标文件的澄清和修改

8 交易中心对招标文件进行必要的澄清或者修改的,在采购信息发布网站上发布更正公告。澄清或者修改的内容可能影响投标文件编制的,更正公告在投标截止时间至少15日前发出;不足15日的,交易中心顺延提交投标文件截止时间。

9 更正公告为招标文件的组成部分,一经在交易中心网站发布,系统将自动通过电子邮件方式发送给已投标报名的供应商,视同已通知所有招标文件的收受人。

10 如更正公告有重新发布电子招标文件的,供应商应下载最新发布的电子招标文件制作投标文件。

11 投标人在规定的时间内未对招标文件提出疑问、质疑或要求澄清的,将视其为无异议。对招标文件中描述有歧义或前后不一致的地方,评标委员会有权进行评判,但对同一条款的评判应适用于每个投标人。

12 关于分支机构投标

分支机构投标的,需提供总公司(总所)的营业执照扫描件及授权书,授权书须加盖总公司(总所)公章。总公司(总所)可就本项目或此类项目在一定范围或时间内出具授权书。已由总公司(总所)授权的,总公司(总所)取得的相关资质证书对分支机构有效,法律法规或者行业另有规定的除外。

13 关于联合体投标

本项目不接受联合体投标。

16 关于关联企业

法定代表人或单位负责人为同一个人或者存在直接控股、管理关系的不同供应商,不得同时参加同一项目或同一子项目的投标。如同时参加,则评审时将同时被拒绝。

17 关于提供前期服务的供应商

为采购项目提供整体设计、规范编制或者项目管理、监理、检测等服务的供应商,不得再参加该采购项目的其他采购活动。

19 关于中小微企业投标

中小微企业投标是指符合《中小企业划型标准规定》的投标人,通过投标提供本企业制造的货物、承担的工程或者服务,或者提供其他中小微企业制造的货物。本项所指货物不包括使用大型企业注册商标的货物。中小微企业投标应提供《中小微企业声明函》;提供其他中小微企业制造的货物的,应同时提供制造商的《中小微企业声明函(制造商)》。中小企业划分见《关于印发中小企业划型标准规定的通知》(工信部联企业〔2011〕300号) 。

根据财库〔2014〕68号《财政部 司法部关于政府采购支持监狱企业发展有关问题的通知》,监狱企业视同小微企业。监狱企业是指由司法部认定的为罪犯、戒毒人员提供生产项目和劳动对象,且全部产权属于司法部监狱管理局、戒毒管理局、直属煤矿管理局,各省、自治区、直辖市监狱管理局、戒毒管理局,各地(设区的市)监狱、强制隔离戒毒所、戒毒康复所,以及新疆生产建设兵团监狱管理局、戒毒管理局的企业。监狱企业投标时,提供由省级以上监狱管理局、戒毒管理局(含新疆生产建设兵团)出具的属于监狱企业的证明文件,不再提供《中小微企业声明函》。

根据财库〔2017〕141号《财政部 民政部 中国残疾人联合会关于促进残疾人就业政府采购政策的通知》,在政府采购活动中,残疾人福利性单位视同小型、微型企业,享受政府采购支持政策的残疾人福利性单位应当同时满足《财政部 民政部 中国残疾人联合会关于促进残疾人就业政府采购政策的通知》所列条件。残疾人福利性单位属于小型、微型企业的,不重复享受政策。符合条件的残疾人福利性单位在参加政府采购活动时,应当提供《残疾人福利性单位声明函》,并对声明的真实性负责。

20 知识产权

21 投标人必须保证,采购人在中华人民共和国境内使用投标货物、资料、技术、服务或其任何一部分时,享有不受限制的无偿使用权,如有第三方向采购人提出侵犯其专利权、商标权或其它知识产权的主张,该责任应由投标人承担。

22 投标报价应包含所有应向所有权人支付的专利权、商标权或其它知识产权的一切相关费用。

23 系统软件、通用软件必须是具有在中国境内的合法使用权或版权的正版软件,涉及到第三方提出侵权或知识产权的起诉及支付版税等费用由投标人承担所有责任及费用。

24 中标人需对所有成果、产品的知识产权负有瑕疵担保责任,因使用未被授权使用的技术、组件、系统软件、通用软件等知识产权问题引起的纠纷所产生的所有责任及费用由中标人自行承担。

25 本项目研究成果及其技术文档等所有权由采购人享有,技术文档资料包括完备的系统设计文档、功能模块说明、程序源代码、执行代码、使用手册等,采购人对本项目的所有成果具有所有权。项目所交付的应用系统软件环境包括生产环境(正式环境)、测试环境、开发环境,所有环境均要求能正常使用,未经采购人许可,中标人不得将相关采购人资料提供给第三方。

26 纪律与保密事项

27 投标人不得相互串通投标报价,不得妨碍其他投标人的公平竞争,不得损害采购人或其他投标人的合法权益,投标人不得以向采购人、评标委员会成员行贿或者采取其他不正当手段谋取中标。

28 在确定中标人之前,投标人不得与采购人就投标价格、投标方案等实质性内容进行谈判,也不得私下接触评标委员会成员。

29 在确定中标人之前,投标人试图在投标文件审查、澄清、比较和评价时对评标委员会、采购人和交易中心施加任何影响都可能导致其投标无效。

30 获得本招标文件者,不得将招标文件用作本次投标以外的任何用途。若有要求,开标后,投标人应归还招标文件中的保密文件和资料。

31 由采购人向投标人提供的图纸、详细资料、样品、模型、模件和所有其它资料,均为保密资料,仅被用于它所规定的用途。除非得到采购人的同意,不能向任何第三方透露。开标结束后,应采购人要求,投标人应归还所有从采购人处获得的保密资料。

质疑

1 供应商认为招标文件、采购过程和中标结果使自己的权益受到损害的,可以在知道或者应知其权益受到损害之日起七个工作日内,以书面原件形式向采购人或交易中心一次性提出针对同一采购程序环节的质疑,逾期质疑无效。供应商应知其权益受到损害之日是指:

1. 对招标文件提出质疑的,为获取招标文件之日或者招标文件公告期限届满之日;

2. 对采购过程提出质疑的,为各采购程序环节结束之日;

3. 对中标结果提出质疑的,为中标结果公告期限届满之日。

2 质疑函应当包括下列主要内容:

1. 质疑供应商和相关供应商的名称、地址、邮编、联系人及联系电话等;

2. 质疑项目名称及编号、具体、明确的质疑事项和与质疑事项相关的请求;

3. 认为采购文件、采购过程、中标和成交结果使自己的合法权益受到损害的法律依据、事实依据、相关证明材料及证据来源;

4. 提出质疑的日期。

3 质疑函应当署名。质疑供应商为自然人的,应当由本人签字;质疑供应商为法人或者其他组织的,应当由法定代表人、主要负责人,或者其授权代表签字或者盖章,并加盖公章。

4 供应商质疑应当有明确的请求和必要的证明材料。质疑内容不得含有虚假、恶意成份。依照谁主张谁举证的原则,提出质疑者必须同时提交相关确凿的证据材料和注明证据的确切来源,证据来源必须合法,交易中心有权将质疑函转发质疑事项各关联方,请其作出解释说明。对捏造事实、滥用维权扰乱采购秩序的恶意质疑者,将上报政府采购监督管理部门依法处理,同时交易中心将在企业信用档案中予以记录,对综合信用评价得分予以扣除。

5 质疑供应商对采购人、交易中心的质疑答复不满意,或者采购人、交易中心未在规定期限内作出答复的,可以在答复期满后15个工作日内向采购人的同级政府采购监督管理部门提起投诉。

6 质疑受理部门:政府采购审核部。

7 提交质疑函地点:交易中心三楼政府采购审核部(法律事务部),质疑函范本请自行在“交易中心主页-服务指南-资料下载-政府采购”下载。

8 本次采购活动中,交易中心作出的质疑答复等文件的送达方式为现场取件或邮寄。

投标要求

1 投标文件的制作

2 投标文件中,除规定采用交易中心企业信息库中登记的信息外,其他内容均以电子文件编制,其格式要求详见第五章说明。如因不按要求编制而所引起系统无法检索、读取相关信息时,其后果由投标人承担。

3 投标人应使用交易中心提供的投标文件管理软件对投标文件进行合成、电子签名、电子签章及加密打包。所有投标文件不能进行压缩处理。

4 投标人不得将同一个项目或同一个子项目的内容拆开投标,否则其报价将被视为非实质性响应。

5 投标人须对招标文件的对应要求给予唯一的实质性响应,否则将视为不响应。

6 招标文件中,凡标有“★”的地方均为实质性响应条款,投标人若有一项带“★”的条款未响应或不满足,将按无效投标处理。

7 ★投标人报价低于最高限价60%的,必须在投标文件中说明报价理由。

8 投标人必须按招标文件指定的格式填写各种报价,各报价应计算正确。除在招标文件另有规定外,计量单位应使用中华人民共和国法定计量单位,以人民币填报所有报价。

9 投标文件以及投标人与采购人、交易中心就有关投标的往来函电均应使用中文。投标人提交的支持性文件和印制的文件可以用另一种语言,但相应内容应翻译成中文,在解释投标文件时以中文文本为准。

10 投标人应按招标文件的规定及附件要求的内容和格式完整地填写和提供资料。投标人必须对投标文件所提供的全部资料的真实性承担法律责任,并无条件接受采购人和政府采购监督管理部门对其中任何资料进行核实(核对原件)的要求。采购人核对发现有不一致或供应商无正当理由不按时提供原件的,应当书面知会交易中心,并书面报告本级人民政府财政部门。

11 投标人应承担其资格审查申请文件编制与提交所涉及的一切费用,在任何情况下交易中心对上述费用均不负任何责任。

12 投标文件的提交

13 投标人应在上传电子投标文件前,在交易中心政府采购交易系统中完成投标报名。

14 交易中心不接受现场纸质、邮寄纸质、电报、电话、传真方式投标。

15 于提交投标文件截止时间前,投标人将投标文件完整上传并保存在交易中心政府采购交易系统,且取得回执。时间以交易中心政府采购交易系统服务器从中国科学院国家授时中心取得的北京时间为准,投标截止时间结束后,系统将不允许投标人上传投标文件。如遇网络上传速度较慢情况,投标人也可选择到交易中心二楼自助服务区完成上传。

16 上传投标文件时,投标人须使用制作该投标文件的同一业务数字证书进行上传操作。

17 交易中心对因不可抗力事件造成的投标文件的损坏、丢失的,不承担责任。

18 出现下述情形之一,属于未成功提交投标文件:

1. 至提交投标文件截止时,投标文件未完整上传并保存的。

2. 投标文件未按要求进行电子签名和电子签章,或电子签名或电子签章不完整的。

3. 投标文件损坏或格式不正确的。

4. 未使用最新发布的招标文件制作投标文件的。

19 投标文件的修改与撤回

20 在提交投标文件截止时间前,投标人可以修改或撤回未解密的投标文件,投标文件一经解密,将不允许修改或撤回。

21 在提交投标文件截止时间后,投标人不得补充、修改和更换投标文件。

22 在提交投标文件截止时间起至投标有效期终止日前,投标人不能撤销投标文件,否则其投标保证金(如有)将不予退还,且交易中心有权将其撤销行为载入不良信用记录。

23 投标文件的解密

投标人须在规定的投标解密时间内,使用制作该投标文件的同一业务数字证书对投标文件进行解密,逾期未解密的投标文件作无效投标处理。

25 投标有效期

投标有效期从提交投标文件的截止之日起算90天。

在特殊情况下,交易中心可于投标有效期满之前要求投标人同意延长有效期,要求与答复均以书面形式进行。投标人可以拒绝上述要求,但其投标将会被拒绝并退还投标保证金;同意延期的投标人其权利与义务相应延至新的截止期。

26 投标保证金

投标人应交纳投标保证金:人民币40000元整。

28 交易中心不接受现金、支票及汇票方式提交的投标保证金。

29 投标保证金交纳及绑定投标项目

投标保证金应以投标人的名义汇入交易中心账户

收款单位:广州公共资源交易中心 开户行:工商银行广州太阳广场支行

银行账号:3602085729200173831-企业编号(企业编号不足9位的,应在企业编号前加“0”补齐9位。例:若企业编号为654321,则转入银行账号应填写为3602085729200173831-000654321)。

供应商可自行使用CA证书登录交易中心政府采购交易系统,以“我是投标人”的身份在“政府采购保证金管理”菜单处查询工行保证金系统登录密码(银行将继续以短信方式将该密码发送至供应商首次转账时填写在备注栏的手机号码上),以此登录办理投标保证金绑定操作,银行保证金系统咨询联系电话:020-87556157。

1. 绑定项目

投标人汇款到账后,凭密码登录银行网页:

,登录点击“绑定投标项目”,在下拉框选择投标项目,点击确认后,系统即冻结相应的投标保证金金额,投标绑定操作完成。绑定操作须在提交投标文件截止时间的1小时前完成。

34 在中标结果公告发出之日起5个工作日内,交易中心采用银行主动划账方式退还未中标人的投标保证金;在采购人与中标人签订合同、并上传《广州市政府采购项目合同签订确认书》后5个工作日内,退还中标人的投标保证金;在投标有效期内不能确定中标人的,在投标有效期满后五个工作日内,退还所有投标人的投标保证金。采购失败的项目,在采购结果公告后五个工作日内,退还所有投标人的投标保证金。投标保证金自动划回到投标人银行账号。

35 下列任何一种情况发生时,投标保证金将不予退还:

36 投标人在招标文件中规定的投标有效期内撤销投标文件的。

37 中标人无正当理由未能在规定期限内签订合同的。

38 中标人无正当理由放弃中标的。

第二章 采购需求

1. 项目概述

1. 项目背景

2015年,国务院出台《关于运用大数据加强对市场主体服务和监管的若干意见》;同年9月,国务院发布《国务院关于印发促进大数据发展行动纲要的通知》,正式将大数据发展提升为国家战略。2016年4月,为深入贯彻落实《国务院关于印发促进大数据发展行动纲要的通知》。2017年12月8日,中共中央政治局就实施国家大数据战略进行第二次集体学习。习总书记强调推动实施国家大数据战略,加快完善数字基础设施,推进数据资源整合和开放共享,保障数据安全,加快建设数字中国,更好服务我国经济社会发展和人民生活改善。同月,广东省发布了《广东省人民政府关于印发广东“数字政府”改革建设方案的通知》,通知中提出“充分利用大数据、云计算等信息技术,大力推进广东数字政府建设,促进政府职能转变,提升政府治理体系和治理能力现代化水平”。2017年,广州市发布了《关于促进大数据发展的实施意见》,要求加快步伐推进打造 “大数据之城”的规划和行动。

白云区政府在2017年4月的政府工作报告中提出建设高效政府,加快推进“互联网+政务服务”,落实“一窗式一网式”集成政务服务改革。在2018年进一步提出加快数字政府建设,推动全区政务系统上云,建立系统互通、数据共享的信息服务平台。

在上述政策背景和工作要求下,以资源整合、开发共享为目标,结合白云区实际情况,依托白云政务云资源,建设统一、高效、安全的政务大数据云平台成为必然的选择。通过建设区政务大数据云平台,将有利于加强政务数据资源汇聚融合、挖掘使用,为区政府在社会治理、公共服务、经济发展等方面的决策提供必要的政务数据支撑,推动我区社会经济又好又快的发展。

2. 建设目标

白云区政务大数据云平台项目建设目标是建立一套完整高效的政务大数据管理体系。具体包括:

目标一:建立健全白云区政务大数据管理制度体系,明确数据交换清洗、共享目录管理、信息授权访问等日常管理相关方的责任、任务、流程等,确保工作相关方各尽其职、各尽其责。

目标二:建成涵盖数据采集、清洗、管理、服务、应用于一体化的数据资产综合服务管理平台。按照政务数据全生命周期规律,整合上级部门、全区各部门的政务数据资源,加强数据全生命周期的管理,建立区政务数据标准管理体系,对汇入的政务数据开展数据治理工作,确保汇聚的政务数据质量;建立政务信息资源目录及相关资源访问控制体系,确保我区政务信息共享安全稳定。

目标三:在我区政务数据治理工作的基础上,开展政务大数据试点应用。利用合标的政务数据,根据应用场景,建设相关应用数据主题及相关的数据应用功能,充分挖掘政务数据资源价值。

目标四:建立健全政务大数据平台的运维管理体系,明确运维工作内容,运维方的工作职责,工作流程等,并根据工作性质、要求和标准,建立科学合理的运维考核方案,推动我区政务大数据建设工作持续、稳定、健康的发展。

3. 建设内容

白云区政务大数据云平台建设通过以应用为抓手,逐步打通上下级各部门之间的数据壁垒,不断满足区政府各部门多方位、多层次的数据需求,推进全区政务信息资源共享及政府治理现代化,从而不断提升“互联网+政务服务”的应用层次、政务大数据的建设广度和我区社会经济的运行效率。

概括来说,项目总体任务就是建设“一规一库一平台N应用”的白云区政务大数据云平台。“一规一库一平台N应用”具体是指:

■ 1套政务大数据云平台运行管理规则;

■ 1个政务大数据基础数据库;

■ 1个政务大数据处理平台:包括数据采集、清洗、共享交换等子系统。

■ N个大数据应用:本期项目将根据政务大数据基础数据库所采集的信息,试点开发包括白云政务信息搜索(类百度搜索)、政务数据属地化自治管理、定制化统计分析、一企一档、一人一册、政务服务指数榜等应用。后续,待平台建设和运行成熟稳定后,将会进一步加强各类政务数据共享,将更多的政务数据纳入平台管理,根据不同的工作需要和业务场景,建设更多的业务应用,不断充实“N”的内容。

通过“一规一库一平台N应用”建设,将搭建起资源集约、融合共享、开放运营的白云区政务大数据云平台,整合政务数据资源,汇聚社会数据资源。

主要建设内容包括以下七个方面:

(一)建设政务大数据管理体系

根据上级大数据发展战略和实施意见,以及构建我区“数字政府”的工作要求,建设我区政务大数据管理体系,开展我区政务大数据建设的顶层规划和实施计划,明确发展目标和行动步骤。为推进我区政务大数据建设持续健康发展,建立健全相关管理工作制度,明确政务大数据建设的相关方的工作责任、内容、要求,明确数据共享相关方的工作责任和具体实现要求,落实数据安全责任和授权访问机制,明确平台运行维护要求等,确保平台建设、数据共享、数据应用、平台运维的各相关方责任义务明晰、办事有章可循,考核有据可依。

(二)建设数据共享交换体系

建设共享交换体系,旨在满足政府部门之间的数据交换和共享需求。该体系要有能力支撑白云区所有政府部门及时、方便、快捷地定制、提交和获取数据;有能力及时有效地整理、清洗、存放和汇总数据;有能力及时发现自身在提供服务过程中存在的风险,形成预警报告;有能力及时扩充共享交换数据的类型和容量;有能力确保数据严格按权限使用,并有足够的手段维护数据安全;有能力同时处理结构化和非结构化数据。

(三)建设信息资源基础库体系

信息资源基础库体系是支撑白云区政务大数据云平台运作的基础数据资源的总和。本项目重点建设“人口基础信息资源库”、“法人基础信息资源库”以及满足各种政务数据应用的专题数据库。要求搭建完成信息资源基础库体系架构,能及时、方便地扩充数据类和数据量;完成对信息资源基础数据的范畴及相互之间结构和关系分析,提出有建设性的构建信息资源基础库方法和步骤;提出保持数据完整性、准确性、鲜活性的有效机制。

(四)建设数据目录体系

建设数据目录体系,旨在实现对政务数据资源的管理。该体系从技术上有能力对白云区政务数据实现全生命周期的管理;有能力管理数据的所有权和使用权、提交和维护责任,并能及时有效地按政策调整数据权限管理策略;有能力按业务要求及时、准确更新并发布白云区统一、跨层级的政务数据资源目录;有能力按业务要求定义、导航、检索、发现和定位信息资源;有能力同时处理结构化和非结构化数据。

(五)开展数据治理

在通过政务大数据管理体系的组织授权,借助共享交换体系的清洗技术,对信息资源基础库中的各类数据,落实全生命周期的数据治理工作,不断完善数据共享目录,开展元数据、主数据管理工作,确保政务数据质量和数据集成活动的正常开展,定期完成相关的监控与报告等。

(六)开展政务数据试点应用

利用本次项目归集的政务数据,根据不同的应用场景,建立相关场景模型及主题数据集市,为用户提供数据地图、数据可视化、数据开放平台、政务数据服务门户等系统功能,使得政务数据的使用过程更为人性、快捷、智能,从而提升管理决策水平。

(七)开展项目运营体系建设

围绕本项目的共享交换体系、信息资源基础库体系、数据治理平台、大数据应用及门户系统开展项目后期运营服务,明确服务内容、服务流程和服务要求,建立绩效考核机制,推进运营体系建设,确保政务大数据平台稳定运转,数据不断鲜活,应用周期不断延续。

采集信息资源基础库、数据交换平台、应用共享与业务协同平台、主题应用的用户数据、过程数据、行为数据、统计数据及其他数据,建设运营数据库,建立基于政务数据运营模型,满足白云区政务大数据云平台运营的技术要求,支撑政务数据应用。

(八)配套其他建设内容

包括需求调研、方案设计、标准规范梳理、平台运营等内容。

2. 需求说明

1. 基于白云区政务云基础平台的建设要求

图 1 白云区政务大数据云平台结构示意图

如上图所示,绿色部分内容是白云区政务云所提供的服务,蓝色部分内容是投标人所需建设的内容。

★投标人所提供的大数据融合服务与应用必须使用白云区现有的云基础设施服务、Hadoop大数据平台服务及MPPDB平台服务,并与之合理、有效集成,使平台服务能力得到最大化发挥,并满足数据汇聚、治理及服务对组件功能及性能的要求。

|云服务大类 |能力描述 |

|基础设施服务 |云主机、云硬盘、弹性带宽、IP、镜像服务、对象存储服务等。 |

|大数据平台即服务 |提供离线处理服务MapReduce、HDFS、YARN、Hive、Spark、SQLSpark; |

| |实时处理服务redis、SparkStreaming 、Flink、Kafka、Flume;交互查询组件ELK、HDFS; |

| |实时检索服务Hbase、Solr; |

| |其他组件服务Hcatalog、Hue、Impala、Kerberos、Zookeeper、Mahout、Oozie、Phoenix、Spark(DataFrame and |

| |SQL)、SparkR、Spark(MLLib)、Spark(GraphX)、Sqoop、Loader(Sqoop+)、Streaming、CTBase、Astro。 |

|MPPDB平台即服务 |MPPDB即分布式数据仓库服务,可以通过数据库的并行模式计算,快速得到数据处理结果,兼容SQL92,2003能力。 |

投标人在使用白云区政务云平台时应明确以下事项,并配合政务云服务商完成相关软硬件配置,制定合理的系统部署方案。

1. 应综合考虑项目建设规模、系统性能等方面因素,明确云主机、硬盘、内存等规格及数量要求。

2. 应综合考虑项目建设内容、系统功能建设等方面因素,合理选择相关组件服务,并明确数据处理规模及性能等要求。

3. 应根据数据存储类型和数据存储量,明确数据处理规模及性能等要求。

此外,投标人提供的数据服务、数据挖掘与开放工具、数据应用等还需注册至白云区统一建设的政务云PaaS管理平台服务目录,实现服务的增、删、改、查、绑定、解绑定,提供服务内容的介绍,便于采购人进行统一的应用生命周期管理及面向区内各委办局应用创新的PaaS能力开放。

2. 顾问咨询服务需求

为配合白云区政务大数据管理体系建设,投标人应提供相关政务大数据建设的顾问咨询服务,根据白云区现实情况,结合投标人的项目经验,协助采购人开展政务大数据建设规划工作,落实上级关于政务信息系统共享规定,制定《白云区政务大数据建设工作三年行动方案》,明确三年内政务大数据建设工作目标、总体内容、实施路径、建设要求、评价指标等。根据总体目标和内容,分解年度工作目标、年度工作内容、年度项目建设内容、评价指标、责任单位等。

投标人在项目调研阶段,应同步启动行动方案调研工作,结合项目建设调研和规划调研,制定整体调研计划和调研方案,其中调研方案应明确调研提纲、调研问卷、受调研方应准备的材料等。

《白云区政务大数据建设工作三年行动方案》经采购人审核同意后,作为项目交付物之一,列入项目验收材料。

3. 功能性需求

技术架构总体要求

本项目所建设系统平台需要满足白云区海量、异构的政务大数据的存储、共享及分析挖掘方面的要求,需要采用白云区政务云计算、大数据的技术架构(详见上述章节),全面满足结构化数据、半结构化数据及非结构化数据的存储、处理及计算要求,支持分布式数据库系统及分布式文件系统。具体技术要求包括但不限于以下内容,最终要求应以项目建设实际需求为准。

1.基本要求:

(1)应支持SOA架构和ESB技术;

(2)基于白云区政务云计算、大数据技术;

(3)应通过组件方式实现文件适配、数据库适配、数据转换、数据传输等功能;

(4)应支持跨防火墙的数据传输;

(5)应根据应用需求,按照国家信息安全二级或以上等级保护规定确定交换中心及交换节点的安全等级,并根据确定的安全等级配备相应的安全防护措施;

(6)应具备符合相应安全等级要求的快速恢复能力;

(7)应具备良好的可扩展性,可根据交换需求的变化实现系统的扩展部署;

(8)应保障交换节点、交换中心之间数据的可靠传输;

(9)支持开放的技术标准,如 Java EE, Web Service,TCP/IP,HTML等。

(10)应提供7*24小时稳定可靠的服务。

2.政务信息资源目录技术要求:

(1)资源目录结构是树形结构,建议采用基于LDAP的数据存储方式。

(2)政务信息资源需基于元数据技术组织和管理。元数据能以XML表示,以DTD或XML Schema对XML文档的结构进行定义。

(3)目录体系能基于HTTP、Web Services协议提供服务。

3.应用服务技术要求:

应用服务接入规范详见附件《白云区政务云应用服务化发布指南》。

4.数据交换格式要求

(1)数据库交换请求的描述格式应能够描述数据库数据需要被同时传送到一个或多个交换节点及相应目的数据库;

(2)文件交换请求的描述格式应能够描述一个或多个被发送的文件,以及需要被同时传送的一个或多个交换节点;

(3)文件交换服务和数据交换服务应至少支持JMS 和Web 服务接口两种形式;

(4)文件交换服务和数据交换服务应遵循国家标准GB/T 21062.3-2007。

大数据管理体系建设需求

为保证白云区政务大数据云平台持续发展和长期运营,投标人应在项目建设过程中应配合采购人建立政务信息资源共享长效机制,配套建设相应的管理规范、技术规范和数据规范。其中:

1.管理性规范至少包括平台运行管理、信息共享管理、信息安全管理规定、数据目录管理等。平台运行管理规范应主要明确涉及平台运行所有单位、流程、岗位、职责和权限等。信息共享管理规范应主要明确共享主客体之间的职责和义务,以及先共享后使用、按需授权访问等共享原则。信息安全管理规定应按照信息安全二级或以上等级保护要求明确信息安全要求。数据目录管理规定应明确数据目录中数据项信息和数据项来源,并按照信息共享管理规范制定相关信息共享目录准入和退出机制。

2.技术规范至少包括共享接口技术规范、数据采集、清洗转换等技术规范。共享接口技术规范应对各类数据层或应用层的共享接口的实现技术、使用方式、功能描述等信息予以明确说明,以便使用者能正确掌握接口使用方法。数据采集、清洗转换等技术规范应明确描述数据采集、清洗转换等标准操作流程、标准操作方法、以及检查检验等内容。

3.数据管理规范至少包括数据质量、元数据管理、数据标准管理等。数据质量管理应按照信息共享管理规定明确供需双方在确保数据质量中的责任,建立数据质量评价体系等。元数据管理应明确元数据管理策略和元数据集成体系结构,数据提供方的元数据提供责任,以及修改变更等业务规范。数据标准管理应明确数据标准的使用规则,数据提供方的标准提供责任,以及修改变更等业务规范。

投标人应在信息系统建设时,同步开展政务大数据管理体系建设,并将相关管理制度作为项目交付物,列入项目验收材料。

数据共享交换体系建设需求

1. 数据来源

本次项目建设可用数据源包括以下几个方面,具体能否使用应以实际调研后为准。

本项目采集的数据分以下几类:

|序号 |大类 |系统 |采集内容 |

|1 |历史数据 |市数据中心下发数据 |人口库、法人库、宏观经济库、市级部门业务库等数据 |

|2 |业务数据 |OA系统 |新政策、文件等 |

|3 |业务数据 |白云区政府门户网站 |政务公开数据、办事数据、互动数据 |

|4 |业务数据 |网上办事系统 |政务公开数据、办事数据、互动数据、效能监督数据 |

|5 |业务数据 |实体大厅的一窗受理系统 |办事数据 |

|6 |业务数据 |区级部门自建业务系统 |区相关部门自建业务系统的数据,如来穗、卫计、公安等。 |

|7 |省市回流数据 |12345政务热线 |工单数据、知识库数据、热门数据 |

|8 |省市回流数据 |城市社区网格化服务管理系统 |网格化服务数据 |

|9 |国家回流数据 |国务院有关部门共享数据 |国务院部门数据共享责任清单(第一批)所提供的数据 |

|10 |省回流数据 |省政务信息共享网站提供的共享数据 |省政务信息共享网站发布的各类数据服务 |

|11 |社会化数据 |省市政府门户网站、统计部门网站 |有关广州市白云区的数据 |

|12 |社会化数据 |互联网门户 |有关广州市白云区的数据 |

|13 |社会化数据 |微博微信 |有关广州市白云区的数据 |

|14 |社会化数据 |重点企业、上级行业管理部门、专业 |有关广州市白云区企业的数据 |

| | |经济媒体等网站 | |

1.历史数据:区数据中心的数据库沉淀下来的历史数据。

2.业务数据:区政府层面已建设的OA、门户网站、“一表单”系统等数据,重点包括办事填报数据、证照扫描等数据;以及区各部门自建业务系统等数据。

3.上级部门回流数据:如网上办事大厅、一窗综合受理审批系统、12345政务热线、12345知识库、城市社区网格化服务管理系统等,这些都属于市里统建的业务平台,其中的预约信息、事项信息、审批信息、热线工单、网格化管理等数据可通过市里的政务信息资源共享平台回流至白云区;国务院部门数据共享责任清单(第一批)所列数据;省政务信息共享网站发布的数据服务。

4.社会化数据:包括上级政府门户、互联网门户、微博、微信、重点企业网站、行业主管部门网站、专业经济媒体等社会化媒体上关于广州市白云区的数据信息。

2. 数据采集清洗子系统(ETL子系统)

1.数据抽取(数据采集)

本次项目抽取的数据应包括政务数据和互联网数据两类。

(1)互联网数据抽取。投标人应根据业务应用需求,实时监测政府网站、行业网站、企业网站、商业门户以及微博微信等社会化媒体的信息,定期采集应用所需的互联网数据,尤其是涉及白云区的政务公开、政务办事、交流互动等政务服务的数据,白云区辖区企业动态的数据等。

对于采集的互联网数据,提供智能化初步处理,支持入库数据的人工+计算机辅助的标识信息操作。实现包括正文内容提取、属性自动提取、格式自动转换、中文内码自动转换、自动分类等功能。其中属性自动提取是指自动提取网页中单位名称、系统名称、标题、版次、日期、作者、栏目、分类等属性。自动分类功能是指根据采集的数据进行自动类别划分的功能。自动分类功能应实现基于语义规则的自动分类(机检分类)和基于统计原理(具于内容)的自动分类两种方法。

(2)政务数据抽取。根据采购人所提供的政务系统接口、政务应用数据库、政务电子文本(如word、excle等)、政务档案等多种数据源,采用各类异构数据源采集处理手段,将政务数据按一定格式和规则收集汇总。

(3)应支持跨网络多源异构数据抽取处理。提供多种异构数据源抽取组件,对外提供统一的接口接入。

应支持但不限于以下数据库资源获取数据:Oracle、GP( Greenplum )、TeraData、DB2、MySQL、PostgreSQL、Hive、Hbase、Hadoop、 Xcloud、达梦数据库。

应支持但不限于以下文件服务或消息服务资源获取数据:HDFS、FTP/SFTP、Kafka。

应支持但不限于以下方式获取数据:Socket、爬虫、WebService、JDBC、前置机采集、OCR识别等。

应支持但不限于以下文件格式中获取数据:CSV、XML、HTML、JSON、TXT、Word、Excel、图片、视频、音频、OCR识别数据等。

(4)抽取方式应支持系统自动化抽取和手工录入两种方式。其中系统自动化抽取应支持数据全量抽取、数据增量抽取、数据批量抽取;实时抽取、定时抽取;一次性抽取、定时循环抽取;支持数据结构的同步。

(5)在抽取数据时应建立数据校验纠错机制,确保所抽取的数据与数据源的数据一致且完整。

2.数据加工转换

应支持以下几种场景的数据加工转换:在抽取过程中进行数据处理;使用异步数据加载,以文件的方式处理;在数据加载过程中进行数据处理;进入统一数据共享平台以后再进行数据处理。

投标人所提供的数据加工转换工具应内置表达式、筛选、汇总、连接、排序、联合等转换组件,封装不少于50个的常用函数和参数调用规则。能直接使用大数据平台当中的数据标准作为参数直接参与加工转换。

提供主流的数据转换方法,包括字符串转换、字段赋值、时间类转换、数据比对与翻译、数学运算、身份证格式转换等,并能可视化配置。

提供主流的逻辑判断方法,包括:格式匹配检查、字符串逻辑检查、缺失记录检查、重复记录检查、范围检查、逻辑检查、复合逻辑检查(以上逻辑的and、or组合)、自定义逻辑检查等,并能可视化配置。

提供主流的数据脱敏方法,包括随机偏移、掩码替换、截断、降低精度、反向处理、随机替换等,并能可视化配置。

★在本次项目中,投标人需要完成白云区企业数据属地化工作,即在加工转换过程中,将企业数据按行政地理区域划分到对应的镇街。

3.数据加载

1.提供加载周期及数据追加策略两方面的设置功能。

(1)提供灵活的数据加载设置。根据广州市白云区业务数据的实际情况,加载周期要综合考虑业务分析需求和系统加载的代价,对不同数据源的数据能提供不同的加载周期设置,确保数据及时入库,但必须保持同一时间业务数据的完整性。

(2)提供包括不限于以下三种类型的数据追加设置:直接追加、全部覆盖、更新追加。

直接追加:能每次加载时直接将数据追加到目的库表中。

全部覆盖:对于抽取数据本身已包括了数据的当前和所有历史状况,对目的库表采用全部覆盖方式。

更新追加:对于需要连续记录业务的状态变化,用当前的最新状态同历史状态数据进行比对的情况采用更新追加的方式。

2.提供数据库表结构同步服务,能对指定的源库和目的库做结构比对,能自动发现新增的表、存在的表结构的变化(包括字段的增加、修改、删除),并能生成相应的SQL语句,实现目标方和源方结构的同步。

3.提供数据库表数据同步服务,能实现表结构相同的异构库之间数据同步,要求在一个同步服务内完成多库(含多表)到一个库的同步,支持增量同步方式。

4.图形化的ETL工具

投标人应提供图形化的数据流设计器,允许通过鼠标拖拽方式建立被抽取数据在数据源和目标库之间移动和转换的路径。允许创建源定义、目标定义和转换以建立映射。

需支持迁移映射和加工映射两种数据映射关系:一是迁移映射应包括源、目标两个方面的全字段、部分字段的迁移映射;加工映射应包括表达式节点、筛选节点、汇总节点、连接节点、排序节点、联合节点等。

5.ETL调度

应支持跨系统跨平台的统一调度。能实现集中调度Spark、Hive、Pig、MR job、存储过程、shell等资源。

应支持跨系统、跨应用、跨语言的作业任务协同执行,实现调度全局化、透明化。

应具有灵活的作业定义与调度策略:包括并行、串行、依赖、和干涉等方式。

应具备资源自动负载均衡,实现高效调度。

应具备按资源对任务调度分组、并发控制、优先级动态调整。

应支持对每个ETL任务设置不同的任务调度规则,包括任务优先级、任务调度机制、任务异常处理策略等,并应用到任务的设计计划和执行调度中。

应支持时间触发和事件请求方式触发两种任务调度机制:

(1)时间触发方式。

支持定时触发。应能根据设定的时间:年、月、日、小时、分钟、秒以及各种组合等进行任务调度;

支持循环触发。应能在指定时间段进行任务的循环调度;

支持间隔触发。应能指定两个任务调度的间隔时间顺序触发。

(2)事件请求方式。

支持前置依赖调度。能根据某项任务的前置条件是否满足而决定是否执行调度。

支持后置触发调度。在某项任务执行之后,能根据其执行的结果,来决定是否执行另一个任务。该调度方式应能支持在出现异常或故障时,进行进一步的问题探查分析。

6.任务操作实时监控

提供ETL任务实时全程监控,支持任务执行过程监控,监控记录包括但不限于任务的执行状态、开始时间、结束时间、运行时长等信息。

需具备任务执行日志监控与问题告警功能,支持任务执行结果、异常告警信息的可视化展现。

支持基于单个节点的监控与控制,包括启动、暂停、继续、取消等。

支持任务执行日志的管理和查询功能。

7.自定义插件扩展能力

需支持调用外部的过程和程序,实现复杂的转换逻辑,并能针对用户特殊的应用场景,支持自定义处理组件扩展开发,以插件的方式作为自定义节点组件,集成到平台的应用中,实现个性化的数据处理需求。

3. 数据共享交换子系统

数据共享服务子系统为大数据软件支撑平台与外部各类业务应用系统提供了基于数据资源封装的数据访问接口和授权访问目录管理。

1.共享授权。投标人应根据相关共享管理规定的要求,建立共享数据授权访问机制:

(1)提供数据共享申请功能。能与该平台的共享数据目录子系统协作,为数据共享申请人提供可共享数据浏览、选择功能。共享申请人确定所需共享数据后,能提交给数据提供方审核。在提交审核时,应让共享申请人阅读并同意数据保密协议后,方可提交。

申请单包括但不限于以下内容:申请单位、申请联系人、联系电话、共享原因、数据用途、共享数据(直接引用共享数据目录所描述的内容)、共享形式(WebService接口、数据库接口、业务应用等)、时间(长期、一次性、定期等)、数据供给方式(全量、增量、批量)。

(2)提供数据共享审核功能。数据提供方根据共享申请人提交的申请信息,结合本单位数据保密要求,审核申请,并能将审核结果反馈给申请人。审核通过,采购人则按照申请要求,提供相关数据。

2.投标人应提供但不限以下数据共享功能:数据封装、应用组件封装、服务接口管理、服务管理、请求服务接口管理。

(1)数据封装。应能将大数据平台中各类数据库资源封装成标准数据服务接口,为数据使用方提供数据服务。

支持将主流数据库(包括Oracle、Hive、MySql、DB2等)的数据表直接封装成应用,并能根据信息安全要求和资源访问控制,让数据使用方直接读取使用数据表中数据信息。

数据封装应有封装服务的管理功能,包括但不限于数据封装的增、删、改、查,封装产品的计划调度执行和监控等功能。

(2)应用组件封装。应实现第三方应用接入的统一标准化,并定义各类型应用接入的接口类型,如Web Service、Http/Rest、FTP、socket等协议,包括但不限于以下组件:查询分析组件、挖掘分析组件、地理位置轨迹组件等根据实际业务需求所涉及的功能。

■ 查询分析组件,应实现单次信息查询、批量信息查询的内部处理逻辑,能根据查询请求按统一标准规范组装有关数据。应至少支持界面模式和接口模式2种方式供数据使用方查询数据。界面模式是指数据使用方首先申请“数据查询功能”,管理员分配查询权限以及查询范围。数据使用方通过系统提供的界面进行数据查询操作,系统界面中需提供查询条件、过滤条件、过滤等相关数据查询辅助手段。接口模式是指数据使用方首先申请“数据查询功能”,管理员分配查询权限、查询范围、查询密钥及配置数据连接信息和SLA策略。数据使用方通过接口方式连接到系统进行数据查询操作。

■ 挖掘能力组件,应实现BI数据挖掘工具的标准化封装,对数据使用方提供数据挖掘服务。应能提供图形界面,数据使用方首先申请“数据挖掘”,管理员分配数据权限以及范围。数据使用方通过系统提供的界面进行数据挖掘操作。

■ 地理位置轨迹组件,应能提供地理位置和运动轨迹的接口服务,将地理位置标识和运动轨迹通过接口方式提供给数据使用方。其中地理位置服务应能精确标识反馈GIS下的指定坐标。运动轨迹服务应能精确标识GIS地图下企业的精确轨迹地理信息。

(3)服务接口管理,应包括服务接口管理、接口配置等功能。服务接口实现具体的请求处理,由数据服务接口、应用服务接口组成;接口配置功能支持用户定制各类通用服务接口。

数据服务接口,主要包括数据查询、数据比对、信息布控、数据下载、数据操作等接口,通过接口配置功能实现对数据库资源池访问。

应用服务接口,通过其他应用提供的服务接口实现与共享服务子系统平台对接并提供服务。

(4)服务管理。提供服务组件管理、服务共享管理、资源目录管理、资源服务总线、服务资源监控等功能。

■ 服务组件管理,提供分类管理分布在不同共享区域的数据服务组件功能,能对数据服务组件池中的组件的元数据、生命周期、分类目录等信息进行管理。

■ 服务共享管理,能通过数据接口对外提供数据,同时接受数据应用的数据回写。

■ 资源目录管理, 详见后续章节。

■ 数据资源服务总线,可采用统一部署的请求服务系统实现,也可根据本项目运维管理和应用需求,定制建设资源服务总线。资源服务总线主要包括:接入适配、授权管理、访问控制、路由调度和日志分析等功能。

■ 服务资源监控,能实现对资源服务总线、服务接口等相关资源的运行状态监控、性能监控、负载监控以及异常自动告警;从服务接口的在线率、访问量、访问成功率、响应速度等方面对服务质量进行评价和排名;基于监控日志,从地区、应用、时间、频度等多个方向,对服务资源运行情况进行统计分析,并采用业务视角展现服务资源的实战成果。

(5)请求服务接口管理主要是用来管理对服务接口的请求管理,主要包括提供服务请求方注册、服务接口注册、服务资源编目等管理功能。

■ 服务请求方注册,提供在线登记注册服务,记录有关服务请求方的相关描述信息,包括服务请求方标识、服务请求方名称、服务请求方简述、所属业务条线、所属行政层级、所属应用系统类别、所属应用系统名称、管理单位名称、管理单位机构代码、服务请求方系统地址、服务请求方系统端口号等。

■ 服务接口注册,提供在线登记共享服务所遵循的服务规约相关描述信息,包括:查询方法、输入参数、输出参数、约束参数等。在线登记注册服务接口的相关描述信息:包括服务接口标识、服务接口名称、服务类别、服务分类信息、服务规范版本、服务接口描述、服务开发语言、服务开发类型、所属业务条线、所属行政层级、服务接口地址、允许请求范围等。

■ 服务资源编目,提供服务资源发布功能,包括服务资源名称、服务资源类别、服务资源简述、所属业务条线、所属行政层级、授权范围等信息。

4. 数据共享目录子系统

投标人在项目调研阶段应对白云区全部政府部门开展数据资源和共享交换需求调研,全面梳理全区各业务部门、业务线口的数据资源和数据共享需求,形成数据共享交换需求分析报告,作为数据资源共享目录建设内容。

投标人应根据数据资源和数据共享需求,提供对数据资源名称、数据资源摘要、数据资源提供方、数据资源分类、数据资源共享属性、数据资源公开属性、数据资源标识符、元数据标识符、数据项描述等元数据信息管理的功能,对已注册的基础数据按照业务、层级等进行编目、发布,形成数据资源目录。

投标人所提供的政务信息共享目录功能包括但不限于目录内容编目、注册、发布、查询、维护。

其中查询功能应包括以下功能:1.为应用系统提供标准的调用接口,支持政务信息资源核心元数据的查询。2.提供人机交互方式的目录内容的查询功能,包括:提供政务信息资源核心元数据的查询检索功能;提供多种查询功能。

维护功能应包括以下功能:目录内容库的建立、更新、备份与恢复、入库与出库。

信息资源基础库体系建设需求

本次项目所需建设的信息资源基础库体系主要包括临时缓冲库、基础数据资源库、数据沉淀库、数据综合关联库和资源专题库。投标人可按照自身建设经验设计相关数据库层次,实现以下数据库的管理功能和用途,完成对信息资源基础数据的范畴及相互之间结构和关系分析,提出有建设性的构建信息资源基础库方法和步骤。

数据存储的设计与实现,须基于白云区政务大数据云平台的定位和目标,满足白云区政务大数据云平台的功能、性能要求;同时,满足数据存储安全的需要,具备数据热备,确保白云区政务大数据云平台的数据安全。

通过信息资源基础库体系建设,形成具有政务数据属性(鲜活性、权威性等)特点的政务数据资源中心。投标人须在投标文件中说明,在白云区政务大数据云平台建设、运行过程中实现数据鲜活性、可用性(可以从数据一致性、精确性、完整性、时效性、实体同一性等多个维度)的具体工作思路和实现方式、方法。

1. 临时缓冲库层

临时缓冲库是基础库体系的接口层,即将抽取的数据源系统的数据直接装载进入数据仓库,以便充分利用政务大数据云平台本身的性能完成后续数据的处理。本层数据库建设内容主要包括采集数据源系统中的业务结果表及其对应的维度表(编码表),抽取内容包括表名、字段名、字段描述、字段类型、字段长度、主外键等信息。

本层数据存储周期一般在3+1个周期,数据表的设计与数据源系统保持一致(包括字段名,字段类型等),可以适当增加一些公共字段(比如时间戳、地域等)。本层的主题域主要是按数据源系统划分。

2. 基础数据资源库层

基础数据资源库是用于存放经过清洗和整合临时缓冲库中的数据。所有进入基础数据资源库的数据必须开展标准化操作,进而形成基础数据资源库。清洗主要包括脏数据的清洗、业务标准的清洗等;标准化主要包括业务模型标准化、业务规则标准化、编码标准化等。根据业务需要分为人员信息库、企业信息库等内容,整合互联网信息、社会面采集等各类数据资源,可为后续的数据深加工提供基础数据。

基础数据资源库的数据不按时间周期存储,只保留最新的数据。

3. 数据沉淀库

数据沉淀库,即DWD,是基础库体系的细节数据层,为各种分析类应用提供细节性数据支持,是基础库体系的核心,同时为未来需求的扩展提供历史数据支持。

DWD层的模型设计,需要围绕广州白云区政务大数据核心业务过程展开,关注业务过程中的核心业务事件和业务实体,以企业级数据模型建设规范为指导,开展企业级数据模型设计和建设;其数据域的划分遵从企业级数据模型域的划分。

本层的数据来源于基础数据资源库,定时从基础数据资源库中把数据全量或者增量的方式抽取到本层,本层数据模型要根据政务业务数据来设计,与基础数据资源库的结构没有直接关系。本层需要根据政务业务来设计主题域,主题域主要包括人员主题域、组织主题域、企业主题域、物件主题域、地址主题域、事件主题域、服务主题域等。

企业数据属地化工作应在此层完成。

本层数据存储周期较长,根据业务需求长期保存。本层的数据采用快照的方式进行存储。

4. 数据综合关联库

数据综合关联库,即DWA,是基础库体系的整合关联数据层,该层通过对数据沉淀库的数据进行预处理(轻度汇总、衍生),提高了后续数据处理和访问性能,其特点是面向应用但不直接支持应用,将应用过程中的常用信息进行共同沉淀和处理,作为DWD库和数据集市库之间的一个过渡层次,与DWD库共同构成综合关联分析库。围绕核心业务事件,保留核心业务实体ID级的轻度汇总,扩展核心业务实体(人、地、事、物、组织等)的衍生信息,与DWD层共同形成统一数据视图,综合关联分析库在基础数据资源库的基础上,形成基于企业、个人的360度视图数据,构建全要素指标模型,并可为后续数据深加工提供基础数据。

最终形成人员视图、企业视图、组织视图、地址视图、物品视图、关系视图等视图,人员视图主要是以人员为核心建立的人员360度视图,包括人员的基本属性信息、特征信息、行为信息等;企业视图主要是企业360度视图,包括基本属性信息,企业法人信息、企业经营情况、企业税收、企业环保排污、特征信息等信息;组织视图主要是白云区内的组织信息,以这些组织为核心建立360度视图,包括组织的管理机构、组织的业务范围、特征信息等等;地址视图是以重点关注地址为核心建立360度视图,包括地址基本信息、人员密集度、交通情况等等信息;物品视图主要是以物品(包括房产和车辆等)为核心建立起360度视图,包括物品的基本信息、特征信息、行为轨迹等信息;关系视图主要是通过整合各个委办局和政务中心内部的数据建立起人人、人车、人地、人物等的关系视图。

本层的数据长期保留,模型一般采用宽表和维度表的方式进行。

5. 资源专题库

资源专题库是指围绕业务应用需要,基于基础数据、沉淀数据和综合关联数据,按照不同的应用侧重点,建设形成各种资源库,在此基础上结合实战需要可组合形成各类专题数据库。例如建立起企业专题库、常住人口专题库、流动人口专题库等。

企业专题库主要包括企业工商信息、风险信息、经营信息、知识产品、上市信息、纳税情况、环保情况,舆情信息以及企业的家族图谱,透析企业的投资,被投资,经营关系。

常住人口专题库主要包括人口总体情况、民族情况、年龄情况、教育情况、家庭情况、死亡情况、户口登记情况、从业情况、纳税、社保等统计信息。

流动人口专题库主要包括流动人口的总体情况、民族情况、年龄情况、教育情况、活动轨迹情况、从业情况、纳税、社保等统计信息。

数据治理平台建设需求

数据治理平台主要由元数据管理、数据质量管理和数据监控管理、数据标准规范制定四个方面组成。

1. 元数据管理

元数据管理工作涉及整个数据管理流程,贯穿整个业务数据的生命周期,需要为抽取、加工转换、数据稽核等工作提供有力支撑。

元数据管理主要是管理数据标准、数据字典和参考数据等,并能通过可视化的界面,提供对应的查询、增加、修改、删除和应用等功能。其中:

数据标准管理,应包括标准文档版本管理,标准的浏览查看,标准的增加和删除。支持数据标准信息从数据库直接抽取或者Excel的导入导出功能。

参考数据即标准化的数据属性码表,如地市名称、地址名称、国别名称等,提供增加、修改、查询、删除等功能,及Excel导入导出等手段。

数据字典管理,应包括数据项、数据结构、数据流、数据存储、处理逻辑中涉及到的多个系统共享使用的术语的定义和描述。

元数据管理应能获取数据仓库内的技术元数据、业务元数据、管理元数据,将分散的元数据统一管理起来,为用户提供端到端的元数据服务。

元数据管理要符合 CWM 规范,支撑多种元模型,包括有数据库资源、FTP资源、代理资源、文件资源、表、视图、函数、存储过程、程序、文档、接口文件、指标和维度等多种元模型,能够提供企业级数据仓库环境下的各类元数据管理模型。其中,文件资源支持:Dbase数据库文件、Excel文件、Json文件、TXT文本文件、Cube文件、Xml文件。支持用户自定义扩展元模型,满足客户个性化的元数据管理需求,具备元模型查询、增加、修改、删除以及元模型属性的查询、增加、修改、删除的功能。

1.元数据采集管理

元数据采集管理至少包括自动扫描获取、系统手工录入、批量导入三种方式。元数据采集完成后能自动形成血缘关系和数据地图。能实现表、视图、存储过程、函数、标准指标、程序、接口文件、数据库资源、维度和指标等对象的导入导出功能。采集范围包括技术元数据和业务元数据的采集;其中技术元数据包括但不限于系统信息、库表字段信息、数据交换作业信息等;业务元数据包括但不限于数据标准信息、数据分析指标信息、数据管理信息等。

(1)自动扫描获取

通过元数据获取适配器(系统具备或定制研发)自动解析元数据信息,比如数据仓库中的表、视图、过程、列等元数据信息可通过自动扫描获得。

实现Oracle、Gbase、Mysql、SQL Server、DB2、达梦、Hadoop、Hive、Xcloud、REDIS、GP、Hbase等数据库的元数据自动采集。

(2)系统手工录入

系统支持通过手工录入的方式对元数据进行录入,录入信息包括元数据的基本属性信息及元数据结构信息。

(3)批量导入

系统支持通过使用标准模板编制的元数据信息文件在系统中的批量导入。

2.元数据维护

(1)目录管理

需要具备对目录设置权限、添加子目录、草稿箱、编辑、删除、迁移目录和刷新等功能的支撑。具体如下:

■ 设置权限,设置目录权限控制,允许角色或者用户有目录下对象的查看权限。

■ 添加子目录,不是叶子节点,可以添加子目录。

■ 草稿箱,未提交版本的对象记录,会存放在草稿箱,便于用户查找历史记录。

■ 编辑,编辑或修改目录基本信息。

■ 删除,删除目录时,目录下必须没有内容,否则会提示目录下存在对象,不允许删除目录。

■ 目录定位,项目中元数据对象繁多,目录层级也很多,如何快速定位一个元数据对象所在的目录,那么就需要有目录定位功能来支撑这种快速定位的需求。

■ 迁移目录,目录录入元数据库中,可根据实际需要灵活移动位置。当目录位置需要调整时,允许目录迁移,同时目录下的内容一并迁移。

(2)对象管理

对象管理主要包括资源对象管理、作业规范对象管理、模型及数据库管理几个部分。

■ 资源对象管理,需要具备对资源对象的编辑、查看、删除、实体扫描、扫描日志、测试连接、历史版本、草稿箱、数据库资源导出、数据库资源导入、迁移对象和设置权限操作。

■ 作业规范对象管理,即实现维度、指标体系和逻辑模型的管理。实现对作业规范对象的编辑、查看、删除、历史版本、草稿箱、查看血缘关系、添加稽核规则、查看样例数据、导入实体表、导出实体表、迁移对象和设置权限等功能。

■ 数据库对象管理,需要实现对Oralce、GP、Hadoop等数据库所涉及数据库对象管理,包含表、视图、过程、函数、HDFS文件、shell脚本等;需要实现对数据库对象的编辑、查看、删除、历史版本、草稿箱、查看血缘关系、添加稽核规则、查看样例数据、导入实体表、导出实体表、迁移对象和设置权限等功能。

■ 模型管理即物理数据模型(Physical Data Model)PDM,包括数据库的存储过程、操作、触发、视图和索引表等。需要实现标准模型的导入功能。

(3)文档管理

文档管理主要管理各类文档,包含规范文档、模型说明文档及操作文档,如:各个系统接口规范、对外服务数据字典、指标体系规范等。

■ 文档范围:指标体系,采集接口,作业规范。

■ 文档格式:Word,Txt,Excel文档。

实现文档添加(上传)、文档下载、编辑、查看、删除、草稿箱、历史版本、迁移对象和设置权限等功能。

(4)检索服务

面向用户提供模糊查询,即使用户不了解模型和应用的情况下也能精准定位所需要的原始数据对象;检索分两部分展示结果:

■ 列出对应模型下含关键字的对象列表。

■ 以元模型分类显示,并统计出每个模型含有关键字的对象个数。检索维度:目录级检索,关键字检索,对象类型检索。检索粒度:字段级,对象级。

■ 检索范围:元模型包含的全部内容。

(5)流程管理

基于元数据中的组织结构、角色管理等信息,通过专业的流程管理引擎,实现业务流程管理与审核,满足多部门多层级的协同工作。

支持业务流程自定义与发布。

支持业务标准、数据交维、编码映射等多类型流程。

(6)版本管理

版本管理是元数据自身的生命周期管理,对其发布、变更、删除进行严格的流程跟踪,及版本管理,确保元数据自身的数据质量,保证了后续使用元数据系统的权威性和可靠性。

版本管理是对不同时期进入元数据库的同一实体的元数据进行管理。要求的基本功能是能够显示同一实体的元数据的修改历史。另外还提供版本差异分析和版本变更分析等。并且能够进行单个元数据版本的恢复。

(7)变更监控

实现以日为时间轴展示对元数据的操作信息的功能。当元数据内容有变更时,变更信息会自动显示在时间轴上,方便用户查看元数据的历史变更记录。

通过时间维度和元数据类型维度展现变更监控内容。

(8)通知服务

实现当元数据内容有更新或异常预警时可以通过短信、邮件、任务弹窗等形式通知用户了解的功能。

3.元数据应用

(1)全文检索

提供基于目录和关键字的元数据对象检索功能,针对检索结果,以元模型分类显示并统计出每个模型含有关键字的对象个数,显示对应模型下含关键字的对象列表。

(2)血缘关系

提供图形化展示元数据对象表、视图或者存储过程的始端依赖关系,实现清晰的元数据血缘关系追溯。

支持三种方式建立血缘关系,通过存储过程注释的方式;通过ETL流程自动生成的方式;通过配置表的方式。

(3)影响分析

提供数据对象的影响分析功能,影响分析是指从某一实体出发,寻找依赖该实体的处理过程实体或其他实体。基于数据对象的血缘关系,帮助用户迅速了解分析对象的下游数据信息,快速识别元数据的价值,当某些实体发生变化或者需要修改时,以便更有效的评估变化带来的影响范围和风险分析。

(4)数据地图

★数据地图是元数据信息的全景视图,描述所有元数据对象的血缘关系,所处层级覆盖范围由ODS->DWA->DWD->DM层。全面呈现了数据仓库中数据之间的关系。支持数据地图的放大、缩小和位置移动,提供目录和关键字的数据对象检索定位数据对象,提供数据对象信息以及血缘关系查看功能,支撑字段级血缘关系查看。

(5)变更时间轴

以时间线条的形式提供元数据变更信息记录,将元数据的变更情况以更为直观的形式体现。同时,变更内容描述支持对变更元数据的链接分析,查看变更元数据的具体变更情况。

(6)异常观察

★具备对元数据质量的自检功能,保证元数据自身的数据质量。通过对异常规则的配置,系统自动监测出异常的信息分类;展现出异常信息的分布情况和异常分类情况以及异常明细情况。

元数据异常规则主要包括注释不符合规范、注释为空、注释错误、孤立对象、命名不规范、对象被异常修改、分区缺失、异常分区等,并且支持用户自定义添加异常规则,满足用户个性化需求。

(7)对外服务接口

需提供灵活易扩展的对外服务接口,元数据的信息应用是企业数据信息价值的重要体现。产品以restful协议提供对数据对象的基本操作和检索等多类元数据访问接口,供各类应用或系统调用实现信息服务。

4.权限管理

针对元数据目录和元数据对象提供基于角色或单独用户的权限设置功能。

2. 数据质量管理

数据质量管理功能主要用来保证信息资源基础库中数据的正确性。数据质量管理要从数据的采集到数据的对外服务都做到端到端的管理控制。

1.稽核对象管理

用户通过稽核对象管理可以了解数据对象稽核情况,方便进行稽核管理。

用户能利用稽核覆盖统计功能,可以了解数据对象稽核规则配置的总体情况,查看具体数据对象规则的配置情况。

能实现数据对象与元数据同步,规则配置人员可及时找到对象,及时完善稽核规则。

2.稽核规则配置管理

针对必填性、计算平衡关系、映射参照关系、映射完整关系、周期波动性、指标对比一致性、指标明细一致性、分布完整性和分布合法性等规则,需要整理抽象每类型校验的输入和输出,形成稽核模板,使稽核规则趋于规范。

(1)规则配置

实现可视化规则配置功能,配置界面免写脚本、规则分类、问题分优先级等设置。

常用的规则类型包括:空值;数据重复;参照完整性;数据一致性;数据波动(同比、环比);数据分布稽核;数据格式验证(如时间、电话号码等);数据间的逻辑校验,包括记录级、字段级的比对。

实现稽核规则的自定义扩展配置,可根据业务逻辑自定义稽核规则。

(2)规则分类统计

规则统计查询功能,需实现对稽核规则的配置分布进行统计展现;实现按资源查看各类资源下对象稽核配置及配置规则分类统计情况。

(3)稽核规则检索

实现按元数据目录分类筛选检索规则明细及导出规则明细,还需根据稽核对象、规则名称、规则类型等条件查询已配置规则信息。

(4)规则导入导出

实现规则导入导出功能,可实现稽核规则的批量导入、导出。

3.稽核规则调度管理

应与ETL调度集成,实现规则调度的界面流程化和列表的管理。同时便于对稽核任务的执行情况进行监控。

稽核流程应与数据加工流程相结合,利用ETL工具支持稽核任务定时、嵌入、手工调度,实现流程调度多样化。

主要实现稽核任务流程设计、稽核任务并发量设置、稽核任务调度定时设置及稽核任务可视化监控等相关功能。

(1)稽核任务流程设计

需实现侦测方式启动流程设计和前置条件触发启动流程设计两种启动方式。其中:侦测方式启动流程设计是指侦测符合条件的任务,获取到任务列表,根据并发量设置加载启动任务。前置条件触发启动流程设计是指前置任务执行后且满足后置任务调度条件时,会自动触发后面任务执行。

(2)稽核任务并发量设置

具备调度任务的并发数量可设置功能。

(3)稽核任务定时设置

实现稽核任务定时启动设置,可设置流程调度周期、流程起始时间、流程终止时间、具体流程启动时间、变量设置等。

(4)稽核任务可视化监控

需实现具体任务执行情况分执行状态、执行开始(结束)时间和所属域的分类查询。

能满足具体任务具体进度查看、在某个节点暂停、在某个节点恢复流程执行、停止任务流程执行和任务执行记录查看功能。

4.稽核结果查询

实现基于稽核对象的整体稽核执行情况查询,主要包含稽核对象执行时间、稽核对象规则数量、异常规则数量、正常规则数量以及整体对象可用评估情况等内容。

实现具体规则执行情况查询,内容包含稽核规则脚本、错误样例数据、执行时间等内容。

实现稽核结果导出功能,可批量导出稽核结果。

5.稽核问题管理

对于在稽核中发现的问题,实现以问题工单形式告知相关数据提供方,数据提供方对问题进行核实处理,并把核查结果反馈给运营维护人员,运维维护人员需要对问题反馈进行审核。审核通过问题关闭问题处理流程结束,否则问题回退给数据源系统重新对问题进行处理。

(1)待办问题提醒

实现待办问题提醒,通过待办任务工作台来实现,展现所有待办问题工单,用户清楚知悉有多少个问题工单需要处理,且能查询用户已办理的所有问题工单。

待办任务工作台能实时刷新出新产生的问题工单及新办理的问题工单,能按自定义的筛选条件查看需要的问题工单。

用户能在工作台签收、跟踪问题工单,可能进入问题处理工单,按工单提示处理问题。

(2)工作流程管理

根据问题处理步骤,设计相应的问题处理流程,每个处理步骤做为流程中一个节点(需在工单中予以体现),整体问题处理过程按流程设计的步骤依次执行流转,到最终流程中每个结节(工单)处理完毕即问题处理流程流转完毕问题关闭。

(3)问题工单处理

针对稽核及监控过程中发现的问题,依据责任分工,形成问题工单,触发问题处理流程,对问题进行规范的处理落实。

稽核出的数据质量问题,系统应能自动根据错误分类生成不同问题的处理工单,并实现通过WEB、短信、邮件等方式与问题处理流程中的各个参与者进行互动。

(4)问题处理情况查询

实现问题明细查询的功能,主要包括问题工单处理、问题筛选查看、问题导出、问题相关信息选择性查看等。

可根据帐期、工单状态、问题状态、稽核结果、资源信息、规则名称、稽核对象、稽核时间等条件筛选查看明细问题。

(5)问题导入导出

实现稽核问题的批量导入、导出。手工添加异常问题,满足用户进行工单分配与处理。

(6)问题归档

通过时间、稽核对象、稽核类型等条件,对一段时间内的问题统计查询或问题明细查询,作为考核的依据。也便于下次不出现此类问题或者出现问题后很快进行解决。

6.稽核监控

需要实现分层、分类地监控稽核对象执行及问题处理情况。

具体稽核监控信息主要包稽核任务和问题统计两大部分。

稽核任务部分展现稽核任务完成情况及稽核任务执行条件具备情况等信息;问题统计部分展现问题生成入处理进度等信息。

7.数据质量报告

能对关键数据稽核、经营分析系统日常监控以及数据质量评估等过程累积的各种信息进行汇总、梳理、统计和分析,形成综合统计报告。

具体报告内容模板和格式要求,应由中标商和采购人共同确认后才能使用。

数据质量报告支持图形化展现,并可支持钻取到明细页面,打通链路,支持实时导出即见即所得。

3. 数据监控

提供运维人员和领导两类监控界面。

1.面向运维人员的界面

秉承可视化、端到端、透明化的设计思路,实现数据仓库采集、加工、稽核的全数据流程端到端实时监控、管理与审计,充分整合数据流转的监控关键点,实现精确指向、分析监控、快速锁定。

(1)监控门户:

以数据源为入口,对数据源采集、数据稽核、数据加工整体情况实现一体化监控。

(2)采集监控:

以数据源为入口,提供对文件采集入库的监控,包括入库情况、开始时间、结束时间等。

(3)加工监控:

以数据目标对象为入口,提供加工明细监控,包括加工流程、流程执行情况、起止时间等。

(4)稽核监控:

以实体对象为入口,提供稽核明细监控,包括稽核结果、稽核规则、执行状态、错误级别等。

(5)地图监控:

以数据地图为入口,提供全局监控,监控每个对象的数据流转、稽核情况。

2.面向领导的界面

面向领导层的界面采用大屏的方式进行展现,主要包括生产准备、采集监控、加工调度、数据推送服务、数据质量、应用发布等数据处理的全流程。

4. 数据规范编制

应协助采购完善内部数据质量管理制度和规范,并制订相关规范和制度,包括但不限于以下几类:

1.数据源采集接口规范,用于和数据源确定数据采集的规范,包括采集方式、采集内容、采集时间、数据质量问题交互方式和内容等。

2.信息资源基础库设计规范,用户信息资源基础库的设计标准,包括分层分主题域标准、模型、表命名、字段命名、字段类型等

3.数据质量管理规范,用于确定数据质量管理的标准及其数据质量问题相应的处理流程,包括数据质量标准规则、稽核方式、问题处理流程等。

数据传输功能要求

数据传输功能包括但不限于如下方面:

1.实现异构、异地数据内容输出到通道、通道传输、接收方数据内容入库的一体化处理。整个过程可视化配置。

2.通道支持加密、压缩、优先级、通道绑定处理、支持通道落地传输。

3.支持通道运行管理,包括通道的订阅者管理(包括条件定义订阅者),查看通道积压信息,并能删除或清空。

4.提供文件传输服务,用于保障数据文件传输的可靠性、可管理性、安全性。文件传输支持变化文件传输、文件夹传输、可定义传输数据块大小、传输线程并发数、可选择文件传输加密方法、压缩传输,支持同步、异步传输方式。整个文件传输配置在一个界面内可视化完成。

5.在文件传输服务内,可定义文件发送方前后处理、文件接收方前后处理,前后处理可以是二次开发类,也可以选择数据服务或者流程。

6.提供通用文件作为异构数据库的表的传输存储。实现异构数据库表的数据经过加工等处理后生成通用数据文件,经过文件传输服务将文件传输到异地,接受方收到数据文件立即调用服务将数据文件内容交付到到异构数据库表中,整个过程是一体化联动处理的。

7提供和外部FTP、SFTP等方式的传输服务,满足和外部系统的文件传输需要。

8.支持“物理隔离”下的数据传输。发送方的数据库表、字段 可以导出到通用数据文件,接收方将数据文件导入到和发送方不同数据库类型、不同表结构的数据库表中。整个过程可视化配置。

9.提供文件清理功能,对指定文件夹下文件根据时间长短设定清理规则,压缩备份文件或者删除清理文件。

大数据应用门户系统

作为政务大数据云平台的统一入口,应用门户系统需支持多角色的门户设计,包括普通业务人员门户、平台运营者门户、数据开发者门户及系统管理者门户,实现个性化的门户功能。

需支持个人工作台、数据资源管理、能力管理和权限管理等功能,提供数据质量管理、数据开发、元数据管理、各种开发工具等功能的入口。同时要求向各类用户提供操作便捷、响应敏捷、体验良好的界面服务能力。

应用门户系统建设内容包含不限于以下内容:单点登录、多租户管理、订单管理、我的订单、管理员门户、应用管理、帮助中心等。其中订单管理应具有用户可自助选择所需的数据产品后,提交服务申请订单。订单审批通过后,平台将自动开通相应的产品服务供用户使用的功能。管理员门户应具有主要功能包括数据服务的申请管理、数据服务管理、数据服务分析功能(分类统计、访问热度展示、最新上线的数据服务展示)等。

1. 门户网站

建立平台门户网站,提供对外公众服务,整合各系统、外部平台,成为兼顾监管信息查询、发布和服务导航的综合入口。

1.信息发布

管理员可利用该功能在门户网站页面当中发布有关大数据的法律法规、政策性文件、消息通告等功能。

提供信息发布管理功能,包括有关文件的增、删、改等功能,以及文件上传、下载等功能。

2.公共检索服务

利用“白云搜索”(详见以下章节)功能,提供综合查询功能,可按类别、时间等查询得到相关信息。

3.统计分析

提供灵活的可设置的统计功能,能对使用门户的用户行为、门户运行等情况予以统计。

能实现固定格式的统计、自定义统计等统计,并能以数据报表和图形的方式直观地表达出来。

为方便查找信息,系统提供查询功能,根据关键字进行统计信息的查询。

2. 门户管理

门户管理功能应至少提供单点登录以及个性化服务等功能。

单点登录是指用户登录之前,统一应用门户应表现为统一的内容和风格。当用户通过用户身份鉴别登录系统以后,系统将自动判断登录用户的身份和权限,自动获取该用户相关的个性化配置,从而自动调整该用户所使用页面的栏目布局、页面风格设置、功能菜单、收藏夹等。

个性化服务页面是指用户感兴趣的服务站点和信息的汇聚,包括与该用户有关的业务受理状态、个性化定制信息服务、咨询反馈等。

3. 内容管理

提供站点管理、频道管理、文档管理、模板管理、发布管理、门户管理以及配置管理等功能,实现灵活的一站式服务门户后台数据维护和管理平台。

4. 门户运营

门户运营应整合平台所有功能的管理功能,提供数据管理,权限管理,角色管理,账号管理,产品及能力管理,运营管理等不同模块的后台管理;提供查询统计,新建修改,流程配置等功能;提供项目管理人员、开发人员、测试人员、运维人员等使用的工作台功能,可令上述人员在工作台上查看流程进度、任务详情,并进行任务处理等操作。

门户基本功能:实现门户用户组织机构新增、修改、删除管理,并实现与各相关系统用户组织机构同步功能。实现单点登录,并和支撑系统内统一认证功能,包括用户组织管理、单点登录两大功能。实现系统全视图、考核指标管理、运维协同、个人工作台、综合信息发布、工具支撑、信息推送和系统管理。实现与运营支撑门户相关且又相对独立的功能做成的子系统在门户进行管理,包括知识库、应用整合和移动门户。

5. 门户展示

门户系统的信息展示风格应以简单、明晰、精致、美观、方便操作为主,版面设计要层次分明,各类功能组件和服务要能安放得当,方便使用。

门户展现要充分考虑用户登录前和登录后的展现方式,力求整体风格不出现重大差异。

对于需要授权访问的数据或服务,应在展示页面中予以适当提醒,但需要保持界面风格、操作方式相对统一。

6. 用户管理

实现后台统一的认证体系,形成应用门户的统一入口,将各应用的设计重点集中于完成业务目标,而将其人机界面映射到一个统一的入口。

提供统一的用户身份验证,并通过简单易用的动态页面去屏蔽后台复杂的业务逻辑、异构系统连接和工作流程贯通。支持扫码、短信、随机码、数字证书等认证方式。

实现旧有系统和未来系统的松散耦合,为用户提供一站式服务。通过对不同用户的身份的判别,门户自动依据该用户的身份显示其个性化的自定义页面,依据用户的个性化定义属性屏蔽所有没必要的操作功能。

大数据应用系统

通过本期项目建设,以政务大数据为基础,融合互联网等第三方数据,构建四大基础应用支撑服务,分别是白云搜索、定制化统计分析、一企一档、一人一册,其中白云搜索和定制化统计分析是为解决用户日常使用数据需求所提供的基础性服务,一企一档和一人一册是为解决相关政务应用的数据需求所提供的基础性服务。

另外政务服务指数榜、白云区教育资源紧缺度分析和大数据展现子系统则属于专项服务应用。

投标人可根据本项目所提供的数据源以及自身项目经验为采购人提供更多种类的大数据应用。

1. 白云搜索

白云搜索可为采购人相关的授权人员(包括政府工作人员、个人、个体、企业等)提供各类工作过程中的信息查询支撑。

搜索系统应提供全文查询和分类查询两类查询工具,能根据数据访问权限在搜索结果的可见性上予以控制。若非授权用户可通过数据申请向数据提供部门提出申请。申请审批通过后系统自动放开访问权限。数据申请应控制到记录级、分类级,并且控制访问的时间窗口,不在时间窗口的数据无法访问,需要访问时再次发起申请流程。

支持对用户搜索条件进行自动语义检查。

支持特定格式的搜索,如姓名:张三、年龄:32岁。

支持范围搜索(包括双区间搜索),如:年龄>32岁,上网时间>2017-10-01 00:00:00,120,或10岁~20岁等。

支持通配符搜索,如问号(?)、星号(*),用于模糊查询。

支持列表碰撞搜索,如:搜索条件为{xxx:1,2,3,4,5,6,...},搜索引擎将检索数据中至少包含有列表(1,2,3,4,5,6,...)中其中一个元素的记录。

支持字符搜索,当用户需要检索带有空格的文字,或者带有一些被引擎解释为操作符的特殊符号的文字,用户可用“”将文字包含其中,搜索引擎将这段文字单纯的理解为文字,而不是以上的搜索条件进行文字检索,如:“1 ................
................

In order to avoid copyright disputes, this page is only a partial summary.

Google Online Preview   Download

To fulfill the demand for quickly locating and searching documents.

It is intelligent file search solution for home and business.

Literature Lottery

Related download