企业BI建议--数据治理平台
数据治理平台对于企业开展BI项目建高特别的重要,一般企业会建设数据中台和数据应用平台,数据中台完成数据入湖、加工,数据仓库分层设计,而数据应用平台则侧重于进行分析展现,而且一般会把数据应用平台提供给业务使用,数据中台在一段时间内还是由信息化部门在使用,特别是在一些制造企业,信息化部门在很长一段时间内还承担着数据开发的工作,一般的工作套路还是业务提需求,信息化部门负责实现。
但即使这样,一个好的平台也很重要,特别是信息化部门,如何用好一个平台,而且方便运维能减轻不少工作量,对于前台展示的平台现在市面上的很多,而且也都很好用,都是通过拖拉拽的方式来实现数据的展示分析,比如大屏效果制作,报表分析等。比如市面上的帆软BI,SMART BI等都很好用,但这里面对于数据中台,真正适合企业应用的,特别是要结合企业的实际,符合企业运营现状的要仔细考虑,首先要想清楚,对于信息化部门来说,利用数据中台最重要的是要解决什么问题?很多企业没有把这个问题想清楚,就认为只要钱花的多,那么买来的平台就一定好用,当然不可否认,贵的平台有其自身的好处,但不一定适合企业本身,企业一定要选择最适合企业,性价比最高的平台。比如说,如果企业目前优先解决的是数据入湖,那么就要要求平台在数据入湖的技术和易用性上要求高,不仅要支持各种入湖的技术,而且要支持低代码最好是拖拉拽的方式进行数据的采集、加工。如果企业强调 的是数据架构设计,那么就要求平台的数据架构的方法论必须先进,而且要能在企业内落地。这个很重要。如果企业缺乏数据质量工作开展的方式,那么要求平台必须有数据质量的强大功能,指导工作开展,下面笔者把几个最重要的功能进行下说明:
1、数据汇聚:数据采集、数据加工。需要支持对各种数据,结构化数据、非结构化数据,流式数据的数据入湖,既支持离线批处理,又支持实时数据,必须要覆盖所有的场景。对于数据加工,必须支持低代码开发,支持通过拖拉拽的方式进行加下,不能全部用SQL实现,这样非常不方便后续的运维。
2、数据架构 :必须要支持数据架构开展的方法论支撑。一般市面上有三种,一种是DCMM的,一种是DAMA的,一种是华为数据之道的,笔者建议选择华为数据之道的方法论,其实践指导性更强,不只是偏向理论指导。
3、数据质量:必须支持通过数据质量规则形成质量报告,并通过工单推动问题闭环。而且这些都应该是支持设定规则后系统自动完成的。
4、数据安全:这个是很多数据中台忽略的功能,需要支持各种数据脱敏和隐私安全功能。
选择一个适合企业的数据治理平台,至少做到5-10年内不进行更换,这个很重要!!
