logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

数据治理:如何提高企业数据质量?

数据质量的高低代表了该数据满足数据消费者期望的程度,这种程度基于他们对数据的使用预期。数据质量必须是可测量的,把测量的结果转化为可以理解的和可重复的数字,使我们能够在不同对象之间和跨越不同时间进行比较。 数据质量管理是通过计划、实施和控制活动,运用质量管理技术度量、评估、改进和保证数据的恰当使用。1、准确性:数据不正确或描述对象过期2、合规性:数据是否以非标准格式存储3、完备性:数据不存在4、及时

#big data#机器学习#大数据
数据治理系列4:主数据管理实施四部曲概论

目录导读:一、摸家底二、建体系三、接数据四、抓运营导读:我们知道主数据项目的建设是一个循序渐进、持续优化的过程,不可一蹴而就。个人认为主数据管理项目从咨询规划到落地实施再到初步见效需要经历四个阶段,而每个阶段都是必经阶段,每个阶段均可独立成章,所以这里是四部曲,不是四步曲。主数据项目建设从方法上,分为以下四部,简单归结为12个字:“摸家底、建体系、接数据、抓运营”!一、摸家底摸家底需要全面调研和了

#python
数据治理系列3:数据标准管理

目录导读:数据标准是什么?企业数据标准管理的内容企业数据标准的梳理数据标准设计流程数据标准管理价值总结:数据标准与主数据、元数据、数据质量的关系导读:提到“标准”二字,我们第一时间能够想到的就是一系列的标准化文档,例如:产品设计标准、生产标准、质量检验标准、库房管理标准、安全环保标准、物流配送标准等,这些标准有国际标准、国家标准、行业标准、企业标准等。而我们所说的数据标准却不单单是指与数据相关的标

#数据仓库#big data#大数据
数据治理系列8:数据价值管理

目录1、你的数据是锦上添花,还是雪中送炭?2、什么是数据价值?3、影响数据价值的因素4、数据价值评估的方法5、写在最后的话小的时候父母、老师就总教育我们:做人要做有价值的人,做事要做有意义的事。但是,什么才算是有价值和意义的呢?就如现在我写文章,写文章是有价值的吗?如果文章没有干货,对自己没有提升,对读者没有启发,那就没有任何意义。于是,我给“谈数据”定位,我的每一篇文章不追求多高的阅读量,只希望

#大数据#数据仓库#big data
数据治理:数据质量管理办法

本标准规定了XX公司数据质量管理内容、管理机制和工作流程。本标准适用于XX所有项目整个生命周期的数据质量管理,非项目可参照使用。下列术语和定义适用于本文件数据质量data quality客观反映业务数据固有特性的程度。注:“固有的” (其反义是“赋予的”)就是指在某事或某物中本来就有的,尤其是永久的特性。数据质量管理 data quality management对数据从计划、获取、存储、共享、维

#人工智能#big data#大数据
阿里巴巴数据治理平台建设经验

阿里巴巴一直将数据作为自己的核心资产与能力之一,通过多年的实践探索建设数据应用,支撑业务发展。在不断升级和重构的过程中,我们经历了从分散的数据分析到平台化能力整合,再到全局数据智能化的时代。如今,大数据平台面临全新的挑战,特别是降本等数据治理需求的不断出现,今天阿里云 DataWorks 团队将其中一些建设经验与大家进行一些分享。

#大数据#人工智能
关于数仓建设及数据治理的超全概括

1、用空间换时间,通过大量的预处理来提升应用系统的用户体验(效率),因此数据仓库会存在大量冗余的数据;不分层的话,如果源业务系统的业务规则发生变化将会影响整个数据清洗过程,工作量巨大。2、通过数据分层管理可以简化数据清洗的过程,因为把原来一步的工作分到了多个步骤去完成,相当于把一个复杂的工作拆成了多个简单的工作,把一个大的黑盒变成了一个白盒,每一层的处理逻辑都相对简单和容易理解,这样我们比较容易保

#数据仓库#数据挖掘#大数据
数据治理的10个实践

目录1、找症状,明确目标2、理数据,现状分析3、数据治理成熟度评估4、数据质量问题根因分析5、业务影响及实施优先级评估6、制定数据治理行动路线和计划7、制定数据治理详细实施方案8、数据治理实施过程控制9、监控评估数据治理实施效果10、数据治理持续改进1、找症状,明确目标任何企业实施数据治理都不是为了治理数据而治理数据,其背后都是管理和业务目标的驱动。企业中普遍存在的数据质量问题有:数据不一致、数据

#hive#big data#数据库
数仓系列第10篇:数据治理

通过本次概念层面的梳理,我们将数据工作的体系框架、架构规范、平台管理等方面进行了一些总结。目前,数据中台建设的落地工作也在推进,4P平台的建设工作正在有序实施,也希望上面的概念梳理能够给大家对相关工作的理解提供一些帮助。欢迎关注公众号,一起进步!

#系统架构
数据治理系列6:数据安全治理之道

目录一、初识信息安全二、什么是数据安全治理?三、数据安全治理,治什么?四、数据安全治理流程五、数据安全治理的技术手段六、数据安全VS工作效率以此文致敬当年一起奋斗过的兄弟,和一路走来陪伴我们成长的所有客户!一、初识信息安全说到数据安全,不由得想起那些年做军工企业项目时的一些人和一些事。那是10年前——2009年的春天,我司接了一个军工企业的大单,我受命去做实施要常驻项目现场。记得上班第一天,客户就

#big data#数据仓库#云计算
    共 40 条
  • 1
  • 2
  • 3
  • 4
  • 请选择