数据模型——数据仓库的灵魂

前言 越来越多的业务,越来越多的信息化系统,让很多公司拥有了海量数据,但是分散的数据、隔离的系统,又形成了一个个数据孤岛。于是,为了利用好数据,各大公司纷纷建设了数据仓库,或者是最近升级为大数据平台之类的,但是,不同条线不同场景的数据又要如何整合到同一个仓库呢? 数据模型就此应运而生,通过高度抽象的……

明确、详细、可落地:给你份通用的数据分层方法

数据分层是数据仓库设计中十分重要的一个环节,优秀的分层设计能够让整个数据体系更易理解和使用。 而目前网络中大部分可以被检索到相关文章只是简单地提及数据分层的设计,或缺少明确而详细的说明,或缺少可落地实施的方案,或缺少具体的示例说明。 因此,本文将指出一种通用的数据仓库分层方法,具体包含如下内容: 介……

Google Cloud 2021 领导者观点:驱动业务发展的五大数据趋势

2020 年无疑是独特且复杂的一年。但无论世界如何变化,数据质量、处理速度与数据洞见仍然坚定地步入企业发展的最前沿。未来如何?我们将一同展望。 如果说 2021 年有什么与 2020 年保持一致,那就是难以捉摸的不确定性。我们不愿看到又一个 2020 年,但也得随时为各种意外做好准备。 2020 年可以说是意外频发、远超想象……

Enterprise Architecture on a Page

企业架构(EA)作为一门学科长期遭受严重缺乏实践理论的困扰。造成此问题的原因一方面是由于大量的不具真实参考性的“最佳实践”,另一方面是由于缺乏针对EA的任何其他现实参考模型。为了解决EA长期缺乏合理的参考模型的问题,提供EA的一页全面的解释性观点是一个好主意,它是用于规划的特定组件的集合,反映了实际的EA最佳……

锤炼“韧性”经营 加速数字化转型 德勤管理咨询发布《2021技术趋势报告》

日前,德勤管理咨询正式发布了《2021技术趋势报告》(点击免费下载)。本年度报告研究了疫情一年来对企业战略、运营和技术带来的连锁反应,论述了其重大发现:全球企业正在加速数字化战略转型,从而构建“韧性”、开创全新的经营模式。 德勤管理咨询中国首席执行官戴耀华表示: 这已经是德勤管理咨询连续第12……

数据湖迁移到云的四个原因

从管理复杂性到增加可伸缩性,我们提供了四个使您的企业受益于将数据湖移至云平台的理由。 拉文德拉·普努鲁(Ravindra Punuru) 互联网上有关Hadoop未来的搜索产生了一些文章,质疑Hadoop是“正式死亡”还是变得无关紧要。就在三年前,Forrester预测 Hadoop的年增长率将达到33%。不到一年之后,他们的分析得出结论,Hado……

平台架构和数据架构不同但相关

许多人(甚至是经验丰富的数据专家)都会混淆相关的体系结构,从而削弱数据驱动的解决方案设计及其业务用例。 由菲利普Russom 2020年9月4日 作为捕获和利用新数据资产用于新业务和技术实践的策略,许多用户组织正在使其数据管理工具和存储平台的产品组合多样化。他们的假设是,没有一个数据存储平台可以针对当今我们面……

企业数字化之数据平台建设

一、大数据之应用 大数据是以容量大、类型多、存取速度快、应用价值高为主要特征的数据集合,正快速发展为对数量巨大、来源分散、格式多样的数据进行采集、存储和关联分析,从中发现新知识、创造新价值、提升新能力的新一代信息技术和服务业态。通过采集数据资源,并对数据加以整合、分析、提取,得到有价值的信息,企业……

AWS RDS PostgreSQL 性能问题的调优

关于RDS Postgresql 性能问题的调优建议,可以先尝试以下以种方法: 1. 确认启用auto vacuum RDS postgresql应该默认启用了auto vacuum,通过下面的语句确认改选项是否打开。 select * from pg_settings where name like ‘autovacuum%’ 2. 创建Index 可以执行explain (query text)或explain (buffers true, a……

数据治理角色

数据治理定义了组织如何充分利用数据,同时以合理的成本和资源水平保持数据的安全和管理。做得好,数据治理可以使组织中每个人都对数据负有责任感,并对数据对其工作的价值有所了解。 当然,并不是每个人都应对所有事情负责。一个人会有不同的技能和兴趣。因此,数据治理将需要完成的工作分解为任务,并将相关任务分组为……