深入理解 TiDB Placement Rules 功能的应用与优化
678
2023-04-28
成功数据集成策略中的八项关键性元素
***拍档:数据集成与应用集成
数据集成与应用集成在传统角度上彼此并无关联,但如今这一状况正发生变化。根据Forrester公司企业架构***分析师Brian Hopkins所言,部分开创性厂商已经开始将数据集成至某些业务流程当中。“大数据处理与内存成本的持续走低使得我们能够以原始或者近乎原始格式实现数据存储,并立足于内存之内进行复杂的集成操作,”Hopkins在其最近发布的数据集成报告中写道。这种新型架构将能够更为顺畅地实现数据集成。
应用对数据:哪一方更加权威?
Gartner公司副总裁兼著名分析师Mark Beyer也认为,数据集成与应用集成已经被紧密联系在一起。而在相关工作当中,企业需要决定哪一方的权威性更高。“二者都在尝试对数据进行管理,”他在采访当中表示。“因此必须由决策者判断二者哪者拥有数据的权威操作能力。”
将数据移动技术视为中间件
有些人认为应当尽可能避免将数据从一套系统迁移至另一套系统。但是随着大数据技术的出现,数据移动已经变得不可避免。他认为,数据移动相关技术“应作为中间件从全部数据源及数据存储中解耦出来。”这套方案能够显著简化并加快升级速度。
投资建立现代架构
Forrester公司的Brian Hopkins在采访中表示,企业需要一套现代架构以实施成功的数据集成策略。以往的实践及架构需要将ETL包含于数据仓库之内,并将数据存储于数据湖当中。“如今一大重要变化在于,开源大数据工具开始被广泛用于立足来源进行大规模数据的快速管理……实现数据流正是实现成功数据集成策略的重要组成部分。”
关注安全性
在大数据集成领域,安全性仍是一项非常重要的保障因素。Forrester公司的Hopkins表示,安全性绝对是Hadoop领域的核心问题,因为Hadoop发布方Cloudera与Hortonworks在其大数据应用安全性方面走出了各自不同的道路。“这种作法并不适合每类用户,”他指出。这意味着企业需要高度关注自身所使用各类工具的具体安全性问题。
放开管制
Gartner公司的Beyer指出,如今IT人士的一大难题在于其需要负责数据基础设施与数据管理任务,但同时又不再具备完整的控制能力。“数据管理模式将变得五花八门——包括分布式、云端、内部乃至应用当中。要实现数据集成,首先需要将治理模式从管理方案中独立出来。治理是需要执行的任务,而管理是达成目标的途径。”
重新审视元数据
根据Beyer的观点,元数据如今正得到重新审视,但具体角度则与传统的静态数据源与值信息有所区别。新的元数据关注方向包括数据的访问与使用频率,这类信息能够帮助我们了解数据的重要程度。数据是否被用于进行多种不同类型的分析?其属于监管型、事务型或者操作型?通过这些指标,大家将能够找到真正需要加以良好治理的关键性数据。
关注内容形式与内容偏差
Beyer指出,他认为在未来三到五年当中,企业将意识到数据集成与数据分析中存在着固有偏见。“简单来讲,所有数据都包含有创造者的偏见,”他在一篇博文当中指出。“所有数据都可从多个角度加以审视,而每个数据点都反映出业务流程设计者的自身意图,意味着我们不可能真正利用现有数据集成机制进行纯粹的客观分析。”Beyer就此给出的解决方案在于鼓励真正的数据科学家构建可用于解释数据真实含义的数据竞争性机制。其将至少通过两条轴对数据内容进行理论比较。
原文链接:
版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。