云计算将如何影响数据仓库技术?

来源:机房360 · 2020-04-26 16:29

  近年来,数据生成水平激增,其特点是工业领域中很多企业进行了巨大的数字化转型。全球范围内生成的数据量正在快速增长。实际上,行业媒体Gigabit Magazine的研究表明,全球2020年生成的数据量将比10年前增长25倍以上。此外,据估计,到2025年,生成的累积数据将增加三倍,达到近175ZB。

  目前,业务决策者对实时数据访问的需求也在以前所未有的速度增长,以便于进行明智的业务决策。

  为了使数据对他们的业务有用、可行和可扩展,企业需要一种有效且经济高效的方式来存储、标记和解释这些数据。实现这种目的最有利可图的方法之一就是采用数据仓库。

  这一概念可以追溯到上世纪70年代,当计算机科学家Bill Inmon首次提出“数据仓库”一词时,就出现了数据仓库市场。早期的数据仓库创建为本地服务器,其构建能力仅为千兆字节。从那时起,它们经历了重大的变革,现代化的仓库可容纳更大的容量。

  数据仓库,也称为决策支持数据库,是指一个中央存储库,用于保存从一个或多个数据源(例如事务系统和关系数据库)衍生的信息。系统中收集的数据可以采用非结构化、半结构化或结构化数据的形式。然后对这些数据进行处理、转换和使用,以使用户可以更轻松地通过SQL客户端,电子表格和商业智能工具对其进行访问。

  数据仓库还促进了更轻松的数据挖掘,这是对数据中的模式进行标识,然后可以用来推动更高的利润和销售量。数据仓库行业的应用范围跨越了与分析乃至云计算相关的多个领域,在某些情况下,其中包括医疗保健、制造业、电信与IT、零售和政府等。

  在技术领域,有几家公司在推进数据仓库技术方面取得了长足的进步。最著名的公司之一是Teradata公司,这是一家行业领先的数据仓库公司,在该领域拥有30多年的经验。Teradata软件被广泛用于许多行业的各种数据仓库活动,尤其是在银行业。该公司一直致力于通过创新的新技术(包括基于Hadoop的服务)来增强其商业智能解决方案。

  大数据和数据仓库

  在现代时代,大数据和数据科学正在极大地颠覆企业开展业务以及决策流程的方式。跨行业拥有如此大量的数据,对高效大数据分析的需求变得至关重要。大数据最早是在上世纪90年代出现的,但是这个概念可以追溯到术语创造之前,直到计算机时代的曙光,那时企业将使用大型电子表格分析数字和研究趋势。

  随着1990年代末和2000年代初出现新的数据源,它们开始推动了海量数据的产生。随着移动设备和搜索引擎的兴起,这种趋势尤其激增,搜索引擎比以往任何时候都可以输出更多的数据。表征大数据出现的另一个因素是速度。数据生成速度越快,所需的处理就越多。因此,在2005年,Gartner公司将大数据的概念描述为数据的3V,也就是数量,速度和种类。

  随着数据量持续快速增长,传统的关系数据库和数据仓库无法处理这些数据。为了规避此问题并确保更高效的大数据分析系统,雅虎等公司的工程师于2006年创建了Hadoop,这是一个Apache开放源项目,它具有分布式处理框架,即使在集群平台上也可以运行大数据应用程序。

  

云计算12

 

  人工智能,机器学习和基于云的解决方案可能会推动数据仓库市场的未来前景

  考虑到现代产生的数据量以及处理数据所需的高级基础设施,决策支持数据库在技术和体系结构方面都面临着巨大的发展压力。除了几种新的数据仓库架构方法之外,还出现了许多技术,成为现代商业智能解决方案的主要贡献者,从云计算服务到数据虚拟化再到自动化和机器学习等。

  基于云计算的解决方案是数据仓库市场的未来。随着众多企业转向云平台来支持和存储其数据仓库解决方案,像亚马逊和谷歌这样的互联网公司不知疲倦地致力于开发和托管创新的基于云计算的数据仓库。

  未来几年将推动数据仓库行业前景的另一趋势是机器学习和人工智能支持。新的数据仓库架构将成为人工智能数据集的基础,而人工智能和机器学习将改善这些商业智能解决方案的功能和运营。这种趋势的一个例子是谷歌将机器学习整合到BigQuery数据仓库中。

+1

好文章,需要你的鼓励

热门阅读

2月14日消息,据国外媒体报道,在亚马逊进行抗议之后,美国一名联邦法官于当地时间周四下令,暂时禁止微软执行与美国国防部的百亿美元云计算合同。 美国国防部发言人罗伯特卡弗中校在...

2020-02-17 09:57:12

谷歌公司日前宣布,该公司用于在多个内部部署和云计算环境中管理Kubernetes工作负载的软件Anthos现在可以在其竞争对手AWS的云平台运行工作负载,但还没有对微软Azure云平台提供支持。 谷歌云...

2020-04-26 11:25:10

刚刚,独立的全球咨询与服务机构Forrester发布《The Forrester New WaveTM: Function-As-A- Service Platforms, Q1 2020》报告。腾讯云FaaS能力凭借在产品体验、安全性、战略愿景等方面的绝对优势脱颖而出,综合...

2020-03-02 10:23:16

如果企业对其数字环境的安全性负责,那么要了解最新的硬件、环境和软件漏洞补丁可能是一个挑战。将企业的工作负载迁移到云平台能够以独特的新方式帮助应对这些挑战。等待迁移到云平...

2020-04-21 10:53:54

我国企业上云空间巨大,云计算会迎来新一轮更为广阔的蓬勃发展机遇期。下一步,工信部将从五方面入手推动云计算产业快速发展。日前,在第九届中国云计算标准和应用大会上,工业和信...

2019-12-17 17:09:34

1月7日,据国外媒体报道,在全球云计算领域拥有较大市场份额的亚马逊,宣布将与电信运营商合作推出5G边缘云计算。 与威瑞森合作推出5G边缘云计算服务的消息,是亚马逊在官网宣布的。...

2020-01-08 09:33:08

如果人们认为云计算将导致数据中心消亡,而人工智能项目注定要失败,那么需要再考虑。 在技术界,有两个主要的缺点:人们过于渴望迎接未来,具有讽刺意味的是,如果发展速度不如人们...

2020-02-10 15:55:17

回溯AWS发展,它的成功主要在于持续不断的技术创新与迭代、服务于客户的经营理念,同时带来了社会经济效益。 微软与谷歌等相对较晚市场进入者纷纷借鉴亚马逊成功经验,在此基础上寻找...

2020-02-26 17:25:08

中证网讯(记者 齐金钊) 中国证券报记者获悉,作为公司AI赋能金融解决方案的主要载体,金证股份(600446)旗下优智团队日前已经孵化出金证金融智能PaaS平台系。该平台能够帮助金融机构与监管...

2020-04-24 08:57:19

如今,云计算不再只是企业简化工作流程的一种方式,而是一个主要的区别。对于在瞬息万变的世界中蓬勃发展的企业而言,云计算已变得至关重要。将业务迁移到云平台已经成为很多企业最...

2019-12-27 11:04:39

Synergy Research Group最新数据显示,2019年CPaaS收入有望再次实现40%以上的增长。由于今年前三个季度的收入已经超过2018年全年的水平,Synergy预测, 2019年全年该市场的收入将是2016年的三倍。 Twi...

2020-01-07 11:40:36

去年年初,我们预测关于5G、AI、大数据很多方面的发展方向;一年后,我们回过来看,这个世界实在变化得太快。这是中国电信云公司副总经理徐守峰对去年技术发展的总结。 为了追上技术的...

2020-01-16 15:53:40

随着云计算预算的激增,越来越多的企业正在寻找控制成本的方法。人们需要了解一些旨在使云计算支出得以控制的管理技巧。 许多企业曾经将云计算作为减少数据中心支出的一种方法,但现...

2020-03-04 11:18:29

多云策略和混合IT环境为企业的技术领导者带来了可能无法预期的一系列挑战。对于许多企业而言,将一些数据和工作负载迁移到云平台中已经不再是一个问题。其问题是如何将IT基础设施广泛...

2020-02-07 17:33:07

2019年Veeam云数据管理报告显示,有73%的组织无法满足用户对持续不间断访问应用程序和数据的需求,这将会给企业每年造成2000万美元的损失。由此可见企业用户对于数据管理的市场需求的迫切...

2020-02-21 15:06:02

采用云计算技术可能会带来计费、管理和合规性问题,人们需要了解一些企业将工作负载从云平台遣返回内部部署数据中心的主要原因。 尽管有着大量云计算提供商案例研究和用户采用的成功...

2020-01-03 11:37:36

近日,平安科技与英特尔于中国深圳平安金融中心正式签署战略合作协议。协议约定双方共同组建联合实验室、产品与技术合作、多产品发展生态系... 近日,平安科技与英特尔于中国深圳平安金...

2020-01-13 15:13:43

2月24日,微盟集团发布公告称,SaaS 业务生产环境和数据遭到一名员工人为破坏,已向上海警方报案,该员工已被刑事拘留。 2 月 23 日 19:00 左右,微盟收到系统监控警报,SaaS 业务服务出现故...

2020-02-25 11:37:05

物联网云平台是物联网和云计算技术堆栈融合在一起的平台,可为消费者和商业应用带来增值服务。 事实上,云服务的日益普及推动了物联网在许多业务领域的发展,在这些领域,开发本地物...

2019-10-29 09:53:34

回顾2019年来,随着5G技术的全球性应用落地,以云计算为代表的云产业发展黄金期已经非常凸显,各大科技巨头均大幅增加了对云基础设施的支出,且大部分巨头的相关业务收入也呈现出了大...

2020-01-07 11:41:15