视频:Cloudera首席执行官Mike Olson介绍了Hadoop和未来研究的可能性

作者: Judy Howell
创建日期: 2 七月 2021
更新日期: 11 可能 2024
Anonim
Cloudera VS Apache VS MapR VS Hortonworks: Which Hadoop Distribution To Use? | Big Data Tutorial
视频: Cloudera VS Apache VS MapR VS Hortonworks: Which Hadoop Distribution To Use? | Big Data Tutorial


带走:

Hadoop分析平台存在一些重大限制,涉及速度和复杂性,但行业领导者正在努力改变这一点。

Cloudera CEO Mike Olson表示,Hadoop分析平台本身就存在一些重大限制,涉及速度和复杂性。但是,行业领导者(包括自己公司的领导者)正在努力改变这种状况,并相信该研究工具将在未来几年内以根本方式发展。

在去年的Strata大会上,奥尔森让观众想像一下,如果今天创建Hadoop,将如何进行不同的设计,并认为某些特定的变化可以为教育,能源和农业等领域的研究打开新的门户。奥尔森(Olson)引用宇宙学家和科学作家卡尔·萨根(Carl Sagan)的话,强调了分解高层次数据以吸引更多受众的重要性。

奥尔森说:“我认为我们处于对企业和社会至关重要的重大发现的边缘。”



他指出,一个例子是瑞士大型强子对撞机的科学专业人员的工作使科学发现成为可能。根据Olson的说法,这是对37 TB数据的每日评估,它带来了关键的进步,例如分水岭的希格斯-玻色子发现,揭示了物质和能量的关键方面。 Olson补充说,Hadoop通过在单个存储库中捕获大量数据来帮助协助这些基础研究项目,但是很难与这些数据进行实时交互。

在阐述Hadoop和类似技术如何帮助关键领域(例如医疗保健)的科学家的方式时,奥尔森还宣布了Impala项目,该项目由他的公司进行了两年的研究,其中四分之二的beta测试与主要合作客户。奥尔森说,Impala项目是一种具有Apache许可的“ 100%开源”技术,可与Hadoop一起用作“实时查询引擎”。奥尔森说,这允许他所谓的“思维速度查询”,用户可以在其中提出问题,获得答复并提出新问题,以有效地使用主要数据集群。

奥尔森说:“它为您提供了一种获取数据的新方法。”他概述了这种进步如何为解决美国和国外的主要问题创造了更多的机会。