数据是未来的关键。它(据称)是每个科技公司决策的来源,它不仅成为软件行业的重要组成部分,而且已成为全球垂直行业的重要组成部分。目前,大数据、AI 和分析之间的关系是众所周知的,因此,我们来看一下行业专家在 2020 年将看到这些技术的走向。
- Sara Faatz, Sr. 产品营销经理, 进度: AI 和 ML 获得最高账单:人工智能 (AI) 和机器学习 (ML) 的日益普及,以及实现日常任务的自动化承诺,意味着拥有这些技能和专业知识的开发人员需求量很大。AI 和 ML 是更智能应用程序的大脑,通过这些技术,应用程序从行为模式中学习,并能够更智能地响应或生成操作。对于现代组织收集的数据,可以完成大量工作。
由于组织开始在整个业务中优先实施 AI 和 ML,因此,了解如何有效地构建、实施和使用 AI 和 ML 并了解这些强大的工具的开发人员将在 2020 年受到大量需求。
- 李浩源,创始人和CTO,Alluxio:哈迪奥存储(HDFS)已经死了。Hadoop 计算 (Spark) 生活强劲。有很多关于哈多普死了的议论…但哈多普生态系统也有许多正在升起的星星。这些是像 Spark 这样的计算框架,从数据中提取了更多的价值。其他像普雷斯托这样的已经被引入到更广泛的计算生态系统中。所以今天的Hadoop已经崩溃了。Hadoop 存储 (HDFS) 由于复杂性和成本而失效,而且如果计算与 HDFS 保持绑定,则计算根本无法弹性扩展。为了收集即时的实时见解,用户需要即时和弹性的计算能力,这是云中提供大量的。HDFS 中的数据将移动到最优化、最经济高效的系统,无论是云存储还是预置对象存储。HDFS 将消亡,但 Hadoop 计算将活在和活在强。
- Dremio 首席执行官兼联合创始人 Tomer Shiran:批量分析数据微服务的兴起。 传统的操作微服务经过设计和优化,可处理少量记录,这主要是由于现有协议和传输的带宽限制。但是现在,随着Apache Arrow Flight的到来,这个长期存在的瓶颈问题已经得到解决,它为跨不同应用程序和平台的大数据传输提供了高性能、大规模并行的协议。我们预测,在 2020 年,Arrow Flight 将推出一类新的数据微服务,专注于具有大量记录的批量分析操作,反过来,这些数据微服务将启用松散耦合的分析体系结构,这些架构可以比传统的单片分析体系结构发展得更快。