要使用的升级文档可以在这里找到。
我能够快速、轻松地从 hdp 3.0.1 升级到 hdp 3.1。这是你一直在寻找的稳定版本。这是您需要的新的码头化平台。
yum upgrade ambari-agent -y
yum upgrade ambari-server -y
新的 hdp 功能
hdp 3.1、ambari 2.7.3 和智能感知1.5。1
阿帕奇·卡夫卡
卡夫卡流现在得到支持
卡夫卡流现在得到了官方支持。卡夫卡流与游侠和架构注册表等平台服务完全集成, 并支持安全不安全的集群。
安全
- 简化了访问控制管理, 支持用于实体批量管理的前缀 acl。用于特定主题/主题前缀的主题创建的访问控制。
- 主机名验证, 以防止 ssl 配置人员在中间的攻击。
- 通过更快的 tls 和 crc32c 实现改进了加密支持。无线加密速度更快。
- 使用 ssl 信任存储进行更简单的安全配置更新, 而无需代理重新启动, 并且可以在启动代理之前配置动物园管理员侦听器的安全性。
可靠性
- 配额限制通知, 以区分网络错误和达到的配额限制。
- 通过减少消息停机转换的内存占用, 提高代理弹性。
- 复制协议改进, 以修复快速领导故障转移期间的日志分歧。
性能
- 使用新的配置选项防止无限期使用者块。
- 卡夫卡流的窗口汇总性能有了很大改善。
阿帕奇地图集
- 支持按实体类型的沿袭图中的图标 (例如, apache hive 表、apache kafka 主题等)。
- 筛选沿袭 ui 以排除已删除的实体, 并将进程实体排除为选项。
- 支持将 ui 中的沿袭图扩展到不同数量的跃点 (3、6、9、12等)。
- 各种性能和稳定修复。
阿帕奇护林员
- 支持阿帕奇卡卡2.0 在卡夫卡游侠插件。
- 支持卡夫卡的 “委托令牌” 资源类型和 “描述” 操作。
- 支持卡夫卡的群集资源类型。
- 支持在卡夫卡创建主题资源的操作。
阿帕奇蜂巢
特征
- 通过卡夫卡存储处理程序阅读和撰写阿帕奇卡主题。
- 通过使用在 hive 表上构造的绽放筛选器对德鲁伊表进行运行时筛选, 加速德鲁伊表和 hive 表之间的联接。
性能
- 利用约束生成高效的查询计划。
- 改进统计系统以生成更好的查询计划。
- 地图连接矢量化和筛选表达式中的改进。
稳定性
- mysql 和 postgres 的 jdbcstoragerhandler 改进。
安巴里2.7.3 和智能感知1.5。1
我们用于设置、管理和监视 hdp 的开源管理工具的最新维护版本包含许多修补程序。有关具体修补程序的更多详细信息, 请参阅 ambari 发行说明。我们鼓励 ambari 2.7 的当前用户升级到 2.7.3, 以利用这些修补程序。
smartsense 1.5.1 是最新的维护版本, 专注于错误修复和诊断捕获改进
打开 jdk8 支持
hdp 3.1.0的官方apache组件版本:
- apache accumulo 1.7。0
- apache atlas 1.1。0
- 方解石1.16。0
- apache datafu 1.3。0
- apache hadoop 3.1。1
- apache hbase 2.0。2
- 阿帕奇蜂巢3.1。0
- 阿帕奇·卡夫卡2.0。0
- 阿帕奇诺克斯1.0。0
- apache livy 0.5。0
- 阿帕奇·奥齐4.3。1
- 阿帕奇·凤凰城5.0。0
- 阿帕奇猪0.16。0
- 阿帕奇护林员1.2。0
- 阿帕奇火花2.3。2
- apache sqoop 1.4。7
- 阿帕奇风暴1.2。1
- apache tez 0.9。1
- apache zeppelin 0.8。0
- apache zookeeper 3.4。6
- apache superet 0.23。3
- apache druid 0.12。1
从改进的 ui 到更快的性能, 再到更多功能, 您现在就可以尝试 hdp 3.1。
使用 Cloudbreak, 您可以在几分钟内在您选择的云中旋转一个, 作为一个完整的网络点击体验。开始大规模实时地将机器学习引入、运行、查询和应用到数据中。所有这些都是开源的, 现在就可以使用了。