皇上,还记得我吗?我就是1999年那个Linux伊甸园啊-----24小时滚动更新开源资讯,全年无休!

Apache Hadoop 3.2.0 发布,3.x 系列最大版本

Apache Hadoop 3.2.0 发布了,这是 Hadoop 3.x 系列中最大的一个版本,带来了许多新功能和 1000 多个更改,通过 Hadoop 3.0.0 的云连接器的增强功能进一步丰富了平台,并服务于深度学习用例和长期运行的应用。

亮点包括:

  • ABFS 文件系统连接器:支持最新的 Azure Datalake Gen2 Storage
  • 增强 S3A 连接器:对 AWS S3 和 DynamoDB IO 更好地弹性节流
  • YARN 中的节点属性支持:有助于根据节点的属性标记节点上的多个标签,并支持根据这些标签的表达式放置容器
  • 存储策略变化:在文件/目录上设置存储策略,支持 HDFS(Hadoop 分布式文件系统)应用程序在存储类型之间移动块
  • Hadoop Submarine:使数据工程师能够在同一个 Hadoop YARN 集群上轻松开发、训练和部署深度学习模型(TensorFlow 中)
  • C++ HDFS 客户端:有助于对 HDFS 执行异步 IO,对下游项目有利,如 Apache ORC
  • 长期运行服务升级支持:通过 YARN Native Service API 和 CLI 对长时间运行的容器进行就地无缝升级

详情查看发布公告

转自 https://www.oschina.net/news/104066/hadoop-3-2-0-released

分享到:更多 ()