Hadoop

2年前（2023-06-24） 27浏览 0评论

背景 目前接手了Hadoop集群的维护，由于服务器老旧经常出现宕机的问题，无法维修的需要从集群中摘除掉再加入新的机器。新机器加入集群后需要重新下发配置，此前一直没有关注下发配置成功的服务器数量。这次在集群新增机器下发配置的过程中发现有台机器更新配置居...

3年前（2022-12-05） 3119浏览 0评论

背景 模型文件重要性不言而喻，除了权限控制以外定期备份也是一个必要的安全措施。公司在迁移机房前与模型训练相关的集群有两个，分别是位于同一个物理机房下的Hadoop Cluster A和Hadoop Cluster B，其中Cluster A作为算法专...

4年前（2021-09-08） 2158浏览 0评论

背景 开始前不得不提一下，Cloudera在2021年向普通用户关闭了http://archive.cloudera.com/cdh5(6)/cdh/5(6)的下载权限还是挺可惜的，依赖下载地址继续开放也算是一件好事吧。 公司大数据计算/存储集群迁移...

7年前（2018-02-05） 1714浏览 0评论

转载请注明：雪后西塘 » Yarn命令行客户端常用命令