2018-3-16 15:54

重庆移动开展大数据平台利旧扩容

日前,重庆移动完成大数据平台hadoop集群设备利旧和扩容工作,这是继B域应用从老平台迁移到新平台后,陆续完成的O域应用迁移,老集群停机下线,设备回收,设备利旧加入新hadoop集群几部分工作。

首先是O域应用迁移:经过程序测试、新老集群并行执行、迁移割接、检查核对等过程,将租户约200个应用程序从老hadoop集群集中迁移到新的hadoop集群运行,迁移后应用执行效率正常。

其次是老集群停机和设备回收:在应用迁移完毕后,将老集群关键数据和文件进行备份后,对集群的设备完成数据清理,将一部分大数据一期老旧设备拆除用于搭建测试hadoop集群,将另一部分大数据二期设备用于新大数据平台。

再次是设备利旧加入新集群:大数据二期设备利旧,将大数据二期78台设备加入到新的hadoop集群,扩充集群能力。

该项工作完成后,大数据平台hadoop集群节点为229台,存储能力为10PB,CPU为7760核心,内存为41TB,支撑公司各个部门租户共26个,每日执行计算任务1万余个。大数据平台设备利旧,一方面为支撑重庆移动大数据应用提供了有效的支撑和能力储备,另一方面为大数据平台建设节约了投资成本。

作者:李媛婧   来源:人民邮电报

相关

测试
本评论 更新于:2024-4-27 8:07:02
在C114 APP中与业内人士畅聊通信行业热点话题!