云环境下容器化Spark资源调度优化机制探索

在线阅读 下载PDF 导出详情
摘要 摘要:云计算与大数据技术高速发展,容器技术与Spark技术广泛应用,传统的Spark部署方式逐渐不能满足现代需求,容器具有轻量级、易隔离,开箱即用的优点,将大数据技术与容器技术相结合,进行容器化Spark资源调度,提高算法有效性。文章概述Spark技术架构,提出优化系统架构等措施,分析云环境下容器化Spark资源调度优化要点。
作者 朱怡 
出处 《通讯世界》 2023年4期
出版日期 2023年06月29日(中国期刊网平台首次上网日期,不代表论文的发表时间)
  • 相关文献