首页 > 《科技新时代》 > 2024年3期 > 分布式大数据处理与分析系统优化研究

分布式大数据处理与分析系统优化研究

在线阅读下载PDF 导出详情

摘要摘要：分布式大数据处理与分析系统在面对不断增长的数据量时面临着复杂性、性能瓶颈、安全隐私问题以及系统可伸缩性的挑战，为应对这些问题，优化成为一个关键课题。通过深度分析系统的复杂性，探讨了分布式大数据处理与分析系统的背景与前沿技术，在挑战与问题部分，着重阐述了性能瓶颈、数据安全与隐私、系统可伸缩性等方面的问题。随后提出了分布式计算框架优化、安全性与隐私融合优化、自适应调节与可伸缩性优化等策略，旨在有效提升系统的性能、安全性和可伸缩性。这些优化措施涵盖了任务划分、资源调度、数据加密、访问控制、自适应调节等方面，为构建高效、安全、可伸缩的大数据处理系统提供了有力支持。

DOI 34gmk5k334/8197807

作者向守超

机构地区重庆机电职业技术大学，重庆 404100

出处《科技新时代》 2024年3期

关键词分布式大数据处理系统优化性能瓶颈

分类 [建筑科学][建筑技术科学]

出版日期 2024年04月23日（中国期刊网平台首次上网日期，不代表论文的发表时间）

相关文献

1李娟,. 分布式计算在大数据处理中的应用.建筑技术科学,2023-09.
2张光耀. 面向大数据的分布式存储与处理技术比较与优化.建筑技术科学,2024-05.
3戚进娣,440881198909093588,深圳市,518000. 基于大数据的分布式存储管理系统设计与优化.城市规划与设计,2024-05.
4宋志超. 面向大规模数据处理的分布式计算与协同处理研究.产业经济,2023-11.
5宋志超. 面向大规模数据处理的分布式计算与协同处理研究.,2023-11.
6刘文妍闻锋*. 浅析大数据之Hadoop分布式系统.文化科学,2018-07.
7李栋. 大数据与分布式云存储技术.建筑技术科学,2022-05.
8陈海 ,刘晓蕾,张士宗. 面向大数据的分布式存储系统设计.机械工程,2023-07.
9张建平. 云计算、分布式存储技术在卫星数据处理中的作用.建筑技术科学,2023-11.
10邓平;李红育;宁东玲. 海量数据分布式存储与检索优化分析研究.计算机应用技术,2013-04.

来源期刊

科技新时代

科技新时代

相关推荐

同分类资源更多

相关关键词

分布式大数据处理系统优化性能瓶颈

返回顶部