简介:摘要装备监测中,获取装备信息的主要途径是对装备进行数据采集,通过数据来反映装备的技术水平和状态水平。要让数据显示出这些信息,数据处理必不可少。数据处理依靠基本的数学原理,依托计算技术,快速有效的处理数据,给出需要的信息,是装备监测的重要环节。数据处理技术的发展,带动了装备监测的发展,现代数字处理技术,将装备监测也带到了一个新时代。
简介:针对大数据处理框架MapReduce中的任务调度问题,提出一种基于Markov决策过程(MarkovDecisionProcess,MDP)的任务调度算法,通过状态集来描述集群中节点的负载和作业的数据本地性需求,使用状态转移函数表示调度策略对状态的影响,采用值迭代求解算法求取最优策略,实现集群中节点的最优调度.实验结果表明,该算法能够保证数据本地性的同时,减少作业响应时间,提高系统综合性能.