[00091070]Hadoop的配置参数的计算方法及系统
技术详细介绍
本发明提供了一种Hadoop的配置参数的计算方法及系统，所述方法包括如下步骤：对工业环境下的实际的生产数据采样获得工业环境的小数据集；随机产生Hadoop配置参数，并将工业环境的小数据集运行于Hadoop集群，输出为运行时间，以时间为类标，Hadoop配置参数的组合为输入，采用信息增益的方案，输出为Hadoop的重要配置参数；采用遗传算法对获取的重要性参数迭代搜索最优配置组合。本发明提供的技术方案具有计算量小的优点。
本发明提供了一种Hadoop的配置参数的计算方法及系统，所述方法包括如下步骤：对工业环境下的实际的生产数据采样获得工业环境的小数据集；随机产生Hadoop配置参数，并将工业环境的小数据集运行于Hadoop集群，输出为运行时间，以时间为类标，Hadoop配置参数的组合为输入，采用信息增益的方案，输出为Hadoop的重要配置参数；采用遗传算法对获取的重要性参数迭代搜索最优配置组合。本发明提供的技术方案具有计算量小的优点。
