针对当前土壤化学特征数据海量增长以及共享程度低的问题,结合hadoop框架,提出一种基于ha-doop的土壤数据海量存储平台.为实现该平台,采用HBase+HDFS的方式搭建云存储平台;针对服务器负载均衡问题,提出分区策略和动态负载均衡策略;引入并行化聚类,实现土壤化学特征数据的分类挖掘;最后存储平台进行验证,结果表明平台在性能和聚类结果方案,都表现出优异性能.
Hadoop技术框架 HBase共享 HDFS文件系统 土壤数据