基于Hadoop的Apriori算法与实现
来源期刊:桂林理工大学学报2014年第3期
论文作者:孙赵旭 谢晓兰 周国清 倪金生 胡莘
文章页码:584 - 588
关键词:数据挖掘;云计算;Hadoop;Hbase;MapReduce;Apriori;
摘 要:针对传统Aprion数据挖掘算法平台的硬件瓶颈以及算法运算耗时、需要重复扫描数据库等缺点,提出了一种基于Hadoop平台应用MapReduce模型与Hbase,对Apriori进行云端的迁移和优化的算法,并与其他的改进Apriori算法进行了分析与比较。实验结果表明:新的云端算法降低了时间复杂度,使其可以更好的进行数据处理。
孙赵旭1,谢晓兰1,2,周国清2,倪金生2,胡莘2
1. 桂林理工大学信息科学与工程学院2. 桂林理工大学广西空间信息与测绘重点实验室
摘 要:针对传统Aprion数据挖掘算法平台的硬件瓶颈以及算法运算耗时、需要重复扫描数据库等缺点,提出了一种基于Hadoop平台应用MapReduce模型与Hbase,对Apriori进行云端的迁移和优化的算法,并与其他的改进Apriori算法进行了分析与比较。实验结果表明:新的云端算法降低了时间复杂度,使其可以更好的进行数据处理。
关键词:数据挖掘;云计算;Hadoop;Hbase;MapReduce;Apriori;