基于Hadoop平台的OLAP煤炭销售数据分析系统
来源期刊:工矿自动化2012年第11期
论文作者:聂瑞 卢建军 卫晨
文章页码:77 - 80
关键词:煤炭销售;Hadoop平台;OLAP技术;云计算;数据挖掘;数据仓库;
摘 要:针对煤炭销售数据量大而信息量少的问题,开发了基于Hadoop平台的OLAP煤炭销售数据分析系统,介绍了系统设计思想及架构,并以销售量统计为例阐述了实现数据深层次快速挖掘和直观显示的具体过程。该系统利用Hadoop云平台对数据进行ETL处理,创建Hive分布式数据仓库,并采用Hive的HQL语言进行OLAP统计分析,能够快速、准确地实现对销售量信息的多层次、多角度、深层次的数据挖掘、统计和分析,并直观、多角度地反映数据分析结果。
聂瑞1,卢建军1,卫晨2
1. 西安邮电大学通信与信息工程学院2. 西安邮电大学管理工程学院
摘 要:针对煤炭销售数据量大而信息量少的问题,开发了基于Hadoop平台的OLAP煤炭销售数据分析系统,介绍了系统设计思想及架构,并以销售量统计为例阐述了实现数据深层次快速挖掘和直观显示的具体过程。该系统利用Hadoop云平台对数据进行ETL处理,创建Hive分布式数据仓库,并采用Hive的HQL语言进行OLAP统计分析,能够快速、准确地实现对销售量信息的多层次、多角度、深层次的数据挖掘、统计和分析,并直观、多角度地反映数据分析结果。
关键词:煤炭销售;Hadoop平台;OLAP技术;云计算;数据挖掘;数据仓库;