二手房网站大数据分析系统的设计

张 标枫, 张 桂花
四川大学锦城学院计算机与软件学院

摘要

随着社会的发展，房子对大家越来越重要，其中二手房是最活跃的，可以在短时间内满足人们的住房要求，不同的楼层，户型，小区，地理位置决定了房价的单价，而这些都随着社会的各种情况而改变，房价的走势依然是是大家关注的焦点。为了能够简单直接地看到房价的变化，本文运用JavaEE的ssm框架结合hadoop的hdfs+hive+sqoop+mysql搭建了一个大数据分析系统，实现了对二手房信息的管理，并利用python技术对各大二手房网站的房屋信息进行爬取，对各种影响房屋价格的因素做了可视化分析。

关键词

大数据分析；管理系统；ssm框架；python；hive；sqoop

参考

[1]Tom White. 华东师范大学数据科学与工程学院译 .Hadoop 权 威指南（第 3 版）（修订版）. 北京：清华大学出版社 ,2015.

[2] 黑马程序员 . Java EE 企业级应用开发教程 [M]. 北京 : 人民邮电出版社 ,2017.

[3] 杨开振 , 周吉文 , 梁华辉 , 谭茂华 . Java EE 互联网轻量级框 架整合开发 SSM 框架 [M]. 北京 : 电子工业出版社 .2017.

[4] 张良均 . Hadoop 大数据开发基础 [M]. 人民邮电出版社 ,2018. [5] Edward Capriolo.Hive 编程指南 [M]. 北京:人民邮电出版社 ,2013.