BigDataSalaryAnaliySystem:大数据招聘信息分析平台 源码
##大数据招聘信息分析平台##这是依据爬取程序,爬取到的招聘信息进行各维度的分析并展现最终结果的平台 ###平台环境### Centos 7 Hadoop-2.5.1 动物园管理员3.4.6 HBase-1.1.2 蜂巢1.2.1 MySQL的5.6 的Python 3.5 JDK 1.8 建造过程可参考: ###平台项目结构### 爬取项目(爬虫),使用Python编写 加载数据到HBase数据库项目,使用Java编写 Web端展现项目,使用Java编写 ###各项目功能### 1.爬取项目 定时爬取指定连接的内容,加入所爬取到的内容保存到指定文件夹中 调用加载到HBase数据库的项目(Jar),使数据加载到HBase中 2.加载数据到HBase数据库项目 读取指定目录下的文件,分析其中的内容并保存到HBase中 多线程加载 3.Web端展现项目 图形化展现分析数据后的
下载地址
用户评论