数据来源
- 安居客
- Q房网
- 搜房网
- 链家网
执行脚本build.sh
创建client.cnf, 写入
[client]
port = 3306
socket = /var/run/mysqld/mysqld.sock
host = localhost
user = root
password = 'your password'
保存到MySQL配置文件夹下的conf.d子文件夹中,例如对于Ubuntu,配置文件夹一般为/etc/mysql
编译安装Qt5.7+
进入MySQLClient子文件夹,解压mysql.tar.gz至本地目录,得到mysql connector c++ SDK,将mysql/lib下的文件复制到/usr/local/lib即可
以anjuke工程为例,
- anjuke_run.py 数据抓取脚本
- anjuke_data_compress.py 数据压缩脚本
- anjuke_data_store.py 数据存储脚本(存入MySQL数据库)
- anjuke_data_analysis.py 数据分析脚本(运用机器学习方法,待开发)