Python实战应用笔记
程序猿
|
人工智能/机器学习/数据分析
在干中学，记录自己的实战经验，做他山之石
获得徽章 0
- 如何建设自己的分析数据库？
一、国家统计局、相关部委、行业数据网站（免费）
1、国家统计局推出的“国家数据”是目前最权威、经济数据较全的数据来源，更重要是免费的：
data.stats.gov.cn
宏观和行业研究分析必备的神器，重点收藏。
2、产业在线数据，能够找到全球和中国部分产业的数据，虽说行业数有限，不过也是免费的，就不高要求了：
data.chinaiol.com
3、住建部统计信息，能找到《2018年城市建设统计年鉴》和《2018年城乡建设统计年鉴》，更新有点慢，不过能够直接下载，而且文件格式是EXCEL形式的，可以使用Python直接分析：
www.mohurd.gov.cn
二、其他行业网站（非免费）
1、数据堂，这是专业人工智能数据网站，从AI数据分析角度看数据比较精准，实用性高，唯一缺陷非免费的：
www.datatang.com
2、做房地产行业分析的选择中指数据或者克而瑞数据都是不错的选择，同样是要花钱的，如果能找关系要到试用账号最好：
creis.fang.com
3、国云数据，大部分是免费的，根据自己需要选择，魔镜是免费的大数据可视化分析平台
www.data-god.com
三、定制爬虫和利用第三方数据库
1、Python中善用定制爬虫定期更新数据爬取，利用Numpy、Pandas、Matplotlib或者百度Echarts做好数据分析和数据可视化。
2、我们第一篇文章说到的Tushare pro，对证券分析的同学来说是非常棒的一个数据库，Wind很好，但毕竟是收费的嘛。
补充一点：如果收集到的数据是海量的，建议使用MongoDB和Redis这两个数据库，其中MongoDB是用来保存大量数据，Redis用于作为缓存和队列保存临时数据，在大数据分析过程中都很有用。展开评论点赞
data.stats.gov.cn