作者: 大数据观察来源: 大数据观察时间:2017-07-14 18:48:270
之前对江苏省的新浪微博POI数据做了可视化,当时获取的数据量不是很全,后来对全国的数据进行网格化重新获取了无缝隙的数据。
简单说一下我对数据如何处理的:
数据抓取 : NodeJS编写爬虫程序
数据存储: MongoDB (POI经纬度建立球面空间索引)
绘图工具: Node_Canvas
绘制方法: 将海量的POI数据基于像素进行抽希,按照签到次数聚合,最后绘制到画布上。
在线体验版: 在线地址
按照省份对POI数据进行了可视化,得到比较漂亮的可视结果:
永洪科技
致力于打造全球领先的数据技术厂商