【爬虫】百度迁徙大数据 1——迁入、迁出数据

1.数据简介

必定有很多小伙伴们听说过百度迁移，那末它究竟是什么呢？让我们来看一下来自百度迁移官方机构百度慧眼的诠释：“百度迁移是基于百度舆图开放平台地理位购置事停止计较分析得来，该项目由百度舆图采用创新的可视化显现方式，在业界初次全程、静态、立即、直观地展现出中国春节前后生齿大迁移的轨迹与特征。在春节迁移项目中，用户可以直观地领会到各个城市之间生齿短期活动情况。”

百度迁移的网址为：http://qianxi.baidu.com/

2.数据来历

领会了百度迁移的界面后，你能否会发生这样的疑问：这个数据来历于那里呢？真的牢靠么？

按照百度慧眼的说明，百度迁移数据来历是百度舆图开放平台海量的定位办事数据（LBS：基于位置的办事），也就是来历于一切挑选利用百度基于地理位置API办事的软件。

官方显现，百度舆图开放平台定位办事是广大开辟者首选办事。从开辟者角度，百度舆图开放平台开辟者数目跨越165万，开辟者市场占有率为75%，为跨越65万活跃App及网站供给办事；从用户角度，百度定位办事天天响应全球位购置事请求跨越1200亿次，这个庞大的位置请求数据是迁移数据的根本。

因而可知，百度迁移的数据根本非常薄弱牢靠，可以算是大数据具有代表性的项目之一。

3. 迁入、迁出指数

结果展现

我们把获得的数据存成一个xls格式，由于csv换列不太方便（我不会）所以我挑选了xls。这张图里表是某城市一月、仲春一共两个月的迁出数据，左侧第一列是一切城市的编码（身份证前6位，这也和url要求的编码一样），左侧第二列是一切城市的称号，第一行是日期。然后为了让列位看官看到像百度迁移网站那样的前一百名排序，我就特地址了排序截了一张图（1月1日排序）以下。（这两个是同一个表）

4. 数据获得

今朝我们支持城市级、省级、全国的迁入迁出数据爬取办事，具体需要的时候段和城市/省份可联系文末客服定制。有python根本的用户也可间接获得背景经调试间接可用的爬取剧本（有偿），从而自在爬取肆意所需城市/省份的数据.PS：会收取一些手工费，但可以保证的是，价格绝对低于某些平台的价格。