如何爬取在去哪儿网等网站上的机票数据?

如何爬取在去哪儿网等网站上的机票数据?

参考:

机票数据是一种实时性要求很高的网络数据,同时机票采集数据的用途也很多,数据采集的量也会相应增加。

机票数据采集系统的核心目的是通过采集[去哪儿]数据源的机票实时价格信息,动态分析出需要的价格内容,并上传到[携程API]。以下的内容是针对机票数据采集系统策划方案的详细介绍。

1. 采集去哪儿数据(多线程实时采集)

2. 大数据平台管理系统实现

3. 开发携程API接口,上传数据