如何租到靠谱的房子?Scrapy爬虫帮你一网打尽各平台租房信息!

  1. 云栖社区>
  2. 大数据文摘>
  3. 博客>
  4. 正文

如何租到靠谱的房子?Scrapy爬虫帮你一网打尽各平台租房信息!

技术小能手 2018-05-31 14:01:05 浏览2534
展开阅读全文

又是一年n度的找房高峰期,各种租赁信息眼花缭乱,如何快速、高效的找到靠谱的房子呢?

不堪忍受各个租房网站缭乱的信息,一位技术咖小哥哥最近开发了一个基于 Scrapy 的爬虫项目,聚合了来自豆瓣,链家,58 同城等上百个城市的租房信息,统一集中搜索感兴趣的租房信息,还突破了部分网站鸡肋的搜索功能。

通过这个“秘密武器”,这位技术咖已经使用该爬虫找到合适的住所。

不仅如此,还很无私地整理了项目代码,并放上了Github。

Github链接:

https://github.com/kezhenxu94/house-renting

接下来,跟着文摘菌一起来看看这波酷炫的操作。

环境部署

Python版本:Python 2 || Python 3

爬虫框架:Scrapy

操作系统:Mac || Linux || Windows

服务引擎:Docker

获取源码

$

网友评论

登录后评论
0/500
评论
技术小能手
+ 关注
所属团队号: 大数据文摘