[简单找房] 自动爬取豆瓣房源，时隔半年大幅更新

tomxin7 · 2019-08-06T11:47:29Z

网站地址 http://house.jiandan.live 去年 12 月份，准备换一套离公司更近的房间，突发奇想写了“简单找房”这个网站，得到了很多同学的支持，期间也没有怎么宣传，断断续续服务了几千位同学，用户不算多。之前无论是用邮件还是第三方微信推送服务，稳定性和体验都不是很好，没有完全的达到简单的称号。索性自己申请了一个服务号，现在只需要简单 4 步就可以添加一个找房任务。豆瓣租房还有一个问题是中介和虚假信息实在太多了，所以近期还加上了过滤规则，可以有效的过滤大部分的无效信息。运行原理（开局一张图，其他全靠编）更新内容：独立微信推送服务号，使用起来更便捷新增房源过滤规则，过滤大部分虚假房源优化爬虫服务过滤规则：同一 ID 大量刷帖会被过滤同一帖子回复过多，目前过滤回应数大于 5 的帖子不同 ID 发布相同内容的帖子会被过滤人工维护房源 /ID 黑名单会被过滤用户投诉达到一定次数的帖子和 ID 会被过滤技术选型：前端：Amaze UI 后端：Java8、SpringBoot、SpringData 爬虫：Python 3.6 后话：等有时间想把微博给适配一下如果需要添加城市或者想交流的朋友，欢迎添加我的微信。

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

爱意满满的作品展示区。

This topic created in 2456 days ago, the information mentioned may be changed or developed.

网站地址

http://house.jiandan.live

去年 12 月份，准备换一套离公司更近的房间，突发奇想写了“简单找房”这个网站，得到了很多同学的支持，期间也没有怎么宣传，断断续续服务了几千位同学，用户不算多。
之前无论是用邮件还是第三方微信推送服务，稳定性和体验都不是很好，没有完全的达到简单的称号。索性自己申请了一个服务号，现在只需要简单 4 步就可以添加一个找房任务。豆瓣租房还有一个问题是中介和虚假信息实在太多了，所以近期还加上了过滤规则，可以有效的过滤大部分的无效信息。