分类
大小:4.7M更新:2020-07-06
类别:浏览辅助系统:WinAll
豆瓣租房小组爬虫是一款能够帮助中介或者找房源的用户快速找到适合自己的房源的软件,很多在豆瓣租房小组找房的用户面对琳琅满目的房子不知该如何甄别,利用软件能够快速筛选出适合自己价位的房源,有需要的小伙伴欢迎来西西下载体验。
此爬虫用python开发,基于gevent、pymongo、requests、lxml、Flask。
流程也相对较简单:
配置需要爬取的URL;
配置需要解析的信息元素,用XPATH完成;
配置代理;
配置监控周期、最大页数、并发数等;
运行爬虫,等待抓取,会自动根据配置定时爬取;
启动web服务,在前台搜索、排序等;
一、下载打开软件,首先设置要找的房源的地址。
二、接下来设置理想价位和排除关键词。
三、点击爬取即可获取房源信息,等待软件获取相关关键词房源。
四、利用typora软件打开爬取下来的MD文件即可看到房源信息。
如何设置豆瓣群组链接?
首先搜索某个地区租房,例如:北京租房
点进去要爬取的某个小组,例如第一个:北京租房
将页面拉到最下面有个> 更多小组讨论超链接,点进去
复制地址栏中地址(从/group开始复制到结尾),粘贴到软件设置豆瓣群组链接
有时候粘贴进软件会崩溃,不知道什么原因,建议把软件中原来的链接删除再粘贴进去。
将start=后边的数字50改成%d
完成
如何设置排除关键字?
排除关键字是标题和内容只要出现关键字就会排除掉该条租房信息。
例如默认是限女这个关键字,只要租房信息中包含限女生入住,只限女生等出现限女关键字的一律不爬。
多个关键字用|分隔,注意是英文的。
例如:限女|短租|整租,这三个关键字设置后,只要标题和内容出现这三个关键字软件就不会爬取。
关于识别标题中的价格
使用正则\b\d{4}\b识别标题中的价格信息,无法爬取少于1000元的信息。
关于爬取结果排序
先根据价格从小到大排序,价格相同根据发帖时间排序。
Diigo Web Collector浏览辅助Mv3.3.26 官方版
查看开通好莱坞得会员秒杀话费软件浏览辅助.35MV1.0最新定时版
查看Google Earth Pro32位+64位版浏览辅助Mv7.3.3.7699官方版
查看好莱坞成长值领取工具电脑版浏览辅助.48MV1.0PC最新版
查看蝴蝶识字ocr文字识别浏览辅助Mv1.0 绿色版
查看广告过滤软件Proxydomo浏览辅助Mv1.107 最新版
查看神箭手浏览辅助M2.2.1官方版
查看唯一淘宝无线链接转换工具浏览辅助.72MV1.0绿色版
查看福建教育学院刷课浏览辅助.41M
查看芝士超人刷复活卡软件浏览辅助M
查看小葫芦熊猫tv弹幕点歌插件浏览辅助M3.2.2最新版
查看乐心刷步PC浏览辅助.62MV2.0电脑版
查看[箫启灵]淘礼金辅助程序[指定优惠券+重置任意淘礼金口令]浏览辅助MV3.0最新版
查看二逼百度贴吧助手浏览辅助M3.8.1绿色版
查看小度掌柜电脑版浏览辅助Mv4.1.0 官方最新版
查看极客斗鱼账号注册机浏览辅助.94Mv1.0 绿色版
查看叮叮摩卡浏览辅助M148官方版
查看微软Chromium版Edge浏览器浏览辅助M最新版
查看京东库存监控助手浏览辅助.50Mv1.5 通用版
查看任务栏改色StartIsBack浏览辅助Mv2.7.4 中文修改版
查看云梯扣字骂人软件浏览辅助M1.0.1绿色版
查看大白蛋蛋28算法调用工具浏览辅助MV9.18.9.11点vip最新版
查看会说话的404错误页面浏览辅助.10M
查看旺销王浏览器插件浏览辅助.05M3.0官方版
查看点击查看更多