9. 爬虫-测试点及验证网站是否存活并获取网站指纹
本博客所有文章除特别声明外，均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 晚上十一点睡觉のBlog！
相关推荐
2023-05-28
2. 爬虫-根据域名获取企业备案所有域名
自动化 SRC 之备案域名扩展：用站长之家 SEO 综合查询获取域名备案号与企业名称，再按备案号反查同主体全部注册域名的三步爬取实现。
2023-05-28
3. 爬虫-获取高权重网站
自动化 SRC 之高权重网站获取：以爱站百度/谷歌权重为收录依据，从网站排行榜与爱企查企业信息两条途径批量抓取高权重站点的爬虫实现。
2023-05-28
4. 爬虫-从大量域名中找出符合条件的目标
自动化 SRC 之目标筛选：对海量域名批量查询爱站权重（百度≥1 谷歌≥3）是否达标，站长之家补齐备案信息，按资产类型过滤个人站的两步流程。
2023-05-28
爬虫-补天注册厂商域名获取
自动化 SRC 系列开篇：补天漏洞平台的收录标准与注册厂商列表获取思路，注册厂商不限权重、证明归属即可收录，为后续批量收集域名资产打基础。
2023-05-28
6. 爬虫-借助第三方工具实现子域名枚举
自动化 SRC 之子域名枚举：第三方平台查询、DNS 字典暴力枚举等主流子域名收集方法，含 rapiddns 与 OneForAll 集成平台的利用思路。
2023-05-28
5. 爬虫-被动子域名信息收集快速获取
自动化 SRC 之被动子域名收集：面对十几万目标域名，放弃 oneforall 等逐个枚举的低效路线，用多线程快速拉取被动子域名数据的实现思路。
评论
