avatar
文章
533
标签
122
分类
88
首页
时间轴
标签
分类
List
  • 音乐
  • 照片
  • 电影
友链
关于
晚上十一点睡觉のBlog03. 数据提取方法-beautifulsoup4 返回首页
搜索
首页
时间轴
标签
分类
List
  • 音乐
  • 照片
  • 电影
友链
关于

03. 数据提取方法-beautifulsoup4

发表于2023-06-08|更新于2026-10-04|PythonPython爬虫和JS逆向
|总字数:9|阅读时长:1分钟|浏览量:|评论数:
文章作者: 晚上十一点睡觉
文章链接: https://11pmsleep.gungnir.top/posts/60105/
版权声明: 本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 晚上十一点睡觉のBlog!
Python爬虫私密笔记数据提取
cover of previous post
上一篇
03. 数据提取方法-xpath
xpath 数据提取详解:路径表达式与节点定位语法、position/last() 索引、contains 等常用函数,lxml 解析与 tostring 排错,「先分组再提取」实战模式,附豆瓣 Top250 练习。
cover of next post
下一篇
9. 迭代器
Python 迭代器详解:可迭代对象与迭代器的区别,iter/next 与 StopIteration,自定义 __iter__/__next__ 实现迭代器,for 循环的本质及学生系统遍历练习。
相关推荐
cover
2023-06-08
03. 数据提取方法-xml和json数据
json 与 xml 数据提取:json 模块四方法与 ensure_ascii 中文处理,从杂乱响应中定位数据字段的思路,xml.etree 解析与 XPath 表达式查询的常用 API。
cover
2023-01-15
03-数据提取方法
爬虫数据提取总览:结构化与非结构化数据的分类及对应解析方式,静态与动态加载数据的判断方法,用开发者工具 Fetch/XHR 定位数据接口的技巧,及 xpath、bs4、正则三种提取方式的性能对比与选型建议。
cover
2023-06-08
03. 数据提取方法-xpath
xpath 数据提取详解:路径表达式与节点定位语法、position/last() 索引、contains 等常用函数,lxml 解析与 tostring 排错,「先分组再提取」实战模式,附豆瓣 Top250 练习。
cover
2023-06-08
03. 数据提取方法-正则表达式
正则表达式系统教程:match/search/findall/sub 五大方法对比,贪婪与非贪婪、分组引用与命名分组、re.S 修饰符,附邮箱、手机号、IP 等常用正则速查与提取 csrfToken 实战。
cover
2023-04-22
爬虫项目部署
爬虫项目部署实战:crontab 定时任务与 scp 上传,scrapyd 部署 Scrapy 全流程(配置与 API 调试),Gerapy 图形化管理,websocket/webhook 实时采集方案及 pythonw 后台运行。
cover
2023-03-14
22-JavaScript混淆技术-入门+ob混淆
JS 混淆技术入门与 ob 混淆详解:压缩、混淆、加密的区别与十大混淆手段,obfuscator 代码的四段式结构与识别特征,极简壁纸等混淆站实战,附 decodeObfuscator 一键还原工具。

评论
avatar
晚上十一点睡觉
个人学习日志,学习领域:网络安全和Python爬虫。近一年blog更新至语雀,等有时间再推送至此,后续blog会以全新版本进行发布
文章
533
标签
122
分类
88
Follow Me
公告
stay passionate and never say die
目录
  1. 1. BeautifulSoup4的学习
    1. 1.1. CSS 选择器:BeautifulSoup4的介绍和安装
      1. 1.1.1. bs4的基本使用示例:
      2. 1.1.2. 注意:指定解析器的问题
    2. 1.2. 搜索文档树
      1. 1.2.1. findall()
        1. 1.2.1.1. name 参数
          1. 1.2.1.1.1. 传字符串
          2. 1.2.1.1.2. 传正则表达式
          3. 1.2.1.1.3. 传列表
        2. 1.2.1.2. attrs 参数
        3. 1.2.1.3. recursive 参数
        4. 1.2.1.4. class_参数
      2. 1.2.2. find()
      3. 1.2.3. CSS选择器
        1. 1.2.3.1. 通过标签选择器查找
        2. 1.2.3.2. 通过类选择器查找
        3. 1.2.3.3. 通过 id 选择器查找
        4. 1.2.3.4. 层级选择器 查找
        5. 1.2.3.5. 通过属性选择器查找
        6. 1.2.3.6. 通过伪类选择器 选择
      4. 1.2.4. 获取文本内容: get_text()
      5. 1.2.5. 获取属性内容: get('属性的名字')
    3. 1.3. 案例
  2. 2. refer
最新文章
集团流量链路
集团流量链路2026-10-04
6-小红书环境一致性风控与逐项排查实战
6-小红书环境一致性风控与逐项排查实战2026-10-04
4-小红书签名体系与风控实战
4-小红书签名体系与风控实战2026-10-04
Linux-Shell脚本学习
Linux-Shell脚本学习2026-10-04
Linux-Kali配置与使用
Linux-Kali配置与使用2026-10-04
© 2022 - 2026 By 晚上十一点睡觉
Welcome to 11pmsleep's blog ~~~ Blog仅供个人记录笔记学习所用,若有侵权,联系我删除~若有错误,也望诸君不吝指正
搜索
数据加载中