超级会员免费看
本文介绍了Python库Beautiful Soup的使用，包括其基本概念、数据解析流程和主要功能。通过实例展示了如何进行标签定位和内容提取，如find、findall和选择器定位。此外，还提供了小说和代理信息爬取的案例应用，展示Beautiful Soup在实际数据抓取中的应用。
Beautiful Soup
1.bs4介绍
Beautiful Soup 提供一些简单的、python 式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多少代码就可以写出一个完整的应用程序。 Beautiful Soup 自动将输入文档转换为 Unicode 编码，输出文档转换为 utf-8 编码。你不需要考虑编码方式，除非文档没有指定一个编码方式，这时，Beautiful Soup 就不能自动识别编码方式了。然后，你仅仅需要说明一下原始编码方式就可以了。 Beautiful Soup 已成为和 lxml、html6lib 一样出色的 python 解释器，为用户灵活地提供不同的解析策略或强劲的速度。
- 环境安装：
pip install bs4
2.bs4数据解析的流程
-
1.实例化一个BeautifulSoup的对象，然后把即将被解析的页面源码数据加载到该对象中
- BeautifulSoup(fp,‘lxml’):fp
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
