02 练习爬取网上书店

最新推荐文章于 2025-03-01 23:26:15 发布

KeepChasing1

最新推荐文章于 2025-03-01 23:26:15 发布

阅读量2.1k

点赞数 3

CC 4.0 BY-SA版权

分类专栏： # 风变编程_爬虫精进

本文链接：https://blog.csdn.net/qq_40678779/article/details/107095613

本文介绍了如何使用Python进行网络爬虫，以获取网上书店的数据。从解析HTML到使用requests库发送HTTP请求，再到数据存储，详细讲解了爬取网上书店信息的步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

# Author:Nimo_Ding

'''
第一个练习：
题目要求：
你需要爬取的是网上书店Books to Scrape中所有书的分类类型，并且将它们打印出来。
它的位置就在网页的左侧，如：Travel，Mystery，Historical Fiction…等。
http://books.toscrape.com/
'''

import requests
from bs4 import BeautifulSoup
html=requests.get('http://books.toscrape.com/')
soup=BeautifulSoup(html.text,'html.parser')
# for i in soup.find_all('ul',class_='nav nav-list'):
#     a=i.find('li').find('ul').find_all('li')
#     for i in a:
#         print(i.find('a').text.replace(' ','').replace('\n',''))
#         print(i.find('a').text.strip())


# 其实不用写这么多步骤,直接取text即可：
for i in soup.find_all('ul',class_='nav nav-list'):
    # print(i.text.replace(' ','').replace('\n\n\n\n\n\n\n','\n'))
    print(i.text.strip())


'''
第二个练习：
题目要求：
你需要爬取的是网上书店Books to ScrapeTravel这类书中，
所有书的书名、评分、价格三种信息，并且打印提取到的信息。
http://books.toscrape.com/catalogue/category/books/travel_2/index.html
'''

import requests
from bs4 import BeautifulSoup
html=requests.get('http://books.toscrape.com/')
soup=