python 爬取 jsonp 请求的响应数据

### 如何使用 Python 爬取 QQ 音乐数据 要实现通过 Python 抓取 QQ 音乐的数据，可以按照以下方法操作： #### 1. 数据获取方式 QQ 音乐通常会提供 API 接口用于前端页面加载所需的内容。这些接口可以通过浏览器开发者工具中的 **Network** 标签找到。当访问某个歌曲或者歌单详情页时，观察请求记录即可发现对应的 XHR 请求地址[^1]。 对于 JSON 格式的响应内容，在 Python 中可以直接利用 `requests` 库发送 HTTP 请求，并借助内置模块 `json.loads()` 将其解析为字典结构以便进一步处理[^2]。 ```python import requests def fetch_music_data(url, params=None): headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36' } response = requests.get(url=url, params=params, headers=headers) if response.status_code == 200: try: data = response.json() # 解析JSON格式返回值 return data except Exception as e: print(f"Error occurred while parsing json: {e}") return None else: print(f"Failed to retrieve data with status code {response.status_code}.") return None ``` #### 2. 处理评论数据 如果目标是从特定 URL 获取某首歌曲下的用户评论，则可以根据已知的参数模板构建完整的 GET 请求链接[^3]。下面是一个简单的例子展示如何分页读取指定数量的评论条目： ```python base_url = "https://c.y.qq.com/base/fcgi-bin/fcg_global_comment_h5.fcg" params_template = { 'g_tk': '2058499274', 'jsonpCallback': 'jsoncallback06927647062927766', 'loginUin': '2230661779', 'hostUin': '0', 'format': 'jsonp', 'inCharset': 'utf8', 'outCharset': 'GB2312', 'notice': '0', 'platform': 'yqq', 'needNewCode': '0', 'cid': '205360772', 'reqtype': '2', 'biztype': '1', 'topid': '{song_id}', # 替换为目标歌曲ID 'cmd': '8', 'needmusiccrit': '0', 'pagenum': '{page_num}', 'pagesize': '25', # 每次最多拉取25条评论 } all_comments = [] for i in range(10): # 假设只抓取前10页 current_params = dict(params_template) current_params['pagenum'] = str(i) result = fetch_music_data(base_url, current_params) comments_list = result.get('comment').get('list') all_comments.extend(comments_list or []) print(len(all_comments), "comments collected.") ``` 以上脚本实现了基本功能框架，实际应用过程中还需要注意异常情况以及可能存在的反爬机制等问题。 --- ####