利用av号爬取Bilibili视频弹幕

最新推荐文章于 2025-05-06 14:34:09 发布

coca丶丶

最新推荐文章于 2025-05-06 14:34:09 发布

阅读量1.5k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： Python

本文链接：https://blog.csdn.net/wangctes/article/details/103409320

本文详细讲解如何通过av号来抓取Bilibili视频的弹幕数据，涉及网络请求、解析XML和数据存储等技术，帮助你了解视频网站的数据获取过程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

#bilibili弹幕抓取
import requests
import re
from bs4 import BeautifulSoup
import operator#排序
 
def getHTMLText(url):
    try:
        print("获取url中...")
        headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.62 Safari/537.36'}
        r = requests.get(url,headers=headers)
        print("获取url完成")
        return r.text
    except:
        print("获取Url失败")
        
def parsePage(text):
    try:
        print("解析文本...")
        keyStr = re.findall(r'upgcxcode/78/39/[\d]*',text)#B站有两种寻址方式，第二种多一些
        key = eval(keyStr[0].split('/')[3])
        print(key)
        commentUrl = 'https://api.bilibili.com/x/v1/dm/list.so?oid=' + str(key)  # 弹幕存储地址
        res=requests.get(commentUrl)
        res.encoding = 'utf-8'
        commentText=res.text
        soup = BeautifulSoup(commentText, "html.parser")
        soup2=BeautifulSoup(text,"html.parser")
        commentList={}
        title=soup2.find('h1').