标签：group Python 爬虫 爬取 wq print import order

import requests
import re
import csv
wq=1
while(wq<163):

    dat={
        "season_version":"-1",
    "spoken_language_type":"-1",
    "area":"-1",
    "is_finish":"-1",
    "copyright":"-1",
    "season_status":"-1",
    "season_month":"-1",
    "year":"-1",
    "style_id":"-1",
    "order":"4",
    "st":"1",
    "sort":"0",
    "page":f"{wq}",
    "season_type":"1",
    "pagesize":"20",
    "type":"1"
    }
    header={
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.93 Safari/537.36"
    }
    f=open("pingfen.csv",mode="a",encoding="utf-8",newline='')
    csvwriter=csv.writer(f)
    url="https://api.bilibili.com/pgc/season/index/result/#"
    resp=requests.get(url,params=dat,headers=header)
    print(resp.text)
    obj=re.compile(r'"cover":"(?P<photo>.*?)","index_show":"(?P<jishu>.*?)","is_finish.*?ink":"(?P<link>.*?)","media_id.*?order":"(?P<order>.*?)","order_type".*?"title":"(?P<name>.*?)","title_icon"',re.S)
    result=obj.finditer(resp.text)
    wq=wq+1
    for i in result:
        # print(i.group("photo"))
        # print(i.group("jishu"))
        # print(i.group("link"))
        # print(i.group("order"))
        # print(i.group("name"))
        dic = i.groupdict()
        csvwriter.writerow(dic.values())

f.close()
print("over")

# with open("mybaidu.txt",mode="w",encoding="utf-8") as f:
#     f.write(resp.text)
# print("over")

正则表达相关参数：

爬取结果存入文件下

 包含动漫名，图片，链接，综合评分，动画名

网上找的b站数据爬取基本都用不了，爬取不了b站综合评分，就自己学习写了个正则表达，毕设都整完了，这个功能就没加进去，还是时间不够没法学习

标签：group,Python,爬虫,爬取,wq,print,import,order
来源： https://www.cnblogs.com/520520520zl/p/16171581.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。