ChannelSeries合集经常会出现报错，有时候可以抓出来有时候则不行（代码无改动的情况下），是否是和B站那边有关系？

[TimG233]

我是想抓取B站UP主的合集（新旧合集都试过了，ChannelType也对应的），但是有时候能抓出来，有的时候会在初始化ChannelSeries类的时候报错，初始化代码如下

# 如果是新合集
cs = channel_series.ChannelSeries(
    uid=user_id,
    type_=channel_series.ChannelSeriesType.SEASON,
    id_=sid
)

相关报错如下

  ...
  File "example.py", line ..., in bilibili_channel_series_extraction
    cs = channel_series.ChannelSeries(
         ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
  File "...\venv\Lib\site-packages\bilibili_api\channel_series.py", line 90, in __init__
    resp = json.loads(httpx.get(api["url"], params=params).text)["data"]
           ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~^^^^^^^^
KeyError: 'data'

下面这部分是我个人问题，剪裁网址剪得不对，库本身没问题 有时候能获取到所有合集视频的aid，然后我想获取第一个视频aid的具体分P信息的时候，会出现-400的报错，示例如下

aids = [123456789, ...]  # 如果ChannelSeries初始化成功，并且通过get_videos()拿到了所有aid(s)
v = video.Video(aid=aids[0])
pages = await v.get_pages()

pages这一行就会报错，会显示接口返回错误代码-400，这个很奇怪，因为我之前去检查单独一个视频的分P通过这种代码是可以的，不知道这个为什么会报400？具体相关报错如下

Traceback (most recent call last):
  ...
  File "example.py", line ..., in bilibili_extraction
    pages = await v.get_pages()
            ^^^^^^^^^^^^^^^^^^^
  File "...\venv\Lib\site-packages\bilibili_api\video.py", line 289, in get_pages
    return await request("GET", url, params=params, credential=self.credential)
           ^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
  File "...\venv\Lib\site-packages\bilibili_api\utils\network_httpx.py", line 530, in request
    raise ResponseCodeException(code, msg, resp_data)
bilibili_api.exceptions.ResponseCodeException.ResponseCodeException: 接口返回错误代码：-400，信息：请求错误。
{'code': -400, 'message': '请求错误', 'ttl': 1}

有时候可以，有时候不行，代码还没有变，令我非常困惑。而且这个和Credential有任何关系吗？因为我在测试中没有credential也可以抓到。我目前使用的例子为https://space.bilibili.com/698029620/channel/collectiondetail?sid=1242206，为新合集(collectiondetail)，旧合集则是(seriesdetail)，uid是698029620，sid是1242206。

任何建议和解答都欢迎！十分感谢！

[z0z0r4]

这个我周末看看，需要测试

[TimG233]

补充一些信息，希望有所帮助。根据现在16.1.1版本的库json里的api，比如这个关于SEASON的，我会有概率得到两种response

• API: https://api.bilibili.com/x/space/fav/season/list?season_id=1242238
• 正常返回：{'code': 0, 'message': '0', 'ttl': 1, 'data': ...}
• 非正常返回：{'code': -412, 'message': 'request was banned', 'ttl': 1}
  代码无变化，都是不添加Credential，且不可能触发ratelimit（因为一共就2分钟试了6,7次）但是返回的结果确实上面两种混着来的，没有先后顺序这一说。

[z0z0r4]

-412 绝对是拦截了，但我不记得这个接口在网页端的哪里，可能是有新增的风控参数之类

没看到下面

[z0z0r4]

提个issue贴上相关信息吧，这算bug大概

[TimG233]

哦？我似乎发现了问题所在，我们似乎需要给ChannelSeries初始化里api请求加一个ua的请求头

bilibili-api/bilibili_api/channel_series.py

Line 90 in 11c33b1

resp = json.loads(httpx.get(api["url"], params=params).text)["data"]

比如这样

headers={"User-Agent": "Mozilla/5.0"}
resp = json.loads(httpx.get(api["url"], headers=headers, params=params).text)['data']

加了之后，我跑了一下，发现不会再出现上述的非正常返回（被服务器拒绝）的情况。但我只跑了50次（无报错），我怕B站给我风控了哈哈哈。但比之前那种50%/50%的情况好多了。如果你可以测试一下证实的话最好了，如果需要我PR的话我也可以顺手弄了。

至于为什么不加ua他会一会儿好一会儿不好，我也不是很清楚，我不知道这是不是和B站服务器端的缓存有任何关系导致的，如果你知道这个就更好了！感谢

[z0z0r4]

那就是少加 UA 了，如果可以的话麻烦提交个 pr 我去合并

关于风控原因有很多，比如

此接口请求头中UA值存在python字串，会返回-412错误

[TimG233]

这边commit的时候本地pre-commit check显示如下

************* Module bilibili_api.video_uploader
bilibili_api\video_uploader.py:107:0: E0102: class already defined line 52 (function-redefined)
bilibili_api\video_uploader.py:857:14: E1121: Too many positional arguments for staticmethod call (too-many-function-args)
bilibili_api\video_uploader.py:863:31: E1136: Value 'preupload' is unsubscriptable (unsubscriptable-object)
bilibili_api\video_uploader.py:872:28: E1136: Value 'preupload' is unsubscriptable (unsubscriptable-object)
bilibili_api\video_uploader.py:873:26: E1136: Value 'preupload' is unsubscriptable (unsubscriptable-object)
bilibili_api\video_uploader.py:886:8: E1137: 'preupload' does not support item assignment (unsupported-assignment-operation)
bilibili_api\video_uploader.py:1179:14: E1121: Too many positional arguments for staticmethod call (too-many-function-args)
bilibili_api\video_uploader.py:1277:14: E1121: Too many positional arguments for staticmethod call (too-many-function-args)
bilibili_api\video_uploader.py:1544:33: E1134: Non-mapping value params is used in a mapping context (not-a-mapping)
Please check above problems of your code before commit!

这个video_uploader里的需要我也顺便改一下吗？还是说我抓的版本有问题，我是按照contributing文档步骤来的

[z0z0r4]

这个多半是我重构的时候搞砸了啥，我现在没法处理...抱歉

如果你愿意改的话最好将pr分开，单独提交

[TimG233]

如果我单独提交的话，另一个的pre-commit check还是过不了，我应该只能保持同一个branch（改过的基础上）提交关于这个的修复

[z0z0r4]

我压根没开 git hook 不清楚...关了也行吧.jpg

实在不行我放假来修...