mirror of
https://github.com/NanmiCoder/MediaCrawler.git
synced 2026-09-15 14:17:54 +08:00
d594c20c13
xhs: PR #958 把 IPBlockError / PlatformAccessError 加入 request() 的 retry_if_not_exception_type 后，tenacity 会直接重抛原异常而不再包装成 RetryError，core 层的 except 分支接不住，单条笔记被限流会让整批 asyncio.gather 抛出，同批已抓取但未入库的数据全部丢失。 - get_note_detail_async_task / get_creators_and_notes 捕获访问受限异常， 记录明确日志后跳过当前条目，恢复原有的"跳过并继续"语义 - 移除 request() 中已不可达的 IP_ERROR_CODE 分支 bilibili: 修复 get_video_all_comments 的两处翻页边界问题 - is_first_page 改为独立标志，接口返回 next=0 且 is_end=False 时 不再把后续页误判为首页而重复注入置顶评论 - result 无条件累加，否则开启楼中楼抓取时循环守卫永不推进， max_count 完全失效并可能死循环；截断提前到抓取楼中楼之前， 避免为已被丢弃的评论抓子评论