快手评论区爬取不完全

[Badwoman716]

🔍 问题检查清单

• 我已经仔细阅读了项目使用过程中的常见问题汇总
• 我已经搜索并查看了已关闭的issues
• 我确认这不是由于滑块验证码、Cookie过期、Cookie提取错误、平台风控等常见原因导致的问题

🐛 问题描述

📝 复现步骤

快手爬虫，评论区爬取不完全，会出现EST API V2 error

1. PLATFORM = "ks" # Platform, xhs | dy | ks | bili | wb | tieba | zhihu

2. Control the number of crawled videos/posts

CRAWLER_MAX_NOTES_COUNT = 500
3. # Control the number of crawled first-level comments (single video/post)
CRAWLER_MAX_COMMENTS_COUNT_SINGLENOTES = 1000

💻 运行环境

• 操作系统:
• Python版本: 3.10
• 是否使用IP代理: 是
• 是否使用VPN翻墙软件：是
• 目标平台(抖音/小红书/微博等): 快手

📋 错误日志

在此粘贴错误日志

2026-03-09 22:05:51 MediaCrawler ERROR (core.py:284) - [KuaishouCrawler.get_comments] get video_id: 3xe2e9fheibixs6 comment error: REST API V2 error: {'result': 2, 'error_msg': None, 'request_id': '773065155769196843'}
2026

📷 错误截图

[dosubot]

Hi @Badwoman716! I'm Dosu and I’m helping the MediaCrawler team.

这个 REST API V2 error: {'result': 2} 错误是快手平台的反爬/限流机制触发的。在代码中，result code 1 表示成功，其他值（包括2）都会触发错误。

代码已经实现了自动恢复机制：遇到错误时会取消任务、等待20秒、刷新页面并更新cookie。

建议尝试：

1. 降低爬取频率 - 你设置的 CRAWLER_MAX_COMMENTS_COUNT_SINGLENOTES = 1000 较高，可能触发限流
2. 更换账号 - 当前账号可能被临时限制
3. 更新代码到最新版本 - 快手API处理经常更新
4. 手动刷新cookie - 删除浏览器数据重新登录

这个错误通常是间歇性的，代码会自动尝试恢复，但如果频繁出现可能需要降低爬取量或更换账号。

To reply, just mention @dosu.

---

^{How did I do? Good | Irrelevant | Incorrect | Verbose | Hallucination | Report 🐛 | Other}

  

[Badwoman716]

是的，爬取的时候爬的太快也不行，我已经把间隔时间改为10s，已经可以全部爬取了