isheng-eqi

Media Crawler Easy — Development skill for Claude Code

Development community

Claude Code Skill:B站/小红书/抖音/快手/微博/贴吧/知乎 多平台社媒评论采集爬虫.

How to install Media Crawler Easy

This entry records only its repository, not the path inside it, so there is no exact command to give. Open isheng-eqi/media-crawler-easy and copy the folder into ~/.claude/skills/, or the file into ~/.claude/agents/.

What Media Crawler Easy does

Claude Code Skill:B站/小红书/抖音/快手/微博/贴吧/知乎 多平台社媒评论采集爬虫。扫码登录,自动生成 HTML 报告+CSV,支持关键词搜索/指定链接/创作者主页三种模式

Alternatives in Development

  • Agent Of Empires — Manage multiple Claude Code, OpenCode agents from either TUI or Web for easy access on mobile 3.1k ★
  • Portaljs Add Geo — Auto-ingest a geospatial file (GeoJSON, Shapefile, GeoPackage, KML/KMZ, FlatGeobuf, CSV-with-geometry) into a 2.3k ★
  • Boss Zhipin Scraper — Boss直聘爬虫 / BOSS直聘职位数据抓取工具,基于 Chrome CDP 协议复用真实登录态,绕过字体反爬,输出明文薪资 JSON/CSV + 薪资技能分析 1.5k ★

README

media-crawler-easy

在对话里说一句「帮我爬小红书上关于 XX 的笔记评论」,剩下的交给它 —— 环境自检、扫码登录、采集、生成交互式 HTML 报告,全程不用写代码,也不用改配置文件。

Collect comments from seven Chinese social platforms (Bilibili / Xiaohongshu / Douyin / Kuaishou / Weibo / Tieba / Zhihu) inside your coding agent, without writing code.

[![License](https://img.shields.io/github/license/isheng-eqi/media-crawler-easy)](LICENSE) [![Stars](https://img.shields.io/github/stars/isheng-eqi/media-crawler-easy?style=social)](https://github.com/isheng-eqi/media-crawler-easy/stargazers) [![Python](https://img.shields.io/badge/python-3.10%2B-blue)](https://www.python.org/)

为什么存在

社媒评论采集的技术难点早就被解决了,真正耗时间的是它周围的一圈杂事:装环境、改配置、判断二维码有没有弹出来、跑完之后还得自己确认拿到的是数据还是空文件。

上游 MediaCrawler 给的是完整的控制权,代价是每一步都要自己盯着。本项目把其中最高频的一条路径收窄成了对话:

直接使用上游 MediaCrawler 本项目
上手 配置 Python 环境、clone、读文档、手改 base_config.py clone 进 skills 目录,然后在对话里说一句话
配置 手改配置文件,多个参数要改对 Agent 用 3 轮问答问清楚,自己写进配置
卡住时 自己读日志判断卡在哪一步 按日志信号判断:二维码是否弹出、是否登录成功、60 秒无进展即提示检查滑块
产物 CSV,报告要自己接 交互式 HTML 报告 + CSV,开箱即用
确认真的拿到数据 靠人眼核对,空 CSV 常常事后才发现 空 CSV 自动从 JSONL 重建;报告生成后先过 JS 校验,通过才打开

这不是上游的替代品。需要自定义采集流程、代理池、写数据库的场合,用上游;只是想把某个平台的评论拿下来看看的场合,用这个。

快速开始

两步。

第一步,安装。两种方式二选一。

方式 A 作为插件安装(推荐,之后能跟随仓库更新)。在 Claude Code 里执行两条命令:

/plugin marketplace add isheng-eqi/media-crawler-easy
/plugin install media-crawler-easy@media-crawler-easy

方式 B 直接 clone 到 skills 目录(适合手动管理,或其他遵循 Agent Skills 约定的助手):

# macOS / Linux
git clone https://github.com/isheng-eqi/media-crawler-easy ~/.claude/skills/media-crawler-easy
# Windows PowerShell
git clone https://github.com/isheng-eqi/media-crawler-easy $env:USERPROFILE\.claude\skills\media-crawler-easy

第二部分,打开 Claude Code,直接说:

帮我爬小红书「考研二战」的笔记评论

Skill 会按描述自动加载,然后是一段这样的对话(示例,实际条数取决于你的回答):

要爬哪个平台?
A. B站   B. 小红书   C. 抖音   D. 快手

> B

用什么方式爬?
A. 关键词搜索   B. 指定链接   C. 创作者主页

> A

关键词是什么?每个关键词爬多少条?(默认 20)

> 考研二战,20

每条内容爬多少评论?(默认 30)要楼中楼吗?要词云图吗?爬取间隔几秒?

> 默认

[