开源神器——分分钟爬取小红书、抖音、微博、知乎了�?

📁 开源项目

推荐阅读

�? Github 资料项目合集

• 50�?AI 开源项目合集• 80 款AI 开源合集

  • 戳上方蓝字�?牛皮糖不吹牛*”关注我

大家好，我是牛皮糖！

最近在给一个做自媒体内容分析的朋友搭系统，他说想抓点小红书、抖音的数据看看趋势。我一听这不是很正常的需求吗�?

结果他话锋一转：

“哥，我爬虫刚入门，JS加密看不懂，X-Bogus 不会搞，登录页面�?403，一气之下差点退圈。�?

我：别急，MediaCrawler 给你安排得明明白白！

**
**

**
**

🔥 MediaCrawler 是啥�?

简单一句话�?

📦 一个能帮你**一键爬小红书、抖音、快手、微博、B站、知乎、贴�?等平台内容的 Python 项目�?不用写前端、不用逆向、不用懂加密�?

项目地址�?👉 https://github.com/NanmiCoder/MediaCrawler

它到底帮我们干了啥？

功能
描述
�?平台支持�?
支持 XHS、B站、抖音、快手、微博、知乎、贴吧等
�?自动登录
支持二维码、手机号、Cookie 登录
�?数据丰富
抓取笔记、评论、用户主页、热榜等
�?无需逆向
不用你去�?JS 加密参数，自动注入浏览器签名
�?一行运�?
python main.py --platform xhs --type search## 💻 示例：只�?1 行代码，爬小红书热搜笔记�?
python main.py --platform xhs --type search --keyword "穿搭" --pages 5它就能给你：

  • �?笔记标题、作者昵称、点赞、评论数

  • �?完整内容（包括图�?视频链接�?

  • �?输出到本�?JSON / CSV，还支持 MySQL 入库�?

🔐 重点：它是怎么做到“不被封”的�?

很多人一爬就被封 IP�?03？MediaCrawler 的做法是�?

  • �?�?用�?Playwright 自动化浏览器* 模拟真实用户�?

  • �?�?登录状态保�?Cookie�?

  • �?�?页面运行时注�?JS 自动生成签名�?

  • �?�?支持代理池，一键配置；

一句话：它就是模拟了一个“真的人”，所以平台难以识别你是爬虫�?

🧰 开发者惊喜：还有 Pro 版本�?

项目作者还开了一个加强版�?MediaCrawlerPro*

特�?
描述
🧩 模块解�?
爬虫、登录、存储完全模块化
🚀 多账号轮�?+ IP�?
减少封号，稳定大规模抓取
💾 自动断点续爬
抓到哪停哪，数据不中�?
🧠 可构建平台推荐流分析�?
做舆情分�?/ 热榜挖掘非常适用

👀 牛皮糖怎么用它�?

别说，还真做过两个小项目�?

  • 1. 爬小红书穿搭博主账号合集，配�?pandas 做推荐分析；

  • 2. 知乎某关键词评论情感分析，用于做数据咨询报告�?

结果领导说：

“不说了，这不比花钱买的爬虫系统香多了？�?

📦 项目体验总结

优点
缺点
�?多平台支持超�?
�?初次使用 Playwright 有点�?
�?免逆向，代码清晰可�?
�?登录态管理需理解 Cookie
�?文档齐全，参数简�?
�?不支持云端部署模�?
但！这些缺点在牛皮糖看来都不是问题：

�?5 分钟搞定爬虫，能跑通多个平台，这就是效率！

🧠 给开发者的一点建�?

如果你做的是�?

  • �?自媒体数据收�?

  • �?舆情分析系统

  • �?多平台热词抓�?

  • �?或者只是想轻松入门爬虫世界

📢 �?MediaCrawler 一定值得收藏�?

📌 项目地址（赶�?Star�?

👉 https://github.com/NanmiCoder/MediaCrawler 👨‍�?Pro 高级版： https://github.com/zwdzzs1/MediaCrawler

·················END·················

关于AI工具

Github开源文本转语音神器Spark-TTS开源了，克隆声音仅需3秒？

github开源B站UP主都在用的下载神器！Cobalt让你轻松搬运高清素材！

Github 26k Stars 开源换脸神器

Github 开源无代码�?Web 数据提取平台�?分钟内训练机器人自动抓取网页数据

每日更新，期待与你一起成�?

欢迎围观副业知识星球

🏷️ GitHub 开源项目