• 什么是MediaCrawler？
• 支持平台
• 环境要求
• 安装与配置
• 1. 创建虚拟环境
• 创建虚拟环境
• macOS & Linux 激活虚拟环境
• Windows 激活虚拟环境
• 2. 安装依赖库
• 3. 安装浏览器驱动
• 使用方法
• 基本使用
• 登录方式
• 数据保存
• 配置文件说明
• 使用场景
• 重要提醒
• 免责声明
• 合规使用
• 项目亮点
• 结语

在数据驱动的时代，如何高效获取各大社交媒体平台的数据成为了开发者和数据分析师的重要需求。今天要为大家介绍一个在GitHub上备受瞩目的开源项目——MediaCrawler，这是一个功能强大的多平台媒体内容爬虫工具。

什么是MediaCrawler？

MediaCrawler是一个支持小红书笔记、抖音视频、快手视频、B站视频、微博帖子、百度贴吧帖子、知乎问答文章等多个平台的内容和评论爬虫工具。该项目在GitHub上霸榜三天，每天以1-2k的速度增长，足见其受欢迎程度。

项目地址： https://github.com/NanmiCoder/MediaCrawler

详细文档： https://nanmicoder.github.io/MediaCrawler/

支持平台

MediaCrawler目前支持以下主流平台：

• • 小红书 - 笔记内容和评论
• • 抖音 - 视频内容和评论
• • 快手 - 视频内容和评论
• • B站 - 视频内容和评论
• • 微博 - 帖子内容和评论
• • 百度贴吧 - 帖子和评论回复
• • 知乎 - 问答文章和评论

环境要求

在开始使用之前，请确保您的环境满足以下要求：

• • Python版本：3.9.6（推荐，其他版本可能需要调整依赖）
• • Node.js版本：16及以上（爬取抖音和知乎时需要）
• • 操作系统：支持Windows、macOS、Linux

安装与配置

1. 创建虚拟环境

首先克隆项目并创建Python虚拟环境：

`# 进入项目根目录
cd MediaCrawler

创建虚拟环境

python -m venv venv

macOS & Linux 激活虚拟环境

source venv/bin/activate

Windows 激活虚拟环境

venv\Scripts\activate`

2. 安装依赖库

安装项目所需的Python依赖包：

pip install -r requirements.txt

3. 安装浏览器驱动

安装playwright浏览器驱动：

playwright install

使用方法

基本使用

项目默认没有开启评论爬取模式，如需评论请在config/base_config.py中的ENABLEGETCOMMENTS变量修改。