产品简介
LittleCrawler 这是一个面向中文用户的社交媒体数据采集工具，专门用于抓取小红书笔记、知乎文章和闲鱼商品等公开信息。它适合需要批量获取平台数据的研究人员、市场分析师或内容创作者，能有效解决手动收集数据效率低下的问题。
核心功能
- 支持小红书笔记、详情、作者信息抓取
- 支持闲鱼商品、笔记、作者信息抓取
- 支持知乎文章、详情、作者信息抓取
- 提供基于Web的图形化管理后台
- 支持多种数据存储方式（如JSON、Excel、数据库）
快速开始
- 克隆项目并安装依赖：`git clone` 后使用 `uv sync` 或 `pip install`
- 安装浏览器：运行 `playwright install chromium`
- 启动服务：运行 `python main.py` 或通过 `uvicorn` 启动Web后台服务
界面预览
与其他方案对比
| 对比项 | LittleCrawler | 同类方案 |
|---|---|---|
| 数据源覆盖 | 支持小红书、知乎、闲鱼三个主流中文平台 | 通常仅支持单一平台或不支持中文平台 |
| 管理界面 | 提供完整的Web管理后台，操作直观 | 多为命令行工具，对非技术用户不友好 |
| 数据存储 | 支持CSV、JSON、SQLite、MySQL、MongoDB、Excel等多种格式 | 通常仅支持一两种常见格式 |
适合谁用
- 需要批量获取社交平台公开数据的研究人员
- 进行竞品分析或市场调研的数据分析师
- 希望收集素材或进行内容分析的内容创作者
下载与版本
当前最新版本为 main，发布于 。支持 Windows、macOS、Linux。
⚠️ 注意：本项目仅提供源代码下载，不包含可直接运行的安装包（exe/dmg/apk 等。下载后需要自行编译构建才能使用，适合有一定开发经验的用户。如果你不熟悉编译流程，建议寻找同类开箱即用的替代方案。
注意事项
- 本工具仅供学习和研究使用，请遵守相关法律法规。
- 请尊重内容创作者版权，勿将下载内容用于商业或非法传播。
- 项目源码地址：https://github.com/pbeenigg/LittleCrawler