Python 的快速爬虫框架,内置请求调度、数据提取与导出,适合规模化采集。
Scrapy, a fast high-level web crawling & scraping framework for Python.
grab 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
目前累计 2.5k star、272 fork,主要语言为 Python,项目始于 2013 年,采用 MIT 许可。最近状态:已有一段时间未更新。适合:需要数据采集的开发者。
中文介绍优先采用本站人工维护条目;无维护条目时依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经项目方确认,不构成选型结论。lorien/grab 是一个以 Python 为主的开源项目,目前累计 2.5k star、272 fork,一年以上有维护。主要方向:asynchronous、爬虫、crawling、框架、http-client、网络。
依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经人工逐项核实。Python 的快速爬虫框架,内置请求调度、数据提取与导出,适合规模化采集。
Scrapy, a fast high-level web crawling & scraping framework for Python.
rich 是用 Python 编写的代码库,提供可直接复用的能力,主打界面美观。
Rich is a Python library for rich text and beautiful formatting in the terminal.
Scrapling 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
🕷️ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg…
crawl4ai 是用 Python 编写的 AI 工具,用于大模型与智能体应用开发,主打开源免费。
Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with …
Python 的高层 Web 框架,自带后台、ORM 与认证,适合快速构建完整站点。
The Web framework for perfectionists with deadlines.
sherlock 是用 Python 编写的安全工具,面向安全研究与防护。
Hunt down social media accounts by username across social networks
每天每台设备可免费检索 3 次,浏览、筛选和关键词查找不消耗额度。选择下方任一方案即可继续(当前为模拟支付)。
模拟支付不会接入真实渠道,也不会产生任何扣款。