Python 的快速爬虫框架,内置请求调度、数据提取与导出,适合规模化采集。
Scrapy, a fast high-level web crawling & scraping framework for Python.
Python binding to Modest and Lexbor engines. Fast HTML5 parser with CSS selectors for Python.
selectolax 是用 Python 编写的爬虫框架,用于网页抓取与数据采集,主打速度快。
目前累计 1.7k star、94 fork,主要语言为 Python,项目始于 2017 年,采用 MIT 许可。最近状态:近一个月有提交。适合:需要数据采集的开发者。
中文介绍优先采用本站人工维护条目;无维护条目时依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经项目方确认,不构成选型结论。rushter/selectolax 是一个以 Python 为主的开源项目,目前累计 1.7k star、94 fork,近 30 天内有提交。主要方向:爬虫、CSS、html、html5、解析器、Python。
依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经人工逐项核实。Python 的快速爬虫框架,内置请求调度、数据提取与导出,适合规模化采集。
Scrapy, a fast high-level web crawling & scraping framework for Python.
crawl4ai 是用 Python 编写的 AI 工具,用于大模型与智能体应用开发,主打开源免费。
Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with …
Scrapling 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
🕷️ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg…
python-cheatsheet 是用 Python 编写的学习资料,用于系统学习与查阅,主打功能完整。
Comprehensive Python Cheatsheet
sqlmap 是用 Python 编写的安全工具,面向安全研究与防护。
Automatic SQL injection and database takeover tool
searxng 是用 Python 编写的开源项目,主题标签有限,建议打开仓库查看具体用途,主打开源免费。
SearXNG is a free internet metasearch engine which aggregates results from various search services and databases. Users are neither tracked nor prof…
每天每台设备可免费检索 3 次,浏览、筛选和关键词查找不消耗额度。选择下方任一方案即可继续(当前为模拟支付)。
模拟支付不会接入真实渠道,也不会产生任何扣款。