★
Scrapling 是用 Python 编写的爬虫框架，用于网页抓取与数据采集。
🕷️ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg…
apify / crawlee-python
crawlee-python
Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML, PDF, JPG, PNG, and other files from websites. Works with Parsel, BeautifulSoup, Playwright, and raw HTTP. Both headful and headless mode. With proxy rotation.
crawlee-python 是用 Python 编写的爬虫框架，用于网页抓取与数据采集，主打界面美观。
目前累计 9.6k star、811 fork，主要语言为 Python，项目始于 2024 年，采用 Apache-2.0 许可。最近状态：近一个月有提交。适合：需要数据采集的开发者。
中文介绍优先采用本站人工维护条目；无维护条目时依据 GitHub 公开字段（语言、主题、星标、提交时间）自动生成，未经项目方确认，不构成选型结论。apify/crawlee-python 是一个以 Python 为主的开源项目，目前累计 9.6k star、811 fork，近 30 天内有提交。主要方向：apify、自动化、beautifulsoup、爬虫、crawling、headless。
依据 GitHub 公开字段（语言、主题、星标、提交时间）自动生成，未经人工逐项核实。README
正在加载…相关项目
★
crawl4ai 是用 Python 编写的 AI 工具，用于大模型与智能体应用开发，主打开源免费。
Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with …
★
Python 的快速爬虫框架，内置请求调度、数据提取与导出，适合规模化采集。
Scrapy, a fast high-level web crawling & scraping framework for Python.
★
Agent-Reach 是用 Python 编写的 AI 工具，用于大模型与智能体应用开发。
Give your AI agent eyes to see the entire internet. Read & search Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu — one CLI, zero API fees.
★
python-cheatsheet 是用 Python 编写的学习资料，用于系统学习与查阅，主打功能完整。
Comprehensive Python Cheatsheet
★
sqlmap 是用 Python 编写的安全工具，面向安全研究与防护。
Automatic SQL injection and database takeover tool