为 AI 应用提供网页抓取、清洗与结构化提取能力的服务与库,可自托管。
Supercharge your AI agents with data from the web and beyond. Building the library for superintelligence. 🔥
microsoft
Visual Studio Code 编辑器源码,微软开源的跨平台代码编辑器。目前累计 19.4 万 star、4.5 万 fork,在本地项目库中星标排名约第 36 / 65707,主要语言为 TypeScript,项目始于 2015 年,采用 MIT 许可。最近状态:本周仍有提交。
适合谁:推荐给写代码与文档的人:涉及 editor、electron、microsoft、typescript 方向。
按累计星标排序,库内共 65,720 个项目(GitHub 上星标 ≥ 1k 的公开仓库约 65,999 个)。
优先使用本地记录的星标快照计算近 7 天真实增量;快照不足 7 天时,按「创建以来日均获星」估算,数值旁会标注口径。
已收录 GitHub 星标过千的公开项目,附原始简介、语言、主题与活跃度。用一句自然语言描述需求,即可获得 AI 推荐。
为 AI 应用提供网页抓取、清洗与结构化提取能力的服务与库,可自托管。
Supercharge your AI agents with data from the web and beyond. Building the library for superintelligence. 🔥
Scrapling 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
🕷️ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg…
crawl4ai 是用 Python 编写的 AI 工具,用于大模型与智能体应用开发,主打开源免费。
Open-source web crawler and scraper for LLMs and AI agents: any website into clean, LLM-ready Markdown. Run it yourself, or use Crawl4AI Cloud with …
Python 的快速爬虫框架,内置请求调度、数据提取与导出,适合规模化采集。
Scrapy, a fast high-level web crawling & scraping framework for Python.
A visual no-code/code-free web crawler/spider易采集:一个可视化浏览器自动化测试/数据采集/网页爬虫软件,可以无代码图形化的设计和执行爬虫任务。别名:ServiceWrapper面向Web应用…
A visual no-code/code-free web crawler/spider易采集:一个可视化浏览器自动化测试/数据采集/网页爬虫软件,可以无代码图形化的设计和执行爬虫任务。别名:ServiceWrapper面向Web应用的智能化服务封装系统。
lux 是用 Go 编写的爬虫框架,用于网页抓取与数据采集,主打速度快、易用、实现清晰。
👾 Fast and simple video download library and CLI tool written in Go
Scrapegraph-ai 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
Python scraper based on AI
crawlee 是用 TypeScript 编写的爬虫框架,用于网页抓取与数据采集。
Crawlee—A web scraping and browser automation library for Node.js to build reliable crawlers. In JavaScript and TypeScript. Extract data for AI, LLM…
colly 是用 Go 编写的爬虫框架,用于网页抓取与数据采集,主打界面美观。
Elegant Scraper and Crawler Framework for Golang
proxy_pool 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
Python ProxyPool for web spider
🚀 抖音、TikTok 数据采集与无水印视频下载 API,自托管,支持 MCP 调用与 Docker 一键部署。| Self-hosted TikTok & Douyin scraper and no-watermark video …
🚀 抖音、TikTok 数据采集与无水印视频下载 API,自托管,支持 MCP 调用与 Docker 一键部署。| Self-hosted TikTok & Douyin scraper and no-watermark video downloader — async REST API, M…
maxun 是用 TypeScript 编写的自动化工具,用于流程自动化编排。
Turn any website into a structured API. Extract, automate, search and monitor the web.
katana 是用 Go 编写的爬虫框架,用于网页抓取与数据采集。
A next-generation crawling and spidering framework.
pyspider 是用 Python 编写的爬虫框架,用于网页抓取与数据采集,主打功能完整。
A Powerful Spider(Web Crawler) System in Python.
newspaper 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
newspaper3k is a news, full-text, and article metadata extraction in Python 3. Advanced docs:
一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly t…
一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )
Photon 是用 Python 编写的爬虫框架,用于网页抓取与数据采集,主打速度快。
Incredibly fast crawler designed for OSINT.
Distributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台,支持任何语言…
Distributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台,支持任何语言和框架
webmagic 是用 Java 编写的爬虫框架,用于网页抓取与数据采集,主打可伸缩。
A scalable web crawler framework for Java.
新一代爬虫平台,以图形化方式定义爬虫流程,不写代码即可完成爬虫。
新一代爬虫平台,以图形化方式定义爬虫流程,不写代码即可完成爬虫。
Python脚本。模拟登录知乎, 爬虫,操作excel,微信公众号,远程开机
Python脚本。模拟登录知乎, 爬虫,操作excel,微信公众号,远程开机
AV 电影管理系统, avmoo , javbus , javlibrary 爬虫,线上 AV 影片图书馆,AV 磁力链接数据库,Japanese Adult Video Library,Adult Video Magnet Links…
AV 电影管理系统, avmoo , javbus , javlibrary 爬虫,线上 AV 影片图书馆,AV 磁力链接数据库,Japanese Adult Video Library,Adult Video Magnet Links - Japanese Adult Video Database
crawlee-python 是用 Python 编写的爬虫框架,用于网页抓取与数据采集,主打界面美观。
Crawlee—A web scraping and browser automation library for Python to build reliable crawlers. Extract data for AI, LLMs, RAG, or GPTs. Download HTML,…
为OPC/中小微企业量身打造的自媒体获客智能体
为OPC/中小微企业量身打造的自媒体获客智能体
项目列表来自 GitHub 官方 Search API(stars:>1000)。单个查询最多只能返回前 1000 条,所以「同步热门」取到的是星标最高的 1000 个;要拿全量必须按星标区间拆成多个查询——本站会先查各区间的真实数量再自动切分(1k–2k 约 3.2 万个,2k–5k 约 2.1 万个,5k–20k 约 1 万个,2 万以上约 2300 个)。GitHub 上星标过千的公开仓库当前约 65,999 个,本站已收录 65,720 个。星标、简介、语言与主题均为 GitHub 原始字段,未做人工逐一核验。
中文介绍分三种来源,卡片与详情页均有标注:热门项目使用本站人工维护的条目;其余项目由程序依据语言、主题、简介中的特征词与项目数据自动生成;仓库原简介本身是中文时直接引用原文。自动生成的介绍只是对公开字段的归纳,不代表项目方表述,也不构成选型结论。
每日推荐按北京时间每天从星标 6000 以上、近 18 个月仍有提交且未归档的项目中选取,排除近 120 天已推荐过的项目,同一天内结果固定。推荐结果由规则引擎(或配置的大模型)生成,不构成选型结论。
每天每台设备可免费检索 3 次,浏览、筛选和关键词查找不消耗额度。选择下方任一方案即可继续(当前为模拟支付)。
模拟支付不会接入真实渠道,也不会产生任何扣款。