single-file-cli 是用 JavaScript 编写的爬虫框架,用于网页抓取与数据采集。
CLI tool for saving a faithful copy of a complete web page in a single HTML file (based on SingleFile)
yangshun
面向忙碌工程师的面试准备资料,含算法、行为面试与简历建议。目前累计 14.3 万 star、1.7 万 fork,在本地项目库中星标排名约第 72 / 65730,主要语言为 TypeScript,项目始于 2016 年,采用 MIT 许可。最近状态:近半年有提交。
适合谁:推荐给想补齐某块知识的开发者:涉及 algorithm、algorithm-interview、algorithm-interview-questions、algorithms 方向。
按累计星标排序,库内共 65,735 个项目(GitHub 上星标 ≥ 1k 的公开仓库约 66,070 个)。
优先使用本地记录的星标快照计算近 7 天真实增量;快照不足 7 天时,按「创建以来日均获星」估算,数值旁会标注口径。
已收录 GitHub 星标过千的公开项目,附原始简介、语言、主题与活跃度。用一句自然语言描述需求,即可获得 AI 推荐。
single-file-cli 是用 JavaScript 编写的爬虫框架,用于网页抓取与数据采集。
CLI tool for saving a faithful copy of a complete web page in a single HTML file (based on SingleFile)
抖音爬虫——采集账号主页、喜欢、收藏、音乐原声、话题、搜索、合集、作品、关注、粉丝等公开数据。
抖音爬虫——采集账号主页、喜欢、收藏、音乐原声、话题、搜索、合集、作品、关注、粉丝等公开数据。
grab-site 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
The archivist's web crawler: WARC output, dashboard for all crawls, dynamic ignore patterns
fredy 是用 JavaScript 编写的爬虫框架,用于网页抓取与数据采集。
❤️ Fredy - [F]ind [R]eal [E]state [D]amn Eas[y] - Fredy keeps searching for new apartments, houses, and flats in Europe on platforms like ImmoScout2…
lightcrawler 是用 JavaScript 编写的爬虫框架,用于网页抓取与数据采集。
Crawl a website and run it through Google lighthouse
Boss直聘爬虫 / BOSS直聘职位数据抓取工具,基于 Chrome CDP 协议复用真实登录态,绕过字体反爬,输出明文薪资 JSON/CSV + 薪资技能分析。A Chrome-CDP-based BOSS Zhipin job s…
Boss直聘爬虫 / BOSS直聘职位数据抓取工具,基于 Chrome CDP 协议复用真实登录态,绕过字体反爬,输出明文薪资 JSON/CSV + 薪资技能分析。A Chrome-CDP-based BOSS Zhipin job scraper/crawler.
wreq-python 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
An ergonomic, privacy-aware Python HTTP Client
fscrawler 是用 Java 编写的爬虫框架,用于网页抓取与数据采集。
Elasticsearch File System Crawler (FS Crawler)
小红书数据采集、网站图片、视频资源批量下载工具,颜值超高的数据采集工具(批量下载,视频提取,图片)Telegram:https://t.me/+ZtLSwuIKTo44MDY1
小红书数据采集、网站图片、视频资源批量下载工具,颜值超高的数据采集工具(批量下载,视频提取,图片)Telegram:https://t.me/+ZtLSwuIKTo44MDY1
rebrowser-patches 是用 JavaScript 编写的爬虫框架,用于网页抓取与数据采集,主打易用。
Collection of patches for puppeteer and playwright to avoid automation detection and leaks. Helps to avoid Cloudflare and DataDome CAPTCHA pages. Ea…
OpenWPM 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
A web privacy measurement framework
mlscraper 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
🤖 Scrape data from HTML websites automatically by just providing examples
SwiftLinkPreview 是用 Swift 编写的爬虫框架,用于网页抓取与数据采集。
It makes a preview from an URL, grabbing all the information such as title, relevant texts and images.
wombat 是用 Ruby 编写的爬虫框架,用于网页抓取与数据采集,主打轻量、界面美观。
Lightweight Ruby web crawler/scraper with an elegant DSL which extracts structured data from pages.
go-dork 是用 Go 编写的安全工具,面向安全研究与防护,主打速度快、实现清晰。
The fastest dork scanner written in Go.
XSRFProbe 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
The Prime Cross Site Request Forgery (CSRF) Audit and Exploitation Toolkit.
instagram-profilecrawl 是用 Python 编写的测试工具,用于自动化测试与验证,主打速度快。
📝 quickly crawl the information (e.g. followers, tags etc...) of an instagram profile.
Beanbun 是用 PHP 编写的多进程网络爬虫框架,具有良好的开放性、高可扩展性,基于 Workerman。
Beanbun 是用 PHP 编写的多进程网络爬虫框架,具有良好的开放性、高可扩展性,基于 Workerman。
一个好用的哔哩哔哩漫画下载器,拥有图形界面,支持关键词搜索漫画和二维码登入,黑科技下载未解锁章节,多线程下载,多种保存格式,本地漫画管理,一键检查更新!
一个好用的哔哩哔哩漫画下载器,拥有图形界面,支持关键词搜索漫画和二维码登入,黑科技下载未解锁章节,多线程下载,多种保存格式,本地漫画管理,一键检查更新!
项目列表来自 GitHub 官方 Search API(stars:>1000)。单个查询最多只能返回前 1000 条,所以「同步热门」取到的是星标最高的 1000 个;要拿全量必须按星标区间拆成多个查询——本站会先查各区间的真实数量再自动切分(1k–2k 约 3.2 万个,2k–5k 约 2.1 万个,5k–20k 约 1 万个,2 万以上约 2300 个)。GitHub 上星标过千的公开仓库当前约 66,070 个,本站已收录 65,735 个。星标、简介、语言与主题均为 GitHub 原始字段,未做人工逐一核验。
中文介绍分三种来源,卡片与详情页均有标注:热门项目使用本站人工维护的条目;其余项目由程序依据语言、主题、简介中的特征词与项目数据自动生成;仓库原简介本身是中文时直接引用原文。自动生成的介绍只是对公开字段的归纳,不代表项目方表述,也不构成选型结论。
每日推荐按北京时间每天从星标 6000 以上、近 18 个月仍有提交且未归档的项目中选取,排除近 120 天已推荐过的项目,同一天内结果固定。推荐结果由规则引擎(或配置的大模型)生成,不构成选型结论。
每天每台设备可免费检索 3 次,浏览、筛选和关键词查找不消耗额度。选择下方任一方案即可继续(当前为模拟支付)。
模拟支付不会接入真实渠道,也不会产生任何扣款。