DecryptLogin 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
DecryptLogin: APIs for loginning some websites by using requests.
yangshun
面向忙碌工程师的面试准备资料,含算法、行为面试与简历建议。目前累计 14.3 万 star、1.7 万 fork,在本地项目库中星标排名约第 72 / 65730,主要语言为 TypeScript,项目始于 2016 年,采用 MIT 许可。最近状态:近半年有提交。
适合谁:推荐给想补齐某块知识的开发者:涉及 algorithm、algorithm-interview、algorithm-interview-questions、algorithms 方向。
按累计星标排序,库内共 65,739 个项目(GitHub 上星标 ≥ 1k 的公开仓库约 66,076 个)。
优先使用本地记录的星标快照计算近 7 天真实增量;快照不足 7 天时,按「创建以来日均获星」估算,数值旁会标注口径。
已收录 GitHub 星标过千的公开项目,附原始简介、语言、主题与活跃度。用一句自然语言描述需求,即可获得 AI 推荐。
DecryptLogin 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
DecryptLogin: APIs for loginning some websites by using requests.
geziyor 是用 Go 编写的爬虫框架,用于网页抓取与数据采集,主打高性能、速度快。
Geziyor, blazing fast web crawling & scraping framework for Go. Supports JS rendering.
spider 是用 Rust 编写的爬虫框架,用于网页抓取与数据采集。
Foundational low latency web data collecting in Rust
dht 是用 Go 编写的爬虫框架,用于网页抓取与数据采集。
BitTorrent DHT Protocol && DHT Spider.
SpiderKeeper 是用 Python 编写的爬虫框架,用于网页抓取与数据采集,主打开源免费。
admin ui for scrapy/open source scrapinghub
:spider: The progressive PHP crawler framework! 优雅的渐进式PHP采集框架。
:spider: The progressive PHP crawler framework! 优雅的渐进式PHP采集框架。
grab 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
Web Scraping Framework
Crawler-Detect 是用 PHP 编写的爬虫框架,用于网页抓取与数据采集。
🕷 CrawlerDetect is a PHP class for detecting bots/crawlers/spiders via the user agent
Download images from Google, Bing, Baidu. 谷歌、百度、必应图片下载.
Download images from Google, Bing, Baidu. 谷歌、百度、必应图片下载.
蓝天采集器是一款开源免费的爬虫系统,仅需点选编辑规则即可采集数据,可运行在本地、虚拟主机或云服务器中,几乎能采集所有类型的网页,无缝对接各类CMS建站程序,免登录实时发布数据,全自动无需人工干预!是网页大数据采集软件中完全跨平台的云端爬…
蓝天采集器是一款开源免费的爬虫系统,仅需点选编辑规则即可采集数据,可运行在本地、虚拟主机或云服务器中,几乎能采集所有类型的网页,无缝对接各类CMS建站程序,免登录实时发布数据,全自动无需人工干预!是网页大数据采集软件中完全跨平台的云端爬虫系统
gain 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
Web crawling framework based on asyncio.
x-crawl 是用 TypeScript 编写的爬虫框架,用于网页抓取与数据采集,主打可扩展。
Flexible Node.js crawler library
QQ空间导出助手,用于备份QQ空间的说说、日志、私密日记、相册、视频、留言板、QQ好友、收藏夹、分享、最近访客为文件,便于迁移与保存
QQ空间导出助手,用于备份QQ空间的说说、日志、私密日记、相册、视频、留言板、QQ好友、收藏夹、分享、最近访客为文件,便于迁移与保存
简单易用的Python爬虫框架,QQ交流群:597510560
简单易用的Python爬虫框架,QQ交流群:597510560
[爬虫框架 (golang)] An awesome Go concurrent Crawler(spider) framework. The crawler is flexible and modular. It can be exp…
[爬虫框架 (golang)] An awesome Go concurrent Crawler(spider) framework. The crawler is flexible and modular. It can be expanded to an Individualized cra…
🏀 Python3 网络爬虫实战(部分含详细教程)猫眼 腾讯视频 豆瓣 研招网 微博 笔趣阁小说 百度热点 B站 CSDN 网易云阅读 阿里文学 百度股票 今日头条 微信公众号 网易云音乐 拉勾 有道 unsplash 实习僧 汽车之…
🏀 Python3 网络爬虫实战(部分含详细教程)猫眼 腾讯视频 豆瓣 研招网 微博 笔趣阁小说 百度热点 B站 CSDN 网易云阅读 阿里文学 百度股票 今日头条 微信公众号 网易云音乐 拉勾 有道 unsplash 实习僧 汽车之家 英雄联盟盒子 大众点评 链家 LPL赛程 台风 梦幻西游…
ruia 是用 Python 编写的爬虫框架,用于网页抓取与数据采集,主打异步并发。
Async Python 3.6+ web scraping micro-framework based on asyncio
python爬虫,目前库存:网易云音乐歌曲爬取,B站视频爬取,知乎问答爬取,壁纸爬取,xvideos视频爬取,有声书爬取,微博爬虫,安居客信息爬取+数据可视化,哔哩哔哩视频封面提取器,ip代理池封装,知乎百万级用户爬虫+数据分析,git…
python爬虫,目前库存:网易云音乐歌曲爬取,B站视频爬取,知乎问答爬取,壁纸爬取,xvideos视频爬取,有声书爬取,微博爬虫,安居客信息爬取+数据可视化,哔哩哔哩视频封面提取器,ip代理池封装,知乎百万级用户爬虫+数据分析,github用户爬虫
抖音爬虫——采集账号主页、喜欢、收藏、音乐原声、话题、搜索、合集、作品、关注、粉丝等公开数据。
抖音爬虫——采集账号主页、喜欢、收藏、音乐原声、话题、搜索、合集、作品、关注、粉丝等公开数据。
grab-site 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
The archivist's web crawler: WARC output, dashboard for all crawls, dynamic ignore patterns
一款信息泄漏利用工具,适用于.git/.svn/.DS_Store泄漏和目录列出
一款信息泄漏利用工具,适用于.git/.svn/.DS_Store泄漏和目录列出
Nodejs实现的一个磁力链接爬虫 https://findit.keenwon.com (原域名http://findit.so )
Nodejs实现的一个磁力链接爬虫 https://findit.keenwon.com (原域名http://findit.so )
querido-diario 是用 Python 编写的爬虫框架,用于网页抓取与数据采集。
📰 Diários oficiais brasileiros acessíveis a todos | 📰 Brazilian government gazettes, accessible to everyone.
项目列表来自 GitHub 官方 Search API(stars:>1000)。单个查询最多只能返回前 1000 条,所以「同步热门」取到的是星标最高的 1000 个;要拿全量必须按星标区间拆成多个查询——本站会先查各区间的真实数量再自动切分(1k–2k 约 3.2 万个,2k–5k 约 2.1 万个,5k–20k 约 1 万个,2 万以上约 2300 个)。GitHub 上星标过千的公开仓库当前约 66,076 个,本站已收录 65,739 个。星标、简介、语言与主题均为 GitHub 原始字段,未做人工逐一核验。
中文介绍分三种来源,卡片与详情页均有标注:热门项目使用本站人工维护的条目;其余项目由程序依据语言、主题、简介中的特征词与项目数据自动生成;仓库原简介本身是中文时直接引用原文。自动生成的介绍只是对公开字段的归纳,不代表项目方表述,也不构成选型结论。
每日推荐按北京时间每天从星标 6000 以上、近 18 个月仍有提交且未归档的项目中选取,排除近 120 天已推荐过的项目,同一天内结果固定。推荐结果由规则引擎(或配置的大模型)生成,不构成选型结论。
每天每台设备可免费检索 3 次,浏览、筛选和关键词查找不消耗额度。选择下方任一方案即可继续(当前为模拟支付)。
模拟支付不会接入真实渠道,也不会产生任何扣款。