data-engineer-handbook 是用 Jupyter Notebook 编写的资源清单,按主题汇总同类优质资源。
This is a repo with links to everything you'd ever want to learn about data engineering
practical-tutorials
项目驱动学习教程合集,通过一步步做完整项目来掌握一门技术。目前累计 28.8 万 star、3.7 万 fork,在本地项目库中星标排名约第 16 / 65705,主要语言为 Python,项目始于 2017 年,采用 MIT 许可。最近状态:本周仍有提交。
适合谁:推荐给想补齐某块知识的开发者:涉及 beginner-project、cpp、golang、javascript 方向。
按累计星标排序,库内共 65,705 个项目(GitHub 上星标 ≥ 1k 的公开仓库约 65,968 个)。
优先使用本地记录的星标快照计算近 7 天真实增量;快照不足 7 天时,按「创建以来日均获星」估算,数值旁会标注口径。
已收录 GitHub 星标过千的公开项目,附原始简介、语言、主题与活跃度。用一句自然语言描述需求,即可获得 AI 推荐。
data-engineer-handbook 是用 Jupyter Notebook 编写的资源清单,按主题汇总同类优质资源。
This is a repo with links to everything you'd ever want to learn about data engineering
rustfs 是用 Rust 编写的运维工具,用于部署、编排与监控,主打高性能、开源免费。
RustFS is an open-source, S3-compatible high-performance object storage system supporting migration and coexistence with other S3-compatible platfor…
TDengine 是用 C 编写的运维工具,用于部署、编排与监控,主打高性能、可伸缩。
High-performance, scalable time-series database designed for Industrial IoT (IIoT) scenarios
shardingsphere 是用 Java 编写的数据库工具,用于数据存储与查询,主打可伸缩、注重安全。
Empowering Data Intelligence with Distributed SQL for Sharding, Scalability, and Security Across All Databases.
awesome-bigdata 是一个数据库工具,用于数据存储与查询。
A curated list of awesome big data frameworks, ressources and other awesomeness.
juicefs 是用 Go 编写的数据库工具,用于数据存储与查询,主打可伸缩。
JuiceFS is a distributed POSIX file system built on top of Redis and S3.
专注大数据学习面试,大数据成神之路开启。Flink/Spark/Hadoop/Hbase/Hive...
专注大数据学习面试,大数据成神之路开启。Flink/Spark/Hadoop/Hbase/Hive...
databend 是用 Rust 编写的数据库工具,用于数据存储与查询。
Data Agent Ready Warehouse : One for Analytics, Search, AI, Python Sandbox. — rebuilt from scratch. Unified architecture on your S3.
vaex 是用 Python 编写的学习资料,用于系统学习与查阅。
Out-of-Core hybrid Apache Arrow/NumPy DataFrame for Python, ML, visualization and exploration of big tabular data at a billion rows per second 🚀
hudi 是用 Java 编写的开源项目,主题标签有限,建议打开仓库查看具体用途。
Upserts, Deletes And Incremental Processing on Big Data.
volcano 是用 Go 编写的 AI 工具,用于人工智能方向的建模与推理。
A Cloud Native Batch System (Project under CNCF)
100+套大数据可视化炫酷大屏Html5模板;包含行业:社区、物业、政务、交通、金融银行等,全网最新、最多,最全、最酷、最炫大数据可视化模板。陆续更新中
100+套大数据可视化炫酷大屏Html5模板;包含行业:社区、物业、政务、交通、金融银行等,全网最新、最多,最全、最酷、最炫大数据可视化模板。陆续更新中
chunjun 是用 Java 编写的开发框架,用于搭建服务端与接口。
A data integration framework
🔨 用 JSON 来生成结构化的 SQL 语句,基于 Vue3 + TypeScript + Vite + Ant Design + MonacoEditor 实现,项目简单(重逻辑轻页面)、适合练手~
🔨 用 JSON 来生成结构化的 SQL 语句,基于 Vue3 + TypeScript + Vite + Ant Design + MonacoEditor 实现,项目简单(重逻辑轻页面)、适合练手~
avro 是用 Java 编写的开源项目,主题标签有限,建议打开仓库查看具体用途。
Apache Avro is a data serialization system.
大数据学习,从零开始学习大数据,包含大数据学习各阶段学习视频、面试资料
大数据学习,从零开始学习大数据,包含大数据学习各阶段学习视频、面试资料
dpark 是用 Python 编写的开发框架,提供应用开发的基础结构。
Python clone of Spark, a MapReduce alike framework in Python
griddb 是用 C++ 编写的数据库工具,用于数据存储与查询,主打速度快、易用、开源免费。
GridDB is a next-generation open source database that makes time series IoT and big data fast,and easy.
Aix-DB 基于 LangChain/LangGraph 框架,结合 MCP Skills 多智能体协作架构,实现自然语言到数据洞察的端到端转换。
Aix-DB 基于 LangChain/LangGraph 框架,结合 MCP Skills 多智能体协作架构,实现自然语言到数据洞察的端到端转换。
spark 是用 C# 编写的开源项目,主题标签有限,建议打开仓库查看具体用途。
.NET for Apache® Spark™ makes Apache Spark™ easily accessible to .NET developers.
基于开源的flink,对其实时sql进行扩展;主要实现了流与维表的join,支持原生flink SQL所有的语法
基于开源的flink,对其实时sql进行扩展;主要实现了流与维表的join,支持原生flink SQL所有的语法
poli 是用 Java 编写的可视化工具,用于图表与数据展示,主打速度快、易用。
An easy-to-use BI server built for SQL lovers. Power data analysis in SQL and gain faster business insights.
byzer-lang 是用 Scala 编写的学习资料,用于系统学习与查阅,主打开源免费。
Byzer (former MLSQL): A low-code open-source programming language for data pipeline, analytics and AI.
项目列表来自 GitHub 官方 Search API(stars:>1000)。单个查询最多只能返回前 1000 条,所以「同步热门」取到的是星标最高的 1000 个;要拿全量必须按星标区间拆成多个查询——本站会先查各区间的真实数量再自动切分(1k–2k 约 3.2 万个,2k–5k 约 2.1 万个,5k–20k 约 1 万个,2 万以上约 2300 个)。GitHub 上星标过千的公开仓库当前约 65,968 个,本站已收录 65,705 个。星标、简介、语言与主题均为 GitHub 原始字段,未做人工逐一核验。
中文介绍分三种来源,卡片与详情页均有标注:热门项目使用本站人工维护的条目;其余项目由程序依据语言、主题、简介中的特征词与项目数据自动生成;仓库原简介本身是中文时直接引用原文。自动生成的介绍只是对公开字段的归纳,不代表项目方表述,也不构成选型结论。
每日推荐按北京时间每天从星标 6000 以上、近 18 个月仍有提交且未归档的项目中选取,排除近 120 天已推荐过的项目,同一天内结果固定。推荐结果由规则引擎(或配置的大模型)生成,不构成选型结论。
每天每台设备可免费检索 3 次,浏览、筛选和关键词查找不消耗额度。选择下方任一方案即可继续(当前为模拟支付)。
模拟支付不会接入真实渠道,也不会产生任何扣款。