★
whisper.cpp 是用 C++ 编写的 AI 工具，用于大模型与智能体应用开发。
Port of OpenAI's Whisper model in C/C++
bytedance / lightseq
lightseq
LightSeq: A High Performance Library for Sequence Processing and Generation
lightseq 是用 C++ 编写的 AI 工具，用于大模型与智能体应用开发，主打高性能。
目前累计 3.3k star、332 fork，主要语言为 C++，项目始于 2019 年，采用 NOASSERTION 许可。最近状态：已有一段时间未更新。适合：做 AI 应用的开发者。
中文介绍优先采用本站人工维护条目；无维护条目时依据 GitHub 公开字段（语言、主题、星标、提交时间）自动生成，未经项目方确认，不构成选型结论。bytedance/lightseq 是一个以 C++ 为主的开源项目，目前累计 3.3k star、332 fork，较长时间未更新。主要方向：accelerate、bart、beam-search、bert、cuda、diverse-decoding。
依据 GitHub 公开字段（语言、主题、星标、提交时间）自动生成，未经人工逐项核实。acceleratebartbeam-searchbertcudadiverse-decodinggptinferencemultilingual-nmtsamplingtrainingtransformer
README
正在加载…相关项目
★
TensorRT 是用 C++ 编写的学习资料，用于系统学习与查阅，主打高性能、开源免费。
NVIDIA® TensorRT™ is an SDK for high-performance deep learning inference on NVIDIA GPUs. This repository contains the open source components of Tens…
★
Open3D 是用 C++ 编写的学习资料，用于系统学习与查阅，主打现代化。
Open3D: A Modern Library for 3D Data Processing
★
MNN 是用 C++ 编写的学习资料，用于系统学习与查阅，主打高性能、速度快、轻量。
MNN: A blazing-fast, lightweight inference engine battle-tested by Alibaba, powering high-performance on-device LLMs and Edge AI.
★
ncnn 是用 C++ 编写的 AI 工具，用于人工智能方向的建模与推理，主打高性能。
ncnn is a high-performance neural network inference framework optimized for the mobile platform
★
mediapipe 是用 C++ 编写的 AI 工具，用于人工智能方向的建模与推理，主打可扩展、跨平台。
Cross-platform, customizable ML solutions for live and streaming media.