开源星图GITHUB / DISCOVERY
今日免费检索 3 次
vllm-project / vllm

vllm

A high-throughput and memory-efficient inference and serving engine for LLMs

Python★ 96k⑂ 24kApache-2.0创建于 2023-02-09最近提交 2026-10-30
中文介绍 · 自动生成

vllm 是用 Python 编写的 AI 工具,用于大模型与智能体应用开发。

目前累计 9.6 万 star、2.4 万 fork,主要语言为 Python,项目始于 2023 年,采用 Apache-2.0 许可。最近状态:本周仍有提交。适合:做 AI 应用的开发者。

中文介绍优先采用本站人工维护条目;无维护条目时依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经项目方确认,不构成选型结论。
一句话解读

vllm-project/vllm 是一个以 Python 为主的开源项目,目前累计 96k star、24k fork,近 30 天内有提交。主要方向:amd、blackwell、cuda、deepseek、deepseek-v3、gpt。

依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经人工逐项核实。
amdblackwellcudadeepseekdeepseek-v3gptgpt-ossinferencekimillama大模型llm-serving

README

正在加载…

相关项目