开源星图GITHUB / DISCOVERY
今日免费检索 3 次
PuerkitoBio / gocrawl

gocrawl

Polite, slim and concurrent web crawler.

Go★ 2.1k⑂ 196BSD-3-Clause创建于 2012-09-19最近提交 2021-05-19
中文介绍 · 自动生成

gocrawl 是用 Go 编写的爬虫框架,用于网页抓取与数据采集,主打轻量、异步并发。

目前累计 2.1k star、196 fork,主要语言为 Go,项目始于 2012 年,采用 BSD-3-Clause 许可。最近状态:已有一段时间未更新。适合:需要数据采集的开发者。

中文介绍优先采用本站人工维护条目;无维护条目时依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经项目方确认,不构成选型结论。
一句话解读

PuerkitoBio/gocrawl 是一个以 Go 为主的开源项目,目前累计 2.1k star、196 fork,较长时间未更新。主要方向:爬虫、robots-txt。

依据 GitHub 公开字段(语言、主题、星标、提交时间)自动生成,未经人工逐项核实。
爬虫robots-txt

README

正在加载…

相关项目