Tegenaria crawl framework

tegenaria是一个基于golang开发的快速、高效率的网络爬虫框架

特性

• 支持分布式

• 支持自定义分布式组件

• 支持自定义的事件监控

• 支持命令行控制

  安装

1. go 版本要求>1.17

go get -u github.com/wetrycode/tegenaria@latest

2. 在您的项目中导入

import "github.com/wetrycode/tegenaria"

快速开始

查看实例demo example

文档

• 入门

TODO

• 管理WEB API

Contribution

Feel free to PR and raise issues.
Send me an email directly, vforfreedom96@gmail.com

License

MIT © geebytes