umpirsky/centipede-crawler

爬取所有唯一的链接。

维护者

详细信息

github.com/umpirsky/centipede-crawler

源代码

问题

安装: 448

依赖关系: 1

建议者: 0

安全性: 0

星标: 42

关注者: 5

分支: 6

开放性问题: 3

0.1.2 2016-06-13 10:09 UTC

Requires

Requires (Dev)

MIT a9a94e4d958488ed3d6e3678dbefc1148be5d136

  • Saša Stamenković <umpirsky.woop@gmail.com>

This package is not auto-updated.

Last update: 2024-09-14 16:50:54 UTC

README

symfony upgrade fixer • twig gettext extractor • wisdom • centipede • permissions handler • extraload • gravatar • locurro • country list • transliterator

Centipede Crawler Build Status

爬取所有唯一的链接。

用法

$urls = (new Centipede\Crawler('http://dev.umpirsky.com'))->crawl();

异步

(new Centipede\Crawler('http://dev.umpirsky.com'))->crawl(function ($url, GuzzleHttp\Message\FutureResponse $response) {
    printf('(%d) %s', $response->getStatusCode(), $url);
});