projectivemotion/php-scraper-tools

PHP Curl 封装器。专门为爬取目的编写。

维护者

详细信息

github.com/projectivemotion/php-scraper-tools

源代码

问题

安装次数: 816

依赖者: 3

建议者: 0

安全性: 0

星标: 0

关注者: 2

分支: 1

开放问题: 0

1.0.0 2016-11-30 15:36 UTC

Requires (Dev)

MIT 1008ecc927c720441b8faa9ef62b607c07383e75

  • Amado Martinez <amado.woop@projectivemotion.com>

This package is not auto-updated.

Last update: 2024-09-26 00:42:12 UTC

README

PHP Curl 封装器。专为网络爬取使用。

Build Status

安装

composer require projectivemotion/php-scraper-tools

特性

  • 快速简单的cookie、缓存和详细配置

    • ->verboseOn()
    • ->verboseOff()
    • ->cacheOn()
    • ->cacheOff()
    • ->setCookieFileName()

  • 自动引用头

  • 简单的ajax posts

    • ->getCurl('/ajax.php', ['q' => 'search string'], TRUE)

  • 自定义头

  • 简单的POST/GET

    • ->getCurl('/login.php', ['username' => 'myuser', 'pass' => 'mypass'])

  • 启用缓存将响应保存到文件系统，以便您进行分析。

    $scraper = new CacheScraper();

$scraper->setCacheDir('./');

$scraper->cacheOn();

$response = $scraper->get_cache('/mypage.php', ['search' => 'somethingtosearchfor']);

使用方法

查看 demo/ 目录

许可证

MIT许可证 (MIT)

版权所有 (c) 2016 Amado Martinez

特此授予任何人获得此软件及其相关文档副本（“软件”）的权利，免费使用软件，不受限制，包括但不限于使用、复制、修改、合并、发布、分发、再许可和/或出售软件副本的权利，并允许获得软件的人这样做，前提是遵守以下条件

上述版权声明和本许可声明应包含在软件的所有副本或实质性部分中。

软件按“原样”提供，不提供任何明示或暗示的保证，包括但不限于适销性、针对特定目的的适用性和非侵权性保证。在任何情况下，作者或版权所有者均不对任何索赔、损害或其他责任承担责任，无论这些责任是基于合同、侵权或其他方式，只要这些责任源自、产生于或与软件或软件的使用或其他操作有关。