kies-media / scraper-class
非常基础的scraper-class,用于通过公共代理获取URL内容。主要优点是,您不需要搜索代理列表。这由类本身完成。HTTPS没有问题
1.0.6
2022-01-09 21:11 UTC
Requires
- php: >=7.1
README
非常基础的scraper-class,用于通过公共代理获取URL内容
主要功能
- 您不需要搜索代理列表。这由类本身完成。
- HTTPS没有问题
先决条件
- 您的web服务器上启用了file_get_contents(通常是这种情况)
使用Composer安装
composer require kies-media/scraper-class
如果您想使用缓存(您应该这样做),则必须从/src/cache.sql创建表
基本用法
<?php require __DIR__ . '/vendor/autoload.php'; $scraper=new \KiesMedia\ScraperClass\scraperClass(); try{ echo $scraper->getUrlByProxy("https://kies-media.de/"); }catch(Exception $e){ echo $e->getMessage(); }
基本用法缓存
<?php require __DIR__ . '/vendor/autoload.php'; $scraper=new \KiesMedia\ScraperClass\scraperClass("localhost","root","pass","databasename"); try{ echo $scraper->getUrlByProxy("https://kies-media.de/",10); }catch(Exception $e){ echo $e->getMessage(); }
已知问题/改进的地方
- 当前无法删除缓存
- 目前没有单元测试
感谢
proxyscrape.com为我们提供公共代理列表