lizhichao/log2ck

监听写入Clickhouse的日志文件

0.2.1 2021-05-25 02:46 UTC

This package is auto-updated.

Last update: 2024-09-10 19:09:26 UTC


README

一个简单的日志收集器,通过 tail -F 命令监控文件,写入Clickhouse。资源占用极低,每秒可以处理超过10万条日志信息

一个简单的日志收集器,资源占用极低(比 LogstashFluentdLogtail占用资源更少),每秒可以轻松收集几十万以上的日志信息。

安装

composer require lizhichao/log2ck

示例

tail -F apapche/access.log | php test.php

$db_conf             = [];
$db_conf['host']     = 'tcp://192.168.23.129:9091';
$db_conf['username'] = 'default';
$db_conf['password'] = '123456';
$db_conf['database'] = 'test1';

$table       = 'web_log';
$server_name = 'web1';

$ck = new Log2Ck(
    $db_conf, // 
    $table, // table 
    [
    'host', 'ip', 'duration', 
    'create_time', 'method', 'url', 'path', 'code', 'size', 
    'refer', 'refer_host', 'user_agent', 
    'server_name'
    ] //field name
);
$ck->regLogFn(function($row){
    // 自己解析 $row
    return $array; //和上面的字段对应
})->run();