ideea / scout-elasticsearch-driver
Laravel Scout 的 Elasticsearch 驱动
Requires
- php: ^7.1.|^8.0
- elasticsearch/elasticsearch: >=7.0 <=7.11.0
- laravel/scout: ^7.0|^8.0|^9.0
Requires (Dev)
- mockery/mockery: ^1.0
- phpunit/phpunit: ^7.0|^8.0
This package is auto-updated.
Last update: 2024-08-28 12:48:48 UTC
README
💥 介绍一个新的 Laravel Elasticsearch 生态系统。 💥
此软件包提供用于在 Elasticsearch 中搜索和过滤数据的先进功能。查看其 特性!
内容
特性
- 一种简单的配置和创建Elasticsearch 索引的方法。
- 为每个模型提供完全可配置的映射。
- 可以自动或在Artisan 命令的帮助下向现有映射添加新字段。
- 通过使用搜索规则或原始搜索,有多种方式来实现您的搜索算法。
- 提供各种过滤器类型,以使搜索查询更具体。
- 从旧索引到新索引的零停机迁移。
- 批量索引,请参阅配置部分。
要求
该软件包已在以下配置下进行了测试
- PHP 版本 >=7.1.3, <=7.3
- Laravel 框架版本 >=5.8, <=6
- Elasticsearch 版本 >=7
安装
使用 composer 安装软件包
composer require babenkoivan/scout-elasticsearch-driver
如果您正在使用 Laravel 版本 <= 5.4 或禁用了包发现,请将以下提供者在 config/app.php
中添加
'providers' => [ Laravel\Scout\ScoutServiceProvider::class, ScoutElastic\ScoutElasticServiceProvider::class, ]
配置
要配置软件包,您需要首先发布设置
php artisan vendor:publish --provider="Laravel\Scout\ScoutServiceProvider"
php artisan vendor:publish --provider="ScoutElastic\ScoutElasticServiceProvider"
然后,在 config/scout.php
文件中将驱动设置设置为 elastic
(或在 .env
中设置 SCOUT_DRIVER=elastic
)并配置驱动本身在 config/scout_elastic.php
文件中。可用的选项包括
注意,如果您使用批量文档索引,您可能需要更改块大小,您可以在 config/scout.php
文件中这样做。
索引配置器
使用以下 artisan 命令设置 Elasticsearch 索引的设置
php artisan make:index-configurator MyIndexConfigurator
它将在您的项目的 app
文件夹中创建 MyIndexConfigurator.php
文件。您可以在以下示例中指定索引名称和设置
<?php namespace App; use ScoutElastic\IndexConfigurator; class MyIndexConfigurator extends IndexConfigurator { // It's not obligatory to determine name. By default it'll be a snaked class name without `IndexConfigurator` part. protected $name = 'my_index'; // You can specify any settings you want, for example, analyzers. protected $settings = [ 'analysis' => [ 'analyzer' => [ 'es_std' => [ 'type' => 'standard', 'stopwords' => '_spanish_' ] ] ] ]; }
更多关于索引设置的信息,您可以在 Elasticsearch 文档的索引管理部分中找到。
要创建索引,只需运行 artisan 命令
php artisan elastic:create-index "App\MyIndexConfigurator"
请注意,每个可搜索模型都需要自己的索引配置器。
在Elasticsearch 6.0.0或更高版本中创建的索引只能包含一个映射类型。在5.x版本中创建的包含多个映射类型的索引将在Elasticsearch 6.x版本中继续按以前的方式运行。映射类型将在Elasticsearch 7.0.0中完全删除。
更多信息请访问此处。
可搜索模型
要创建一个具有在Elasticsearch索引中执行搜索请求能力的模型,请使用以下命令
php artisan make:searchable-model MyModel --index-configurator=MyIndexConfigurator
执行命令后,您将在您的app
文件夹中找到MyModel.php
文件
<?php namespace App; use ScoutElastic\Searchable; use Illuminate\Database\Eloquent\Model; class MyModel extends Model { use Searchable; protected $indexConfigurator = MyIndexConfigurator::class; protected $searchRules = [ // ]; // Here you can specify a mapping for model fields protected $mapping = [ 'properties' => [ 'title' => [ 'type' => 'text', // Also you can configure multi-fields, more details you can find here https://elastic.ac.cn/guide/en/elasticsearch/reference/current/multi-fields.html 'fields' => [ 'raw' => [ 'type' => 'keyword', ] ] ], ] ]; }
每个可搜索的模型代表一个Elasticsearch类型。默认情况下,类型名称与表名相同,但您可以通过searchableAs
方法设置任何类型名称。您还可以通过toSearchableArray
方法指定将由驱动程序索引的字段。您可以在Scout官方文档中找到有关这些选项的更多信息。
在MyModel
类中可以设置的最后重要的选项是$searchRules
属性。它允许您为模型设置不同的搜索算法。我们将在搜索规则部分中更详细地了解它。
在您的模型中设置映射后,您可以更新Elasticsearch类型映射
php artisan elastic:update-mapping "App\MyModel"
使用方法
一旦您创建了一个索引配置器、一个Elasticsearch索引和一个可搜索的模型,您就可以开始使用了。现在您可以按照文档中的说明索引和搜索数据。
基本搜索使用示例
// set query string App\MyModel::search('phone') // specify columns to select ->select(['title', 'price']) // filter ->where('color', 'red') // sort ->orderBy('price', 'asc') // collapse by field ->collapse('brand') // set offset ->from(0) // set limit ->take(10) // get results ->get();
如果您只需要查询的匹配数量,请使用count
方法
App\MyModel::search('phone') ->count();
如果您需要加载关系,请使用with
方法
App\MyModel::search('phone') ->with('makers') ->get();
除了标准功能外,该包还提供了在Elasticsearch中过滤数据而不指定查询字符串的可能性
App\MyModel::search('*') ->where('id', 1) ->get();
您还可以覆盖模型的搜索规则
App\MyModel::search('Brazil') ->rule(App\MySearchRule::class) ->get();
您可以使用各种where
条件过滤
App\MyModel::search('*') ->whereRegexp('name.raw', 'A.+') ->where('age', '>=', 30) ->whereExists('unemployed') ->get();
您还可以过滤掉评分低于min_score的结果
App\MyModel::search('sales') ->minScore(1.0) ->get();
您还可以添加更复杂的排序(例如geo_distance)
$model = App\MyModel::search('sales') ->orderRaw([ '_geo_distance' => [ 'coordinates' => [ 'lat' => 51.507351, 'lon' => -0.127758 ], 'order' => 'asc', 'unit' => 'm' ] ]) ->get(); // To retrieve sort result, use model `sortPayload` attribute: $model->sortPayload;
最后,如果您想发送自定义请求,可以使用searchRaw
方法
App\MyModel::searchRaw([ 'query' => [ 'bool' => [ 'must' => [ 'match' => [ '_all' => 'Brazil' ] ] ] ] ]);
此查询将返回原始响应。
控制台命令
以下列出了可用的Artisan命令
要在命令行中获取详细说明和所有可用选项,请运行php artisan help [命令]
。
搜索规则
搜索规则是一个描述如何执行搜索查询的类。要创建搜索规则,请使用以下命令
php artisan make:search-rule MySearchRule
在文件app/MySearchRule.php
中,您将找到一个类定义
<?php namespace App; use ScoutElastic\SearchRule; class MySearch extends SearchRule { // This method returns an array, describes how to highlight the results. // If null is returned, no highlighting will be used. public function buildHighlightPayload() { return [ 'fields' => [ 'name' => [ 'type' => 'plain' ] ] ]; } // This method returns an array, that represents bool query. public function buildQueryPayload() { return [ 'must' => [ 'match' => [ 'name' => $this->builder->query ] ] ]; } }
您可以在此处阅读有关bool查询的更多信息,以及在此处阅读有关高亮显示的更多信息。
默认搜索规则返回以下负载
return [ 'must' => [ 'query_string' => [ 'query' => $this->builder->query ] ] ];
这意味着默认情况下,当您在模型上调用search
方法时,它将尝试在任意字段中查找查询字符串。
要确定模型的默认搜索规则,只需添加一个属性
<?php namespace App; use ScoutElastic\Searchable; use Illuminate\Database\Eloquent\Model; class MyModel extends Model { use Searchable; // You can set several rules for one model. In this case, the first not empty result will be returned. protected $searchRules = [ MySearchRule::class ]; }
您也可以在查询构建器中设置搜索规则
// You can set either a SearchRule class App\MyModel::search('Brazil') ->rule(App\MySearchRule::class) ->get(); // or a callable App\MyModel::search('Brazil') ->rule(function($builder) { return [ 'must' => [ 'match' => [ 'Country' => $builder->query ] ] ]; }) ->get();
要获取高亮显示,请使用模型的highlight
属性
// Let's say we highlight field `name` of `MyModel`. $model = App\MyModel::search('Brazil') ->rule(App\MySearchRule::class) ->first(); // Now you can get raw highlighted value: $model->highlight->name; // or string value: $model->highlight->nameAsString;
可用过滤器
您可以使用不同类型的过滤器
在大多数情况下,使用原始字段来筛选记录更好,即不使用分析字段。
零停机迁移
如您所知,您不能更改已创建的字段类型。在这种情况下,唯一的选项是创建一个新的索引,包括必要的映射,并将您的模型导入到新的索引中。
迁移可能需要相当长的时间,因此为了避免在迁移过程中出现停机,驱动程序从旧索引中读取并写入新索引。迁移完成后,它开始从新索引中读取,并删除旧索引。这就是 artisan elastic:migrate-model
命令的工作方式。
在运行命令之前,请确保您的索引配置器使用 ScoutElastic\Migratable
特性。如果不是,请添加特性,并使用您的索引配置器类名作为参数运行 artisan elastic:update-index
命令。
php artisan elastic:update-index "App\MyIndexConfigurator"
准备好后,在模型映射中进行更改,并使用模型类作为第一个参数,使用所需的索引名称作为第二个参数运行 elastic:migrate-model
命令。
php artisan elastic:migrate-model "App\MyModel" my_index_v2
注意,如果您只需在映射中添加新字段,请使用 elastic:update-mapping
命令。
调试
有两种方法可以帮助您分析搜索查询的结果
这两种方法都返回来自 ES 的原始数据。
此外,您可以通过调用 buildPayload
方法获取将被发送到 ES 的查询有效载荷。
App\MyModel::search('Brazil') ->buildPayload();
请注意,由于一个查询中可能使用多个搜索规则,此方法返回一个有效载荷集合。
替代方案
最近,我为 Laravel 发布了一个新的 Elasticsearch 生态系统,它包括
- Elastic Scout Driver - Laravel Scout 的通用 Elasticsearch 驱动程序。如果您需要在 Laravel 应用程序中构建简单的搜索,它非常合适。
- Elastic Scout Driver Plus - Elastic Scout Driver 的扩展。如果您想利用布尔查询、高亮显示等 Elasticsearch 功能,这是一个不错的选择。
- Elastic Migrations - 一种创建、删除或更新 Elasticsearch 索引模式并与其队友共享的简单方法。它具有与 Laravel 数据库迁移非常相似的用户界面。
如果您对其中任何一个感兴趣,并想了解更多细节,请阅读 Laravel 应用程序中 Elasticsearch 的终极指南。这篇文章对提到的包进行了很好的概述,并提供了使用示例。
常见问题解答(FAQ)
- 为什么您创建了一个新的包而不是新的
scout-elasticsearch-driver
版本? - 由于明显的原因,我不想创建另一个包含所有功能的包:没有关注点的分离,不兼容其他 Scout 驱动程序,难以测试和开发等。由于 Elastic Scout Driver 是一个通用驱动程序,并且没有实现所有scout-elasticsearch-driver
功能,因此将其称为新的scout-elasticsearch-driver
版本是不正确的。 - 这对 scout-elasticsearch-driver 意味着什么? - 目前,它由社区维护(感谢 @iget-esoares 和 @lucamichot 使项目保持活力 🎉)。我希望他们将继续为项目做出贡献,并在未来带来
scout-elasticsearch-driver
的新版本。