elasticsearch 的使用
admin
2023-06-12 08:22:42
0

ElasticSearch是什么?

ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。

简单来说就是用来做网站/APP搜索功能

mac下环境安装

brew install elasticsearch

还需要安装logstash和mysql-connector用于同步mysql数据

brew install logstash
mysql-connector 在phpstorm目录下就会有这个文件

/Users/wcc/Library/Preferences/PhpStorm2018.1/jdbc-drivers/MySQL Connector/J/5.1.46/mysql-connector-java-5.1.46.ja

所以这里我就不安装了,需要安装的自行搜索

安装logstash之后进入logstash的bin目录执行

logstash-plugin install logstash-input-jdbc

搜索

curl -XGET 'http://localhost:9200/request_log/_search?pretty&q=source:WWW'

使用ElasticSearch

配置同步规则

在bin目录下新增request_mysql.conf

input {
  jdbc {
    jdbc_driver_library => "/Users/wcc/Library/Preferences/PhpStorm2018.1/jdbc-drivers/MySQL Connector/J/5.1.46/mysql-connector-java-5.1.46.jar"
    jdbc_driver_class => "com.mysql.jdbc.Driver"
    jdbc_connection_string => "jdbc:mysql://localhost:3306/test?characterEncoding=UTF-8&useSSL=false"
    jdbc_user => "root"
    jdbc_password => "root"
    statement => "SELECT * FROM pre_request_logs_20180524 where update_time > :sql_last_value"
    jdbc_paging_enabled => "true"
    jdbc_page_size => "50000"
    schedule => "* * * * *"
  }
}

filter {
   json {
        source => "message"
        remove_field => ["message"]
    }
}

output {
  stdout {
    codec => rubydebug
  }
  elasticsearch {
    hosts => "localhost"
    index => "request_log"
  }
}

注意statement对于的sql语句就是要同步数据时执行的sql
update_time > :sql_last_value代表每次同步新增的数据,只有就不会导出重复同步数据

执行配置文件

logstash -f request_mysql.conf

每隔一分钟就会执行一次sql用来同步数据
elasticsearch 的使用

查看所有索引

curl 'localhost:9200/_cat/indices?v'

在PHP中使用

下载elasticsearch的php扩展

composer.json文件中新增

{
    "require": {
        "elasticsearch/elasticsearch": "~6.0",
        "monolog/monolog": "~1.0"
    }
}
composer update

文件目录如下
elasticsearch 的使用

先试试搜索功能

搜索source=WEB的所有行
use Elasticsearch\ClientBuilder;
require '../vendor/autoload.php';

$client = ClientBuilder::create()
    ->build();

$params = [
    'index' => 'request_log',
    'body' => [
        'query' => [
            'match' => [
                'source' => 'WEB'
            ]
        ]
    ]
];

$response = $client->search($params);
print_r($response);

elasticsearch 的使用

total:搜索到的行数
hits:搜索到数据的具体内容

相关内容

热门资讯

国家两部门:开展矿山机器人应用... 国家矿山安全监察局综合司 工业和信息化部办公厅关于开展矿山机器人应用验证试点工作的通知 国家矿山安全...
打造“终身学习之城”,杭州积极... 潮新闻客户端 记者 徐婷 俞刘东 通讯员 许慧敏 人工智能时代日新月异,培养适应时代生存发展的人才,...
荣耀平板20问世 内置1010... 【CNMO科技消息】5月25日晚间,CNMO科技注意到,荣耀平板20已正式发布,新品首销价1899元...
华为芯片破局!五年干到1.4n... 说起何庭波这个名字,想必各位IT之家家友是既熟悉又陌生。 熟悉在于她坐拥华为公司董事、半导体业务部总...
美加州故障化学品储罐爆炸风险排... 新华社洛杉矶5月25日电(记者高山 谭晶晶)美国加利福尼亚州奥兰治县官员25日说,当地此前发生泄漏的...
雷军:小米汽车电池安全测试项目... 来源:环球网 【环球网科技综合报道】5月25日消息,小米创办人、董事长兼 CEO 雷军发布了小米汽...
2026续航“顶级”的全能旗舰... 要说近两年手机行业感知最强的技术进步,电池肯定算一个,毕竟今年连影像旗舰和小屏机都能把电池堆到700...
在德国失联的23岁中国留学生,... 近日,有网友发帖称,一名23岁中国男留学生在德国失联数日,其家属正在紧急寻人,引发关注。据极目新闻报...
美光HBM4增产进展顺利,HB... IT之家 5 月 25 日消息,据韩媒 The Elec 今日报道,美光科技第六代高带宽内存 HBM...
AIROBO正式发布“冲刺全球... 全球机器人产业,正在经历一次比“智能手机时代”更深层的产业迁移。 过去十年,机器人行业的竞争核心始终...