Elasticsearch简介

最新推荐文章于 2025-02-14 10:29:17 发布
最新推荐文章于 2025-02-14 10:29:17 发布
阅读量406 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huangfan322/article/details/108976163
本文介绍了Elasticsearch的基本概念，包括其特点、倒排索引原理及与Solr的区别。并通过实例演示了如何安装配置Elasticsearch及Kibana，进行索引管理与文档操作。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

介绍

特点

ES 是基于Lucence编写的开源分布式搜索引擎，它有以下几个特点

  • lucence：底层搜索引擎
  • 分布式：横向可扩展能力
  • 全文检索：将一段词语进行分词，并将分出的词语统一的放在一个分词库中，再搜索时，根据关键字取分词库中检索，找到匹配的内容（倒排索引）。

概念

ES使用倒排索引来检索数数据。类比：书本（index）–>小说｜散文｜杂志（type）–>书里面的一行一行内容（document）–> 字｜词组｜句子（filed）

  • Index索引：es里面使用的倒排索引来检索数据，所以我们这里有个索引的概念，它有2个含义，一个可以理解为代表倒排索引，一个为“索引数据”即存储数据到es里面（会经过倒排索引这个步骤）。

  • type类型

    • 5.x 版本一个index下可以有多个type
    • 6.x 版本一个index下只可以有一个type
    • 7.x 版本，index里面没有type

  • document文档，实质存储的内容，类比mysql表里面的row

  • filed 字段：文档里面字段，类比mysql 每个表里面的字段field。

查询步骤

  1. 将存放的数据以一定的方式进行分词，并将分词的内容存放到一个单独的分词库中。

  2. 当用户取查询数据时，会将用户的查询关键字进行分词，然后去分词库中匹配内容，最终得到数据的id标识

  3. 根据id标识去存放数据的位置拉去指定数据

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Mb3ueaGQ-1602215594343)(Elasticsearch%E7%AE%80%E4%BB%8B/es%E6%A3%80%E7%B4%A2%E6%B5%81%E7%A8%8B.png)]

对比solr

  1. solr 查询死数据，速度比es快。但是数据如果是改变的，solr查询速度会降低很多，ES的查询速度没有明显的改变

  2. solr搭建集群 依赖ZK，ES本身就支持集群搭建

  3. 最开始solr 的社区很火爆，针对国内文档 少，ES出现后，国内社区火爆程度 上升，，ES的文档非常健全

  4. ES对云计算和大数据支持很好

ES 安装

docker-compose 安装

编写docker-compose.yml

version: "3.1"
services:
  elasticsearch:
    image: daocloud.io/library/elasticsearch:6.5.4
    restart: always
    container_name: elasticsearch
    ports:
      - 9200:9200
  kibana:
    image: daocloud.io/library/kibana:6.5.4
    restart: always
    container_name: kibana
    ports:
      - 9200:9200
    environment:
            - elasticsearch_url=http://127.0.0.1:9200
    depends_on:
      - elasticsearch

官网下载

  • elasticsearch :https://www.elastic.co/downloads/past-releases/elasticsearch-6-5-4
  • kibana: https://www.elastic.co/downloads/past-releases/kibana-6-5-4

Elasticsearch 基本操作

restful语法

GET请求：
    http://ip:port/index :查询索引信息
    http://ip:port/index/type/doc_id :查询指定的文档信息
POST请求：
    http://ip:port/index/type/_search: 查询文档，可以在请求体中添加json字符串来代表查询条件
    http://ip:port/index/type/doc_id/_update: 修改文档，在请求体中添加json字符串来代表修改的信息
PUT请求：
    http://ip:port/index : 创建一个索引，需要在请求体中指定索引的信息
    http://ip:port/index/type/_mappings:代表创建索引时，指定索引文档存储属性的信息
DELETE 请求：
    http://ip:port/index： 删除跑路
    http://ip:port/index/type/doc_id:  删除指定的文档

Kibana 中操作

我们主要关注Kibana中的Dev Tools（操作es） 和Mangement（查看索引信息）

增删改查

  • 新建索引不指定mapping
#number_of_shards  分片
#number_of_replicas 备份
PUT /person
{
  "settings": {
    "number_of_shards": 5, 
    "number_of_replicas": 1
  }
}
  • 新建索引并指定mapping
#创建索引，指定数据类型
PUT /book
{
  "settings": {
    #分片数
    "number_of_shards": 5,
    #备份数
    "number_of_replicas": 1
  },
    #指定数据类型
 "mappings": {
    #类型 Type
   "novel":{
    #文档存储的field
     "properties":{
       #field属性名
       "name":{
         #类型
         "type":"text",
         #指定分词器
         "analyzer":"ik_max_word",
         #指定当前的field可以被作为查询的条件
         "index":true,
         #是否需要额外存储
         "store":false
       },
       "author":{
         "type":"keyword"
       },
       "count":{
         "type":"long"
       },
       "on-sale":{
         "type":"date",
           #指定时间类型的格式化方式
         "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
       },
        "descr":{
          "type":"text",
          "analyzer":"ik_max_word"
       }
     }
   }
 }
}
  • 查询索引
GET /person

  • 更新索引

    #number_of_shards  分片
#number_of_replicas 备份
PUT /person
{
  "settings": {
    "number_of_shards": 5, 
    "number_of_replicas": 1
  }
}

  • 删除索引

DELETE /person

Filed 类型

官方文档：https://www.elastic.co/guide/en/elasticsearch/reference/6.8/mapping-types.html

字符串类型:
  text: 一般用于全文检索，将当前field 进行分词
  keyword:当前field  不会进行分词
数值类型：
  long:
  Intger:
  short:
  byte:
  double:
  float:
  half_float: 精度比float 小一半
  scaled_float:根据一个long 和scaled 来表达一个浮点型 long-345, -scaled 100 ->3.45
时间类型：
  date类型,根据时间类型指定具体的格式
    PUT my_index
    {
      "mappings": {
        "_doc": {
          "properties": {
            "date": {
              "type":   "date",
              "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
            }
          }
        }
      }
    }
布尔类型：
  boolean 类型，表达true 和false
二进制类型：
  binary类型暂时支持Base64编码的字符串
范围类型：
  integer_range：
  float_range：
  long_range：赋值时，无需指定具体的内容，只需存储一个范围即可，gte,lte,gt,lt,
  double_range：
  date_range：
  ip_range：

    PUT range_index
    {
      "settings": {
        "number_of_shards": 2
      },
      "mappings": {
        "_doc": {
          "properties": {
            "expected_attendees": {
              "type": "integer_range"
            },
            "time_frame": {
              "type": "date_range", 
              "format": "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
            }
          }
        }
      }
    }

    PUT range_index/_doc/1?refresh
    {
      "expected_attendees" : { 
        "gte" : 10,
        "lte" : 20
      },
      "time_frame" : { 
        "gte" : "2015-10-31 12:00:00", 
        "lte" : "2015-11-01"
      }
    }
经纬度类型：
  geo_point:用来存储经纬度
IP类型：
  ip:可以存储IPV4 和IPV6
其他的数据类型，参考官网

文档操作

  • 新建
自动生成id
#添加文档，自动生成id
POST /book/novel
{
  "name":"盘龙",
  "author":"我吃西红柿",
  "count":100000,
  "on-sale":"2001-01-01",
  "descr":"大小的血睛鬃毛狮，力大无穷的紫睛金毛猿，毁天灭地的九头蛇皇，携带着毁灭雷电的恐怖雷龙……这里无奇不有，这是一个广博的魔幻世界。强者可以站在黑色巨龙的头顶遨游天际，恐怖的魔法可以焚烧江河，可以毁灭城池，可以夷平山岳……"
}

#添加文档,手动指定id
PUT /book/novel/1
{
  "name":"红楼梦",
  "author":"曹雪芹",
  "count":10000000,
  "on-sale":"2501-01-01",
  "descr":"中国古代章回体长篇小说，中国古典四大名著之一，一般认为是清代作家曹雪芹所著。小说以贾、史、王、薛四大家族的兴衰为背景，以富贵公子贾宝玉为视角，以贾宝玉与林黛玉、薛宝钗的爱情婚姻悲剧为主线，描绘了一批举止见识出于须眉之上的闺阁佳人的人生百态，展现了真正的人性美和悲剧美"
}
  • 修改
#修改文档，使用doc 方式
POST /book/novel/1/_update
{
  "doc":{
      #指定需要修改的field和对应的值
    "count":566666
  }
  • 删除
#根据id删除文档
DELETE /book/novel/3mEnk3MBaSKoGN4T2olw
elasticsearch 简介
踏 浪的博客
02-15 733
一、elasticsearch介绍 Elasticsearch是基于Apache Lucene™（一个全文本搜索引擎库）构建的开源搜索引擎。Lucene可以说是当今存在的最先进，高性能和功能齐全的搜索引擎库-既是开源的又是专有的。 Lucene： 是一个全文本搜索引擎库 ，直接使用Lucene来检索非常复杂。 Elasticsearch：是 Java 语言编写，内部使用Lucen...
Elasticsearch背景初识
weixin_30341745的博客
08-21 294
Apache 　　最初，Apache基金会的开发爱好者开发并维护一个叫Apache的HTTP服务器，后来，Apache服务器越来越火，就启动了更多的项目，比如PHP、Java Apache以及更多的子项目。比如Jakarta。 Jakarta 　　Jakarta是为了发展Java容器而启动的Java Apache的项目。后来随着Java的火爆而成为了囊括了众多基于Java语言开源软...
ElasticSearch
热门推荐
weixin_43624549的博客
05-21 1万+
ElasticSearch 一：ElasticSearch安装 Elasticsearch 是使用 java 开发的，且 7.8 版本的 ES 需要 JDK 版本 1.8 以上，安装前注意java环境的准备。 官网地址：https://www.elastic.co/cn/ 中文网址：https://elasticsearch.cn/download/ 下载地址：https://www.elastic.co/cn/downloads/past-releases#elasticsearch 下载后解压即用，目
10、全文检索 -- Elasticsearch -- 介绍、下载、安装、配置、开启权限认证、为 Elasticsearch 启用 SSL 和 HTTPS 支持
Java 领域技术分享
02-19 2277
全文检索 -- Elasticsearch -- 介绍、下载、安装、配置、开启权限认证、为 Elasticsearch 启用 SSL 和 HTTPS 支持
elasticsearch简介及资源推荐
07-01
### Elasticsearch简介 Elasticsearch是一个基于Lucene的开源搜索引擎，为用户提供了一个高度可扩展且具有容错能力的全文检索解决方案。作为一个分布式系统，Elasticsearch能够处理大量的数据，并且能够实时地提供...
ElasticSearch简介.pptx
05-20
#### 一、ElasticSearch简介 ##### 1. ES定义 ElasticSearch 是一个基于 Apache Lucene 构建的分布式、实时搜索与分析引擎。它不仅仅提供了强大的全文检索功能，还能够进行数据分析、文档存储等操作。Elastic...
Elasticsearch简介及与MySQL查询原理对比
12-28
Elasticsearch是一个广泛应用于搜索引擎领域的分布式数据库，它以其高效检索和强大的分析能力著称。与传统的关系型数据库如MySQL相比，Elasticsearch在数据存储和查询机制上有显著差异。 首先，Elasticsearch的数据...
Elasticsearch 入门
junxinsiwo的专栏
10-10 4599
Elasticsearch 是一个分布式的开源搜索和分析引擎，适用于各种数据，包括文本、数字、元数据等。它能够实现实时的文档检索、分析和可视化，被广泛应用于网站和应用的全文搜索功能中。Elasticsearch 基于 Lucene 开发，但它的目标是比 Lucene 更加简单易用，通过 RESTful API 提供了强大的功能集合，允许用户执行复杂的多字段查询，并能快速获取结果。
Elasticsearch全文检索学习
Biexiansheng的博客
10-31 2924
ElasticSearch官方网址：https://www.elastic.co ElasticSearch官方网址（中文）：https://www.elastic.co/cn/ Elasticsearch 权威指南（中文版文档，在线观看）：https://es.xiaoleilu.com/ 1、ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力...
ES(elasticsearch)搜索引擎安装和使用_es搜索引擎(2)，2024年最新如何化身BAT面试收割机
2401_84248681的博客
04-15 293
比如我们的博客网站，当你创建一篇博客的时候可以发送“添加”的json命令，然后你开发一个搜索页面，当你输入关键词点搜索的时候，可以发送查询的命令，这样返回的结果就是你的搜索结果，只不过需要你自己润色一下，让展现更美观。分片和复制的数量可以在索引创建的时候指定。这里面的myappname是你自己可以改成自己应用的名字，这在elasticSearch数据存储中是完全隔离的，而myblog是我们在同一个app中想要维护的不同的数据，就是你的不同数据，比如文章、用户、评论，他们最好都分开，这样搜索的时候也不会混。
【Elasticsearch教程11】Mapping字段类型之日期时间date date_nanos
Java Spring Elasticsearch
08-30 6687
JSON没有date类型，但我们可以把以下类型作为日期时间存入ES。类型说明字符串日期格式的字符串，如"2015-01-01"或"2015/01/01 12:10:30"长整型从开始纪元（1970-01-01 00:00:00 UTC）开始的毫秒数整型从开始纪元（1970-01-01 00:00:00 UTC）开始的秒数上面的UTC(Universal Time Coordinated) 叫做世界统一时间，中国大陆和 UTC 的时差是 + 8 ,也就是 UTC+8。在ES内部，时间以。...
大数据框架ElasticSearch学习网站，让你的技能瞬间升级！
qq_45746668的博客
01-05 609
Elasticsearch是一个分布式、免费和开放的搜索和分析引擎，它适用于所有类型的数据，包括文本Elasticsearch是一个分布式、免费和开放的搜索和分析引擎，它适用于所有类型的数据，包括文本、数字、地理空间、结构化和非结构化数据。这个引擎在2010年首次发布，由Elasticsearch N.V.（即现在的 Elastic）开发而成，基于Apache Lucene构建。 Elasticsearch以其简单的REST风格API、分布式特性、速度和可扩展性而闻名，是Elastic Stack的核心组件
如何学习Elasticsearch（ES）：从入门到精通的完整指南
最新发布
Kenneth55的专栏
02-14 1805
通过本文，我们提供了一个系统的学习路径，帮助你从零开始掌握Elasticsearch。无论你是新手还是有一定经验的开发者，都可以根据自己的情况选择合适的学习资源和实践项目，逐步深入理解Elasticsearch的强大功能。
ES学习及简介
李金华的博客
09-30 2770
一.ElasticSearch简介 1、ElasticSearch（简称ES） Elasticsearch是用Java开发并且是当前最流行的开源的企业级搜索引擎。 能够达到近实时搜索，稳定，可靠，快速，安装使用方便。 客户端支持Java、.NET（ C#）、PHP、Python、Ruby等多种语言。 官方网站: https://www.elastic.co/ 下载地址：https://www.elastic.co/cn/start 创始人:Shay Banon（谢巴农） 2
分布式搜索引擎Elasticsearch开发实战基础篇
11-14
本教程旨在带领大家进入搜索引擎领域，从无到有，深入浅出的讲解了什么是搜索引擎，搜索引擎的作用以及ElasticSearch在实际工作中的作用等。
elasticsearch初体验
djqueen的博客
03-23 5988
elasticsearch近年来可谓非常之火啊，大家都在用，我自然也是想简单体验一波，为啥写这篇呢，自然是体验过程中又踩坑了，所以，记录一波。。。 体验环境 为了避开繁琐且充满报错的安装过程，我选择了使用docker进行部署，es官方有打包好的镜像，在后台run起来就可以直接用的那种，超级方便，但是，还是有坑。。。 既然是用docker，自然在windows，linux，macos上都欧克的...
docker-compose安装elk6.8.8
十个菜
07-07 973
- TAKE_FILE_OWNERSHIP=true #允许挂载，不然es容器启动不了 version: '3' services: elasticsearch: image: elasticsearch:6.8.8 container_name: elasticsearch6 environment: - "cluster.name=elasticsearch" #设置集群名称为elasticsearch - "discovery.typ...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值