jjzjj

5.elasticsearch映射操作(创建|修改|删除)及字段类型

PacosonSWJTU 2023-11-02 原文

【README】

1.本文介绍了 elasticsearch 映射的操作方式,包括映射创建,修改,删除;

2.映射定义:映射是定义文档及其包含的字段如何存储和索引的过程。 例如,使用映射来定义:

  • ① 哪些字符串字段应该被作为全文检索字段;
  • ② 哪些字段包含 数字,日期,及地理位置;
  • ③ 日期格式化;
  • ④ 自定义规则控制动态增加字段的映射;

小结:

  • 映射是用来定义一个文档,以及它所包含的属性,是如何存储和索引的

3.索引类型被移除

  • 6.0之前: index/type/document
  • 6.0之后: 移除了type 类型;

4.本文部分内容总结自:

Mapping | Elasticsearch Guide [7.2] | Elastic


【1】elasticsearch映射字段类型

序号

字段类型

(首字母小写)

字段类型父类

描述

1

text

string

文本字符串-分词-支持全文检索

2

keyword

string

文本字符串-不分词-不支持全文检索

3

long

integer

short

byte

double

float

half_float

scaled_float

numeric

数值型

4

date

date

日期

5

date_nanos

date nanoseconds

日期-纳秒

6

boolean

boolean

布尔

7

binary

binary

二进制

8

integer_range

float_range

long_range

double_range

date_range

range

范围

9

object

object

单个json对象类型

10

nested

nested

Json对象数组嵌套

11

geo-point

geo-shape

geo

地理数据类型

12

arrays

arrays

数组类型;

数组元素必须有相同的字段类型

13

multi-fields

multi-fields

多字段类型;


【2】_mapping 映射 api

【2.1】查询映射详情

Get  localhost:9200/bank/_mappings 
{
    "bank": {
        "mappings": {
            "properties": {
                "account_number": {
                    "type": "long"
                },
                "address": {
                    "type": "text",
                    "fields": {
                        "keyword": {  //  子属性keyword 用于做精确匹配搜索 
                            "type": "keyword",
                            "ignore_above": 256
                        }
                    }
                },
                "age": {
                    "type": "long"
                },
                "balance": {
                    "type": "long"
                },
                "city": {
                    "type": "text",
                    "fields": {
                        "keyword": {
                            "type": "keyword",
                            "ignore_above": 256
                        }
                    }
                },
...............
}

【2.2】创建索引,指定映射

Put localhost:9200/my_index
{
    "mappings":{
        "properties":{
            "age":{"type":"integer"}
            , "email":{"type":"keyword"}
            , "name":{"type":"text"}
        }
    }
}

// 响应结果 
{
    "acknowledged": true,
    "shards_acknowledged": true,
    "index": "my_index"
}

【2.3】修改映射,添加新字段

Put localhost:9200/my_index/_mappings 
{
   "properties":{
       "employee_id":{
           "type":"keyword"
           ,"index":false  // 该字段不被索引到 
        }
   }
}

【3】修改索引映射与数据迁移

1)除了记录在案的情况外,现有的字段映射无法更新

  • 更改映射意味着使已索引的文档无效。
  • 相反,您应该使用正确的映射创建一个新索引,并将您的数据重新索引到该新索引中(数据迁移)。
  • 如果您只想重命名字段而不更改其映射,那么引入别名(alias)字段可能是有意义的。

【3.1】不能直接修改映射字段(新增字段是可以的)

对于已经存在的映射字段,我们不能更新,无论是更新字段名,还是字段类型。

  • 更新必须创建新的索引,然后进行数据迁移
  • 注意: 添加字段是可以的;

【3.2】修改映射字段的方法(间接)

  • 步骤1:根据老索引创建新的索引;
  • 步骤2:然后进行数据迁移;

【例】 根据老索引 bank 创建新索引 newbank,并把age的字段类型从long修改为 integer ;

步骤1)创建新索引 newbank  

Put localhost:9200/newbank
{
    "mappings":{
        "properties": {
                "account_number": {
                    "type": "long"
                },
                "address": {
                    "type": "keyword"
                },
                "age": {
                    "type": "integer"
                },
                "balance": {
                    "type": "long"
                },
                "city": {
                    "type": "text"
                },
                "email": {
                    "type": "text"
                },
                "employer": {
                    "type": "text"
                },
                "firstname": {
                    "type": "text"
                },
                "gender": {
                    "type": "keyword"
                },
                "lastname": {
                    "type": "text"
                },
                "state": {
                    "type": "text"
                }
            }
    }
}

// 创建结果 
{
    "acknowledged": true,
    "shards_acknowledged": true,
    "index": "newbank"
}

步骤2)迁移数据-reindex

Post  localhost:9200/_reindex
{
    "source":{
        "index":"bank"
        , "type":"account"
    }
    , "dest":{
        "index":"newbank"
    }
}

// 数据迁移结果 
{
    "took": 349,
    "timed_out": false,
    "total": 1000,
    "updated": 0,
    "created": 1000,
    "deleted": 0,
    "batches": 1,
    "version_conflicts": 0,
    "noops": 0,
    "retries": {
        "bulk": 0,
        "search": 0
    },
    "throttled_millis": 0,
    "requests_per_second": -1.0,
    "throttled_until_millis": 0,
    "failures": []
}

有关5.elasticsearch映射操作(创建|修改|删除)及字段类型的更多相关文章

  1. ruby - 如何在 Ruby 中顺序创建 PI - 2

    出于纯粹的兴趣,我很好奇如何按顺序创建PI,而不是在过程结果之后生成数字,而是让数字在过程本身生成时显示。如果是这种情况,那么数字可以自行产生,我可以对以前看到的数字实现垃圾收集,从而创建一个无限系列。结果只是在Pi系列之后每秒生成一个数字。这是我通过互联网筛选的结果:这是流行的计算机友好算法,类机器算法:defarccot(x,unity)xpow=unity/xn=1sign=1sum=0loopdoterm=xpow/nbreakifterm==0sum+=sign*(xpow/n)xpow/=x*xn+=2sign=-signendsumenddefcalc_pi(digits

  2. python - 如何使用 Ruby 或 Python 创建一系列高音调和低音调的蜂鸣声? - 2

    关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭4年前。Improvethisquestion我想在固定时间创建一系列低音和高音调的哔哔声。例如:在150毫秒时发出高音调的蜂鸣声在151毫秒时发出低音调的蜂鸣声200毫秒时发出低音调的蜂鸣声250毫秒的高音调蜂鸣声有没有办法在Ruby或Python中做到这一点?我真的不在乎输出编码是什么(.wav、.mp3、.ogg等等),但我确实想创建一个输出文件。

  3. ruby - 使用 Vim Rails,您可以创建一个新的迁移文件并一次性打开它吗? - 2

    使用带有Rails插件的vim,您可以创建一个迁移文件,然后一次性打开该文件吗?textmate也可以这样吗? 最佳答案 你可以使用rails.vim然后做类似的事情::Rgeneratemigratonadd_foo_to_bar插件将打开迁移生成的文件,这正是您想要的。我不能代表textmate。 关于ruby-使用VimRails,您可以创建一个新的迁移文件并一次性打开它吗?,我们在StackOverflow上找到一个类似的问题: https://sta

  4. ruby-on-rails - 如何从 format.xml 中删除 <hash></hash> - 2

    我有一个对象has_many应呈现为xml的子对象。这不是问题。我的问题是我创建了一个Hash包含此数据,就像解析器需要它一样。但是rails自动将整个文件包含在.........我需要摆脱type="array"和我该如何处理?我没有在文档中找到任何内容。 最佳答案 我遇到了同样的问题;这是我的XML:我在用这个:entries.to_xml将散列数据转换为XML,但这会将条目的数据包装到中所以我修改了:entries.to_xml(root:"Contacts")但这仍然将转换后的XML包装在“联系人”中,将我的XML代码修改为

  5. ruby - 我可以使用 Ruby 从 CSV 中删除列吗? - 2

    查看Ruby的CSV库的文档,我非常确定这是可能且简单的。我只需要使用Ruby删除CSV文件的前三列,但我没有成功运行它。 最佳答案 csv_table=CSV.read(file_path_in,:headers=>true)csv_table.delete("header_name")csv_table.to_csv#=>ThenewCSVinstringformat检查CSV::Table文档:http://ruby-doc.org/stdlib-1.9.2/libdoc/csv/rdoc/CSV/Table.html

  6. ruby-on-rails - 无法使用 Rails 3.2 创建插件? - 2

    我对最新版本的Rails有疑问。我创建了一个新应用程序(railsnewMyProject),但我没有脚本/生成,只有脚本/rails,当我输入ruby./script/railsgeneratepluginmy_plugin"Couldnotfindgeneratorplugin.".你知道如何生成插件模板吗?没有这个命令可以创建插件吗?PS:我正在使用Rails3.2.1和ruby​​1.8.7[universal-darwin11.0] 最佳答案 随着Rails3.2.0的发布,插件生成器已经被移除。查看变更日志here.现在

  7. ruby-on-rails - 如何验证非模型(甚至非对象)字段 - 2

    我有一个表单,其中有很多字段取自数组(而不是模型或对象)。我如何验证这些字段的存在?solve_problem_pathdo|f|%>... 最佳答案 创建一个简单的类来包装请求参数并使用ActiveModel::Validations。#definedsomewhere,atthesimplest:require'ostruct'classSolvetrue#youcouldevencheckthesolutionwithavalidatorvalidatedoerrors.add(:base,"WRONG!!!")unlesss

  8. ruby-on-rails - form_for 中不在模型中的自定义字段 - 2

    我想向我的Controller传递一个参数,它是一个简单的复选框,但我不知道如何在模型的form_for中引入它,这是我的观点:{:id=>'go_finance'}do|f|%>Transferirde:para:Entrada:"input",:placeholder=>"Quantofoiganho?"%>Saída:"output",:placeholder=>"Quantofoigasto?"%>Nota:我想做一个额外的复选框,但我该怎么做,模型中没有一个对象,而是一个要检查的对象,以便在Controller中创建一个ifelse,如果没有检查,请帮助我,非常感谢,谢谢

  9. ruby - 如何使用 RSpec::Core::RakeTask 创建 RSpec Rake 任务? - 2

    如何使用RSpec::Core::RakeTask初始化RSpecRake任务?require'rspec/core/rake_task'RSpec::Core::RakeTask.newdo|t|#whatdoIputinhere?endInitialize函数记录在http://rubydoc.info/github/rspec/rspec-core/RSpec/Core/RakeTask#initialize-instance_method没有很好的记录;它只是说:-(RakeTask)initialize(*args,&task_block)AnewinstanceofRake

  10. ruby - 我可以使用 aws-sdk-ruby 在 AWS S3 上使用事务性文件删除/上传吗? - 2

    我发现ActiveRecord::Base.transaction在复杂方法中非常有效。我想知道是否可以在如下事务中从AWSS3上传/删除文件:S3Object.transactiondo#writeintofiles#raiseanexceptionend引发异常后,每个操作都应在S3上回滚。S3Object这可能吗?? 最佳答案 虽然S3API具有批量删除功能,但它不支持事务,因为每个删除操作都可以独立于其他操作成功/失败。该API不提供任何批量上传功能(通过PUT或POST),因此每个上传操作都是通过一个独立的API调用完成的

随机推荐