ES7基础篇-05-动态映射操作
文章目录
- 1. 简述
- 2. 动态字段映射
1. 简述
通常情况下，我们使用ES建立索引的步骤是，先创建索引，然后定义索引中的字段以及映射的类型，然后再向索引中导入数据。
而动态映射是ES中一个非常重要的概念，你可以直接向文档中导入一条数据，与此同时，索引、字段、字段类型都会自动创建，无需你做其他的操作。这就是动态映射的神奇之处。
2. 动态字段映射
ES的动态映射默认是开启的，动态映射的默认规则如下：
| JSON的数据类型 | JSON的数据类型 |
|---|---|
| null | 不会映射字段 |
| true 或 false | boolean类型 |
| 浮点型数字 | float |
| 整型数字 | long |
| JSON对象 | Object |
| 数组 | 第一个非空值得类型 |
| String | 1、如果满足日期类型的格式，映射为日期类型 |
| String | 2、如果满足数字型的格式，映射为long或者float |
| String | 3、如果就是字符串，会 映射为一个text类型和一个keyword类型 |
eg： 随便创建一个文档试一试
PUT /wql01/_doc/1
{
"mappings": {
"my_null": null,
"my_boolean": false,
"my_float": 1.56,
"my_long": 3,
"my_object": {
"my_first": "first value",
"my_second": "second_value"
},
"my_array": [
1,
2,
3
],
"my_date_1": "2020-05-01",
"my_date_2": "2020/05/01 12:03:03",
"my_date_3": "05/01/2020",
"my_string_long": "1",
"my_string_float": "4.6",
"my_string": "中华人民共和国"
}
}
查看结果： GET /wql01
{
"wql01" : {
"aliases" : { },
"mappings" : {
"properties" : {
"mappings" : {
"properties" : {
"my_array" : {
"type" : "long"
},
"my_boolean" : {
"type" : "boolean"
},
"my_date_1" : {
"type" : "date"
},
"my_date_2" : {
"type" : "date",
"format" : "yyyy/MM/dd HH:mm:ss||yyyy/MM/dd||epoch_millis"
},
"my_date_3" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_float" : {
"type" : "float"
},
"my_long" : {
"type" : "long"
},
"my_object" : {
"properties" : {
"my_first" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_second" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
}
}
},
"my_string" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_string_float" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_string_long" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
}
}
}
}
},
"settings" : {
"index" : {
"routing" : {
"allocation" : {
"include" : {
"_tier_preference" : "data_content"
}
}
},
"number_of_shards" : "1",
"provided_name" : "wql01",
"creation_date" : "1636266489958",
"number_of_replicas" : "1",
"uuid" : "FZFVwJjWQOGwXkJMdxw0zg",
"version" : {
"created" : "7150199"
}
}
}
}
}
大概结果就是：
| 字段 | 映射结果 | 是否达到预期 | 原因 |
|---|---|---|---|
| my_null | 没有映射 | 是 | null值不映射 |
| my_boolean | boolean | 是 | |
| my_float | float | 是 | |
| my_long | long | 是 | |
| my_object | object | 是 | my_object里自动生成了两个字段的映射 |
| my_array | long | 是 | 数组中的数字是long型 |
| my_date_1 | date | 是 | |
| my_date_2 | date | 是 | |
| my_date_3 | text | 否 | 没有指定这种日期格式，所以映射为text |
| my_string_long | text | 否 | 数字探测默认关闭，没有打开 |
| my_string_float | text | 否 | 数字探测默认关闭，没有打开 |
| my_string | text | 是 | 普通字符串，映射为text |
下面我们把数字探测打开，执行如下请求：
PUT /wql01
{
"mappings": {
"numeric_detection": true
}
}
发现报错：
{
"error" : {
"root_cause" : [
{
"type" : "resource_already_exists_exception",
"reason" : "index [wql01/FZFVwJjWQOGwXkJMdxw0zg] already exists",
"index_uuid" : "FZFVwJjWQOGwXkJMdxw0zg",
"index" : "wql01"
}
],
"type" : "resource_already_exists_exception",
"reason" : "index [wql01/FZFVwJjWQOGwXkJMdxw0zg] already exists",
"index_uuid" : "FZFVwJjWQOGwXkJMdxw0zg",
"index" : "wql01"
},
"status" : 400
}
由于我们的索引dynamic-index中，存在了映射关系，再进行设置是会报错的，所以我们要将索引删除，执行如下请求：
DELETE /wql01
再新增 日期的设置要和数字探测:
PUT /wql01
{
"mappings": {
"numeric_detection": true,
"dynamic_date_formats": ["MM/dd/yyyy"]
}
}
然后再新增刚刚那一笔数据，查看：
{
"wql01" : {
"aliases" : { },
"mappings" : {
"dynamic_date_formats" : [
"MM/dd/yyyy"
],
"numeric_detection" : true,
"properties" : {
"mappings" : {
"properties" : {
"my_array" : {
"type" : "long"
},
"my_boolean" : {
"type" : "boolean"
},
"my_date_1" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_date_2" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_date_3" : {
"type" : "date",
"format" : "MM/dd/yyyy"
},
"my_float" : {
"type" : "float"
},
"my_long" : {
"type" : "long"
},
"my_object" : {
"properties" : {
"my_first" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_second" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
}
}
},
"my_string" : {
"type" : "text",
"fields" : {
"keyword" : {
"type" : "keyword",
"ignore_above" : 256
}
}
},
"my_string_float" : {
"type" : "float"
},
"my_string_long" : {
"type" : "long"
}
}
}
}
},
"settings" : {
"index" : {
"routing" : {
"allocation" : {
"include" : {
"_tier_preference" : "data_content"
}
}
},
"number_of_shards" : "1",
"provided_name" : "wql01",
"creation_date" : "1636267063528",
"number_of_replicas" : "1",
"uuid" : "tWQy9ptPRmiLu_QOQ5Gl0A",
"version" : {
"created" : "7150199"
}
}
}
}
}
我们重点看一下以上几个字段，my_string_float和my_string_long映射成我们想要的类型了，由于我们开启了数字探测。再看看我们映射的3个日期类型，咦？只有my_date_3映射了日期类型，其他两个都是映射成了text类型，这是由于我们在设置dynamic_date_formats时，只指定了一种格式。我们只需要把其他两种类型的日期格式也加上就可以了。
PUT /wql01
{
"mappings": {
"numeric_detection": true,
"dynamic_date_formats": ["MM/dd/yyyy","yyyy/MM/dd HH:mm:ss","yyyy-MM-dd"]
}
}
先删再创建再添加数据，发现符合预期