ElasticSearch 動態(tài)映射實戰(zhàn)詳解
什么是動態(tài)映射
通俗的講,就是文檔中的字段類型可以由ES動態(tài)識別,無需在創(chuàng)建索引的時候規(guī)定字段的類型。
比如在項目中,如果不確定字段數(shù)據(jù)類型的情況下,可以使用動態(tài)映射,ES可以利用動態(tài)映射來決定該字段的類型,并自動把該字段添加到映射中。
在使用的時候要結(jié)合實際業(yè)務(wù)來考慮,如果將 ES 當(dāng)作主要的數(shù)據(jù)存儲使用,并且希望出現(xiàn)未知字段時拋出異常,那么開啟動態(tài) mapping 并不適用。
***在不確定索引類型字段時,可以先創(chuàng)建臨時索引,然后存儲數(shù)據(jù),查詢映射。再刪除臨時索引。這樣就得到數(shù)據(jù)的基本映射了,可以在其上做精細(xì)化修改。 ***
映射規(guī)則
null沒有字段被添加true or falseboolean 類型浮點類型數(shù)字float 類型數(shù)字long 類型JSON 對象object 類型數(shù)組由數(shù)組中第一個非空值決定string有可能是 date 類型(若開啟日期檢測)、double 或 long 類型、text 類型、keyword 類型
在 mapping 中可以通過 dynamic 設(shè)置來控制是否自動新增字段,接受以下參數(shù):
- true:默認(rèn)值為 true,自動添加字段。
- false:忽略新的字段。
- strict:嚴(yán)格模式,發(fā)現(xiàn)新的字段拋出異常。
日期規(guī)則
es中當(dāng)字符串的格式為:yyyy/MM/dd HH:mm:ss Z||yyyy/MM/dd Z時,es動態(tài)模板會自動認(rèn)為該字符串為日志類型
- 可以通過
date_detection來關(guān)閉日期模板匹配 - 可以通過
dynamic_date_formats來指定日期字符匹配模板
PUT my_index
{
"mappings": {
"dynamic_date_formats": ["MM/dd/yyyy"]
}
}
數(shù)字檢測
動態(tài)映射有時會將數(shù)字映射為字符串類型,可以通過開啟數(shù)字檢測來解決該問題
PUT my_index
{
"mappings": {
"numeric_detection": true
}
}
動態(tài)映射模板
定義動態(tài)映射模板,來格式化動態(tài)映射的規(guī)則,動態(tài)映射模板包含以下關(guān)鍵字:
match_mapping_type:用來匹配當(dāng)前映射的字段類型??梢岳斫鉃椋?dāng)字段類型為match_mapping_type時match、unmatch 、match_pattern:用來匹配當(dāng)前映射字段的名稱??梢岳斫鉃?,當(dāng)字段名稱匹配match、match_pattern時,當(dāng)字段名稱不匹配unmatch時path_match、path_unmatch:用來匹配當(dāng)前映射字段的路徑,通常用來匹配嵌套字段。可以理解為,當(dāng)字段路徑為path_match時,當(dāng)字段路徑不匹配path_unmatch時{name}, {dynamic_type}:用來進(jìn)行占位符匹配,具體怎么用,都可以,但是最終映射的值為name或動態(tài)類型 當(dāng)然也可以直接強(qiáng)制指定類型和屬性
下面看一些示例:
match_mapping_type
dynamic_templates是動態(tài)模板名稱,什么字段都可以。integers與strings時動態(tài)模板項名稱
PUT my_index
{
"mappings": {
"dynamic_templates": [
{
"integers": {
"match_mapping_type": "long",
"mapping": {
"type": "integer"
}
}
},
{
"strings": {
"match_mapping_type": "string",
"mapping": {
"type": "text",
"fields": {
"raw": {
"type": "keyword",
"ignore_above": 256
}
}
}
}
}
]
}
}
match、unmatch
PUT my_index
{
"mappings": {
"dynamic_templates": [
{
"longs_as_strings": {
"match": "long_*",
"unmatch": "*_text",
"mapping": {
"type": "long"
}
}
}
]
}
}
match_pattern
{
"mappings": {
"dynamic_templates": [
{
"longs_as_strings": {
"match_pattern": "regex",
"match": "^profit_\d+$",
"unmatch": "*_text",
"mapping": {
"type": "long"
}
}
}
]
}
}
path_match、path_unmatch
{
"mappings": {
"dynamic_templates": [
{
"full_name": {
"path_match": "name.*",
"path_unmatch": "*.middle",
"mapping": {
"type": "text",
"copy_to": "full_name"
}
}
}
]
}
}
{name}、{dynamic_type}
{
"mappings": {
"dynamic_templates": [
{
"named_analyzers": {
"match_mapping_type": "string",
"match": "*",
"mapping": {
"type": "text",
"analyzer": "{name}"
}
}
},
{
"no_doc_values": {
"match_mapping_type":"*",
"mapping": {
"type": "{dynamic_type}",
"doc_values": false
}
}
}
]
}
}
直接指定類型
{
"mappings": {
"dynamic_templates": [
{
"strings_as_keywords": {
"match_mapping_type": "string",
"mapping": {
"type": "keyword"
}
}
}
]
}
}
索引模板
索引模板的作用是提前創(chuàng)建好模板,后續(xù)索引的創(chuàng)建會根據(jù)匹配規(guī)則,自動生成該索引的配置
- 模板只在索引創(chuàng)建時起作用,修改模板不會影響已創(chuàng)建的索引。
- 可以設(shè)置多個索引模板,這些設(shè)置會被
merge在一起。 - 可以設(shè)置
order的數(shù)值,控制merge的過程。
當(dāng)一個索引被創(chuàng)建時,如果符合多個模板,那么模板之間merge符合以下規(guī)則:
order值高的模板會覆蓋order值低的模板。- 相同字段會覆蓋
- 不同字段會疊加
感興趣的同學(xué),可以自行去查詢相關(guān)文檔,這個不是很常用
結(jié)束語
本節(jié)主要講了ES中的動態(tài)mapping概念以及它的相關(guān)屬性。下節(jié)給大家講ES中文檔相關(guān)的API操作。
以上就是ElasticSearch 動態(tài)映射實戰(zhàn)詳解的詳細(xì)內(nèi)容,更多關(guān)于ElasticSearch 動態(tài)映射的資料請關(guān)注腳本之家其它相關(guān)文章!
相關(guān)文章
MybatisPlus的LambdaQueryWrapper用法詳解
LambdaQueryWrapper<Tag>?是 MyBatis-Plus 框架中的一個功能強(qiáng)大的查詢構(gòu)造器,它用于構(gòu)建 SQL 查詢條件,具有一定的參考價值,感興趣的可以了解一下2024-10-10
idea 實現(xiàn)縱列選擇和大小寫轉(zhuǎn)換操作
這篇文章主要介紹了idea 實現(xiàn)縱列選擇和大小寫轉(zhuǎn)換操作,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2021-02-02
Java Web中常用的分頁組件(Java端實現(xiàn))
本文通過使用場景分析給大家介紹了Java Web中常用的分頁組件(Java端實現(xiàn)),非常不錯,具有參考借鑒價值,需要的朋友參考下吧2017-05-05
在Java中使用redisTemplate操作緩存的方法示例
這篇文章主要介紹了在Java中使用redisTemplate操作緩存的方法示例,在Redis中可以存儲String、List、Set、Hash、Zset。感興趣的可以了解一下2019-01-01

