亚洲乱码中文字幕综合,中国熟女仑乱hd,亚洲精品乱拍国产一区二区三区,一本大道卡一卡二卡三乱码全集资源,又粗又黄又硬又爽的免费视频

深入了解MySQL ClickHouse中的物化視圖功能

 更新時間:2023年05月11日 11:26:07   作者:堅持是一種態(tài)度  
MapReduce是一種用于處理大規(guī)模數(shù)據(jù)集的并行編程模型,其特點高效性和可擴展性,這篇文章主要介紹了MySQL ClickHouse中的物化視圖功能,需要詳細了解可以參考下文

數(shù)據(jù)表與視圖

  • 數(shù)據(jù)庫表是一種關(guān)系型數(shù)據(jù)庫中的基本對象,用于存儲數(shù)據(jù)。每個表包含多個列和行,其中每個列代表一種數(shù)據(jù)類型,每一行則表示一條記錄
  • 視圖是一種虛擬的表格,它并不實際存在于數(shù)據(jù)庫中,而是通過一個SQL查詢語句定義。視圖在數(shù)據(jù)庫管理中具有重要作用,在實踐中也是非常常見的。
  • 視圖可以從一個或多個表中選擇部分列或行作為數(shù)據(jù)顯示,并提供了訪問數(shù)據(jù)的一種靈活方式
  • 與表格不同的是,視圖不能存儲數(shù)據(jù),但對于一些常用的查詢操作,卻能大大簡化SQL操作
  • 通過創(chuàng)建視圖,可以大大簡化復(fù)雜的查詢,同時也可以保持數(shù)據(jù)獨立性,提高數(shù)據(jù)的安全性
  • 視圖可以為數(shù)據(jù)提供安全保護,限制用戶對特定數(shù)據(jù)的訪問權(quán)限。例如,你的系統(tǒng)要和另一個系統(tǒng)對接,對方要求訪問某些數(shù)據(jù),又不想搞接口對接;此時就可以根據(jù)對方的需要,建幾個視圖,再給對方開個只讀這幾個視圖的低權(quán)限用戶;這樣既滿足對方查詢需求,又不會被對方讀取或修改到其他數(shù)據(jù)。

ClickHouse的物化視圖

  • 像上面說的,視圖并不存儲任何數(shù)據(jù),而是通過查詢操作動態(tài)生成數(shù)據(jù)。它可以幫助用戶在數(shù)據(jù)表上創(chuàng)建一層抽象,獲得一些更加方便和易于維護的業(yè)務(wù)邏輯
  • ClickHouse是一個快速的列式數(shù)據(jù)庫管理系統(tǒng),ClickHouse的視圖也是一種虛擬的表,其內(nèi)容由一個查詢定義
  • ClickHouse的普通視圖(view),和其他數(shù)據(jù)庫一樣,沒有緩存數(shù)據(jù),每次查詢都需要重新生成數(shù)據(jù)
  • 但是ClickHouse還支持一種物化視圖(Materialized View),字面意義理解,就是實際去物理存儲視圖
  • 物化視圖是一種特殊的視圖,它會在創(chuàng)建的時候自動執(zhí)行查詢,并將結(jié)果保存到一張實際的表格中。在查詢物化視圖時,可以直接使用保存的結(jié)果進行查詢,而無需重新執(zhí)行查詢語句,從而顯著提高查詢效率
  • 簡單來說,就是“空間換時間”,提前查詢好存儲起來,占用了一定的空間,當查詢時直接拿來使用,因此在使用時需要權(quán)衡查詢效率與存儲空間的使用。

物化視圖的更新

ClickHouse的物化視圖(Materialized View)是一種特殊的表,它能夠在底層數(shù)據(jù)更新后,自動更新自己的數(shù)據(jù)。數(shù)據(jù)更新包括兩個方面的變化:基礎(chǔ)表的數(shù)據(jù)修改和基礎(chǔ)表的數(shù)據(jù)新增。

基礎(chǔ)表的數(shù)據(jù)修改

如果基礎(chǔ)表的數(shù)據(jù)修改,物化視圖會自動更新。這是通過ClickHouse的引擎和存儲方式來實現(xiàn)的。當基礎(chǔ)表的一行記錄被修改,ClickHouse會將這個修改轉(zhuǎn)化為一個新的INSERT語句,并且將其發(fā)送到物化視圖中。這樣,物化視圖就能夠自動更新自己的數(shù)據(jù)。

基礎(chǔ)表的數(shù)據(jù)新增

如果基礎(chǔ)表的數(shù)據(jù)新增,物化視圖同樣會自動更新。這是通過設(shè)置物化視圖的刷新機制來實現(xiàn)的。刷新機制有兩種類型:定時刷新和自動刷新。

(1)定時刷新

定時刷新需要使用MATERIALIZED VIEWREFRESH INTERVAL語法來指定刷新時間間隔。例如,以下語句表示每5分鐘自動刷新物化視圖:

CREATE MATERIALIZED VIEW my_mv
engine = MergeTree
AS SELECT * FROM my_table
SETTINGS refresh_interval = 300

(2)自動刷新

自動刷新可以通過在基礎(chǔ)表上創(chuàng)建觸發(fā)器實現(xiàn)。當基礎(chǔ)表有數(shù)據(jù)插入時,觸發(fā)器會自動插入相應(yīng)的數(shù)據(jù)到物化視圖中。例如,以下語句創(chuàng)建了一個觸發(fā)器,當my_table中插入一條新數(shù)據(jù)時,相應(yīng)的數(shù)據(jù)將插入到my_mv中:

CREATE TRIGGER insert_trigger ON my_table FOR INSERT
AS INSERT INTO my_mv SELECT * FROM my_table WHERE id = NEW.id

另外,我們也可以手動刷新物化視圖,甚至可以使用一些定時手段,實時或定時去觸發(fā)它。當然,我們要考慮資源占用和性能損耗。

REFRESH MATERIALIZED VIEW xxx;

需要注意的是,ClickHouse的物化視圖雖然能夠自動更新數(shù)據(jù),但是會帶來一些性能上的損失,尤其是在基礎(chǔ)表數(shù)據(jù)量較大的情況下。因此,在設(shè)計物化視圖時,需要考慮這個因素,同時選擇合適的刷新機制來平衡性能和數(shù)據(jù)實時性的需求。

當然,我們既然選擇使用ClickHouse,肯定是數(shù)據(jù)新增比較多,而極少去修改刪除。對于一般對實時要求不高的業(yè)務(wù)場景,定時刷新完全足夠我們使用了。

使用示例

ClickHouse中,創(chuàng)建視圖的語法為:

CREATE VIEW [IF NOT EXISTS] name [ON CLUSTER cluster]
( SELECT ... )

其中,name為視圖的名稱,SELECT語句為需要執(zhí)行的查詢語句。創(chuàng)建視圖之后,可以使用SELECT語句查詢視圖的內(nèi)容。

  • ClickHouse中,創(chuàng)建物化視圖的語法為:
CREATE MATERIALIZED VIEW [IF NOT EXISTS] name [ON CLUSTER cluster] TO [db.]table [ENGINE = engine] [POPULATE] AS SELECT ...

其中,name為物化視圖的名稱,[db.]table為保存結(jié)果的表格名稱,SELECT語句為需要執(zhí)行的查詢語句。在創(chuàng)建物化視圖時,可以選擇是否執(zhí)行第一次查詢,并將結(jié)果保存到表格中。后續(xù)查詢時,可以直接使用表格中保存的結(jié)果進行查詢,從而提高查詢效率。

  • 像一些其他參數(shù),例如PARTITION BY、ORDER BY等也可以在創(chuàng)建物化視圖時使用,和創(chuàng)建表的使用方法一樣,也可以創(chuàng)建完物化視圖后再去更新設(shè)置
  • 下面給出一個普通物化視圖的完整示例。假設(shè)我們有一個表名為example,并且我們想創(chuàng)建一個名為example_mv的物化視圖,refresh_interval設(shè)置為5分鐘,以便定時更新數(shù)據(jù)。以下是創(chuàng)建該視圖的示例SQL語句:
CREATE MATERIALIZED VIEW example_mv 
ENGINE = MergeTree()
AS 
SELECT
    Column1,
    Column2,
    ...
FROM example
-- 設(shè)置刷新間隔為5分鐘
SETTINGS refresh_interval = 300

到此這篇關(guān)于深入了解MySQL ClickHouse中的物化視圖功能的文章就介紹到這了,更多相關(guān)MySQL ClickHouse物化視圖內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • Mysql數(shù)據(jù)庫之Binlog日志使用總結(jié)(必看篇)

    Mysql數(shù)據(jù)庫之Binlog日志使用總結(jié)(必看篇)

    下面小編就為大家?guī)硪黄狹ysql數(shù)據(jù)庫之Binlog日志使用總結(jié)(必看篇)。小編覺得挺不錯的,現(xiàn)在就分享給大家,也給大家做個參考。一起跟隨小編過來看看吧
    2017-03-03
  • 談?wù)凪ySQL中的隱式轉(zhuǎn)換

    談?wù)凪ySQL中的隱式轉(zhuǎn)換

    這篇文章主要介紹了MySQL中的隱式轉(zhuǎn)換的相關(guān)資料,幫助大家更好的理解和使用MySQL數(shù)據(jù)庫,感興趣的朋友可以了解下
    2020-10-10
  • 關(guān)于mysql自增id,你需要知道的

    關(guān)于mysql自增id,你需要知道的

    這篇文章主要介紹了關(guān)于mysql自增id的相關(guān)資料,幫助大家更好的理解和學習mysql,感興趣的朋友可以了解下
    2020-08-08
  • mysql 服務(wù)意外停止1067錯誤解決辦法小結(jié)

    mysql 服務(wù)意外停止1067錯誤解決辦法小結(jié)

    今天在配置服務(wù)器時安裝mysql5.5總是無法安裝,查看日志錯誤提示為1067錯誤,下面來看我的解決辦法
    2012-11-11
  • 刪除MySQL重復(fù)數(shù)據(jù)的方法

    刪除MySQL重復(fù)數(shù)據(jù)的方法

    這篇文章主要介紹了刪除MySQL重復(fù)數(shù)據(jù)的方法,通過建立中間表實現(xiàn)針對冗余數(shù)據(jù)的刪除功能,非常具有實用價值,需要的朋友可以參考下
    2014-12-12
  • CentOS7.5 安裝 Mysql8.0.19的教程圖文詳解

    CentOS7.5 安裝 Mysql8.0.19的教程圖文詳解

    這篇文章主要介紹了CentOS7.5 安裝 Mysql8.0.19的教程,本文圖文并茂給大家介紹的非常詳細,具有一定的參考借鑒價值,需要的朋友可以參考下
    2020-01-01
  • MySQL 常用命令

    MySQL 常用命令

    MySQL 常用命令...
    2006-12-12
  • win32 mysql 5.7.27 安裝配置方法圖文教程

    win32 mysql 5.7.27 安裝配置方法圖文教程

    這篇文章主要為大家詳細介紹了win32 mysql 5.7.27 安裝配置方法圖文教程,文中安裝步驟介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們可以參考一下
    2019-10-10
  • 深入理解MySQL數(shù)據(jù)類型的選擇優(yōu)化

    深入理解MySQL數(shù)據(jù)類型的選擇優(yōu)化

    這篇文章主要介紹了深入理解MySQL數(shù)據(jù)類型的選擇優(yōu)化,MySQL數(shù)據(jù)類型是定義列中可以存儲什么數(shù)據(jù)以及該數(shù)據(jù)實際怎樣存儲的基本規(guī)則,正確的選擇數(shù)據(jù)庫字段的字段類型對于數(shù)據(jù)庫性能有很大的影響
    2022-08-08
  • Mysql和文件系統(tǒng)的關(guān)聯(lián)詳情

    Mysql和文件系統(tǒng)的關(guān)聯(lián)詳情

    這篇文章主要介紹了Mysql和文件系統(tǒng)的關(guān)聯(lián)詳情,Mysql常用的存儲引擎如InnoDB、MyISAM采用的是文件存儲,自然和文件系統(tǒng)掛鉤,那么Mysql都有哪些地方用到了文件系統(tǒng)呢,下面我們一起進入文章學習詳細內(nèi)容吧
    2022-09-09

最新評論