青云QingCloud 數(shù)據(jù)庫研發(fā)工程師 邰翀
此次活動由 3306π 社區(qū)發(fā)起，旨在圍繞 MySQL 核心技術(shù)，將互聯(lián)網(wǎng)行業(yè)中最重要的數(shù)據(jù)化解決方案和核心技術(shù)理念帶到傳統(tǒng)行業(yè)中，構(gòu)建良好交流互動環(huán)境，分享數(shù)據(jù)庫前沿知識。 在演講中，邰翀介紹了 MySQL 復制歷程，從最早的同構(gòu)數(shù)據(jù)庫復制，到 2013 年的增強半同步復制，再到 2017 年支持組復制（MGR），實現(xiàn)金融級別可用的數(shù)據(jù)同步方案。隨后，以青云QingCloud 為代表的各大廠商開始研發(fā)高可用組件，如 QingCloud MySQL Plus，通過真正的強一致性和高可用能力，來管理 MySQL 選舉、探活，并訂正數(shù)據(jù)準確性，從而達到集群數(shù)據(jù)強一致性、主從秒級切換、無中心化自動選主，以及依托于云的跨區(qū)容災(zāi)能力。但 MySQL 在有了高可用能力后，雖然可通過增加只讀實例的方式來增強 AP 能力，但是其數(shù)據(jù)結(jié)構(gòu)和分布方式?jīng)Q定了 AP 能力相對較弱。 那么，如何增強 AP 能力呢？答案是：ClickHouse。但ClickHouse ?能否主動同步并訂閱 MySQL 數(shù)據(jù)呢？答案是：當然可以。青云QingCloud ClickHouse 團隊自主研發(fā)的庫引擎——MaterializeMySQL 引擎，就很好地解決這一問題。 邰翀闡述道：“MaterializeMySQL 是對 MySQL 庫級別的映射，目前已作為實驗特性合并到 ClickHouse 20.8 版本中。其通過消費 binlog 存儲到 MergeTree 的方式來訂閱 MySQL 數(shù)據(jù)，可以直接將 ClickHouse 作為一個分析實例加入到 MySQL 復制中，替代 MySQL 一部分只讀實例進行商務(wù)分析、用戶畫像等分析業(yè)務(wù)。ClickHouse 本身在支持海量函數(shù)來提升分析能力的同時，還支持標準 SQL，可以讓使用者享受到更好的體驗?！? 與其他的 ClickHouse 同步 MySQL 數(shù)據(jù)的方式相比，MaterializeMySQL 的優(yōu)勢更加明顯。邰翀認為，MaterializeMySQL 打通了從 MySQL 到 ClickHouse 的數(shù)據(jù)傳輸通路，不僅提供了將 MySQL 數(shù)據(jù)精細化分析的能力，也為接下來的 HTAP 打下了基礎(chǔ)。 隨著萬物互聯(lián)的快速發(fā)展，數(shù)據(jù)開始呈現(xiàn)爆炸式增長，這也促使 MySQL 的能力進化加速。青云QingCloud 將繼續(xù)發(fā)揮自主創(chuàng)新的優(yōu)勢，為解決海量數(shù)據(jù)分析提供先進的技術(shù)和產(chǎn)品支持，助力企業(yè)在海量數(shù)據(jù)中深度挖掘數(shù)據(jù)價值，為數(shù)字化轉(zhuǎn)型提供決策支持。
分享