1月7日,阿里云實時數(shù)倉Hologres發(fā)布最新版本,在成本、可用性、在線高可用等多方面進(jìn)行了能力升級,行存吞吐提升100%,列存吞吐提升30%,支持行列共存,支持更加豐富的OLAP分析場景,支持Binlog全鏈路事件驅(qū)動加工,原生JSON數(shù)據(jù)類型和索引,進(jìn)一步降低開發(fā)和運維成本,增強(qiáng)Hologres高并發(fā)的在線服務(wù)能力。
Hologres是一站式實時數(shù)據(jù)倉庫引擎,支持海量數(shù)據(jù)實時寫入、實時更新、更新及分析、實時分析,支持PB級數(shù)據(jù)多維分析與即席分析以及高并發(fā)低延遲的在線數(shù)據(jù)服務(wù)等,與MaxCompute、Flink、DataWorks深度融合,提供離在線一體化全棧數(shù)倉解決方案。
阿里云資深技術(shù)專家果貝表示:“隨著企業(yè)數(shù)字化轉(zhuǎn)型的加劇,實時數(shù)倉技術(shù)開始逐漸從幕后走到臺前,被越來越多的企業(yè)作為生產(chǎn)系統(tǒng)支撐多種業(yè)務(wù)場景,一站式、在線化、敏捷化成為實時數(shù)倉新的發(fā)展趨勢”。
數(shù)倉建設(shè)過程中,開發(fā)、運維成本和在線高可用一直是難點和痛點。大數(shù)據(jù)場景上,處理的數(shù)據(jù)量和復(fù)雜度遠(yuǎn)高于數(shù)據(jù)庫場景,傳統(tǒng)數(shù)倉通常是用不同的產(chǎn)品去適用不同的場景,比如ClickHouse常用于OLAP分析,HBase常用于服務(wù)場景,無法用一個產(chǎn)品滿足所有需求,多套系統(tǒng)非常容易造成架構(gòu)冗余,運維復(fù)雜等問題,導(dǎo)致成本只增不減。同時,隨著實時數(shù)倉被作為生產(chǎn)系統(tǒng)的廣泛使用,業(yè)務(wù)對系統(tǒng)的可用性和穩(wěn)定性都提出了更高更嚴(yán)苛的要求,但實時數(shù)倉技術(shù)要實現(xiàn)生產(chǎn)高可用也需要面臨一定的取舍和挑戰(zhàn),比如高性能的同時資源隔離、宕機(jī)時的快速恢復(fù)能力等,以滿足不同場景的SLA。
基于以上問題,Hologres在成本、可用性、在線高可用等多方面進(jìn)行了能力升級,進(jìn)一步降低開發(fā)和運維成本,增強(qiáng)Hologres高并發(fā)的在線服務(wù)能力,行存吞吐提升100%,列存吞吐提升30%,支持行列共存,支持更加豐富的OLAP分析場景,支持Binlog全鏈路事件驅(qū)動加工,原生JSON數(shù)據(jù)類型和索引,加速半結(jié)構(gòu)數(shù)據(jù)的檢索,堅持一個系統(tǒng)解決大數(shù)據(jù)問題的原則,降本增效,助力服務(wù)分析一體化建設(shè)。
在生產(chǎn)高可用方面,Hologres重磅發(fā)布不同層次的隔離與高可用部署,支持單實例內(nèi)資源組隔離,實現(xiàn)多租戶的計算資源隔離,支持多實例高可用部署(共享存儲),實現(xiàn)讀寫分離和故障隔離,并結(jié)合Hologres底層核心調(diào)度等能力,實現(xiàn)不同場景生產(chǎn)高可用。此外,Hologres在可用性、生態(tài)兼容、企業(yè)級運維能力上不斷探索和更新,幫助企業(yè)實現(xiàn)新一代一站式實時數(shù)倉。
據(jù)了解,Hologres還多次支持了阿里巴巴雙11等大促活動,在2021年阿里巴巴雙11期間,經(jīng)受住了每秒11.2億條的高速寫入,和每秒1.1億次的查詢峰值(包含點查和OLAP查詢),創(chuàng)歷史記錄。
除此之外,Hologres除了支持阿里巴巴的GMV實時大屏等業(yè)務(wù)外,還支持了實時搜索推薦、菜鳥智能物流、達(dá)摩院無人車配送等核心業(yè)務(wù)場景,這意味著實時數(shù)倉技術(shù)開始在阿里巴巴核心業(yè)務(wù)嶄露頭角,并在性能、生產(chǎn)穩(wěn)定性等方面經(jīng)受住了嚴(yán)格的生產(chǎn)考驗。
了解更多發(fā)布詳情,請查看:
【發(fā)布會云棲號直播間】https://yqh.aliyun.com/live/detail/27102
【訓(xùn)練營打卡學(xué)習(xí)】https://developer.aliyun.com/learning/trainingcamp/holo/3