StarRocks Summit 2023 技術(shù)交流峰會(huì )圓滿(mǎn)落幕

2023年11月17日，由 StarRocks 社區發(fā)起、鏡舟科技主辦的 StarRocks 年度大型技術(shù)交流峰會(huì ) StarRocks Summit 2023 在上海成功舉行。

2023年11月17日，由 StarRocks 社區發(fā)起、鏡舟科技主辦的 StarRocks 年度大型技術(shù)交流峰會(huì ) StarRocks Summit 2023 在上海成功舉行。

本次峰會(huì )以「極速進(jìn)化，融合"新"生」為主題，40余場(chǎng)分享演講在全天密集開(kāi)展，來(lái)自平安銀行、華潤、騰訊游戲、阿里云、伊利、美的、京東等頭部企業(yè)的大數據專(zhuān)家圍繞數據進(jìn)化、需求進(jìn)化、技術(shù)進(jìn)化，細致講解大數據分析的最新技術(shù)和最佳實(shí)踐，為大數據分析行業(yè)呈現了一場(chǎng)精彩的技術(shù)盛宴。

峰會(huì )吸引了數百名企業(yè)用戶(hù)代表和開(kāi)發(fā)者到場(chǎng)聆聽(tīng)交流，另有數萬(wàn)名數據分析愛(ài)好者、從業(yè)者線(xiàn)上參會(huì )，通過(guò)多種渠道觀(guān)看了峰會(huì )直播。

新面孔：StarRocks 大用戶(hù)陣容不斷壯大

這是 StarRocks 第三次舉行年度技術(shù)交流峰會(huì )，峰會(huì )延續了以前的高規格，亮相的企業(yè)用戶(hù)代表堪稱(chēng)全明星陣容，全都是所在行業(yè)頭部，并且具有廣泛的社會(huì )知名度和影響力。

其中，既有騰訊、阿里、京東等在去年峰會(huì )上分享過(guò)經(jīng)驗的互聯(lián)網(wǎng)“老面孔”，也有不少來(lái)自金融、制造、零售等行業(yè)的新面孔，比如伊利、平安銀行、芒果TV等企業(yè)就是首次派代表到場(chǎng)演講。

作為一款技術(shù)領(lǐng)先的開(kāi)源 OLAP 數據庫產(chǎn)品，StarRocks 一直備受大用戶(hù)青睞，隨著(zhù) StarRocks 加速向各行各業(yè)滲透，大用戶(hù)陣容也在不斷擴大，截至目前，已有超過(guò)300家市值10億美金的企業(yè)使用 StarRocks。

在大用戶(hù)的示范和帶動(dòng)下，中小企業(yè)用戶(hù)規模同樣在迅速壯大，StarRocks 社區用戶(hù)已突破1萬(wàn)，并依然保持著(zhù)高速增長(cháng)態(tài)勢。

另外，根據峰會(huì )演講嘉賓透露的使用情況，用戶(hù)對 StarRocks 的部署規模也在快速增長(cháng)。

其中，騰訊游戲公共數據平臺部總監崔玉明介紹，騰訊游戲已上線(xiàn)近100個(gè) StarRocks 集群，共有1470個(gè) BE 節點(diǎn)，1300 個(gè) CN 節點(diǎn)，湖數據量達4.99P。

從應用場(chǎng)景來(lái)看，嘉賓們分享的場(chǎng)景包括金融營(yíng)銷(xiāo)、用戶(hù)畫(huà)像、自助分析、報表體驗升級等，基本涵蓋了當前實(shí)時(shí)數倉技術(shù)的所有經(jīng)典應用場(chǎng)景。

鏡舟科技CEO孫文現表示，StarRocks 開(kāi)源社區為制勝場(chǎng)景的誕生提供了肥沃的土壤，各行各業(yè)、各種需求在社區中碰撞、交融，產(chǎn)生出 StarRocks 的制勝場(chǎng)景。

據孫文現介紹，鏡舟科技基于 StarRocks 打造的企業(yè)級產(chǎn)品全年經(jīng)歷了近百次POC，成功率達到90%以上。

StarRocks 產(chǎn)品能力有多硬核，由此可見(jiàn)一斑，這也可解釋為什么會(huì )有越來(lái)越多的用戶(hù)選擇 StarRocks。

新范式：StarRocks 引領(lǐng)湖倉一體趨勢

本次峰會(huì )共設置了一個(gè)主論壇、四個(gè)分論壇，除了企業(yè)用戶(hù)代表基于實(shí)踐的經(jīng)驗分享，開(kāi)發(fā)者代表進(jìn)行的功能詮釋同樣精彩。

過(guò)去一年，StarRocks 先后發(fā)布了2.5、3.0、3.1三個(gè)重磅版本，其中 3.0 版本推出的存算分離架構為開(kāi)源業(yè)界首創(chuàng )，曾在行業(yè)內引起巨大反響。

StarRocks TSC Member、鏡舟科技 CTO 張友東介紹，升級到存算分離架構后，用戶(hù)的存儲成本能下降90%，而計算節點(diǎn)則因為無(wú)狀態(tài)，可以通過(guò)快速彈性、跨可用區部署等方式來(lái)提高計算的可用性，并且計算資源能夠進(jìn)行物理隔離，按需獨立彈性伸縮。

到 3.1 版本，開(kāi)啟 Local cache 的情況下，存算分離架構下的性能表現已接近本地存儲的水平。

與此同時(shí)，現在 StarRocks 的湖倉分析能力已非常完備，不僅支持internal、Data lake、JDBC、ES等catalog，還支持跨數據源的聯(lián)幫分析。

另外，主鍵模型的能力在過(guò)去一年也得到持續提升，已經(jīng)同時(shí)支持全內存和持久化的索引，并支持了 partial update、conditional update 的能力，在性能方面，針對批量更新的場(chǎng)景，引入了按列更新的模式，性能相比按行更新提升10倍以上。

張友東表示，未來(lái)數據演進(jìn)的趨勢是湖倉一體，用戶(hù)無(wú)需關(guān)注是建湖還是建倉，不管是構建數據湖還是構建數據倉庫，企業(yè)最終的目標是低成本、高效的解決數據分析問(wèn)題。StarRocks 在具備存算分離、湖倉分析、物化視圖等一系列重量級特性后，實(shí)現了往 Lakehouse 引擎的升級，借助 StarRocks 可兼具數據湖和數據庫倉庫的優(yōu)勢。

目前已有數十家企業(yè)在基于 StarRocks 實(shí)踐湖倉新范式，并取得非常好的業(yè)務(wù)效果。

其中，芒果 TV 采用 StarRocks 存算分離作為統一的 Lakehouse，所有數據導入到 StarRocks 進(jìn)行統一管理；微信近實(shí)時(shí)的數據寫(xiě)入到 Iceberg，通過(guò) Iceberg 直接分析；攜程數據統一存儲在 Hive，采用 StarRocks 直接查詢(xún)加速報等等。

新未來(lái)：StarRocks 的進(jìn)化故事還在繼續

據張友東介紹，未來(lái) StarRocks 還會(huì )朝著(zhù)云原生方向繼續邁進(jìn)，推動(dòng)實(shí)時(shí)分析鏈路進(jìn)一步精簡(jiǎn)，通過(guò) ETL on lakehouse，all in one 的作業(yè)模式，幫助企業(yè)低成本、高效率地發(fā)掘數據價(jià)值。

值得一提的是，StarRocks 社區是由鏡舟科技與阿里云、騰訊、小紅書(shū)、滴滴等互聯(lián)網(wǎng)公司共同建設，包括全局字典函數、同步物化視圖增強、Paimon Catalog等在內的許多feature都由互聯(lián)網(wǎng)大廠(chǎng)貢獻，以后注定也還會(huì )從大廠(chǎng)生產(chǎn)環(huán)境中持續吸收靈感和助力，給業(yè)界帶來(lái)更多驚喜。

與此同時(shí)，圍繞 StarRocks 形成的商業(yè)生態(tài)也越來(lái)越完善，以鏡舟科技為代表的商業(yè)團隊不斷提升著(zhù)產(chǎn)品的易用性、穩定性，將產(chǎn)品能力落地到復雜的需求環(huán)境中，創(chuàng )造更大價(jià)值。

隨著(zhù)此次峰會(huì )精彩內容的傳播，相信會(huì )有越來(lái)越多的企業(yè)受到啟發(fā)，利用OLAP領(lǐng)域的最前沿技術(shù)，完成自身業(yè)務(wù)場(chǎng)景的升級和進(jìn)化。

最后，記得關(guān)注微信公眾號：鎂客網(wǎng)（im2maker），更多干貨在等你！