版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
產(chǎn)品部負(fù)責(zé)人APSARA云棲大會(huì)林亮阿里云研究員數(shù)據(jù)規(guī)模數(shù)據(jù)規(guī)模APSARA云棲大會(huì)湖倉(cāng)融合智能預(yù)測(cè)實(shí)時(shí)分析報(bào)表&大屏單客戶數(shù)據(jù)規(guī)模業(yè)務(wù)價(jià)值數(shù)據(jù)源OLTP數(shù)據(jù)源OLTP數(shù)據(jù)庫(kù)企業(yè)應(yīng)用三方數(shù)據(jù)數(shù)據(jù)集成數(shù)據(jù)處理數(shù)據(jù)歸一數(shù)據(jù)分析數(shù)據(jù)消費(fèi)APSARA云棲大會(huì)數(shù)據(jù)庫(kù)的易用、大數(shù)據(jù)的規(guī)模處理/分析一體化處理/分析一體化看板報(bào)表即席分析實(shí)時(shí)分析做深自研做深自研融合MPP和BSP兩種執(zhí)行Query級(jí)按需彈性在線分析任務(wù)支持分時(shí)彈性,離線處理任務(wù)支持提高數(shù)據(jù)一致性和時(shí)效性一份數(shù)據(jù)極致彈性擁抱開源XIHE高效讀寫湖格式復(fù)雜離線處理/ML,自建Spark遷移數(shù)據(jù)多版本等能力打通開放格式APSARA云棲大會(huì)Architecture統(tǒng)一元數(shù)據(jù)/權(quán)限統(tǒng)一元數(shù)據(jù)/權(quán)限外部存儲(chǔ)9parquet管存采算數(shù)據(jù)源存儲(chǔ)層計(jì)算層訪問層APSARA云棲大會(huì)CoreTechnologies云原生化一體化智能化APSARA云棲大會(huì)ServerlessScheduling池資源統(tǒng)一管理,保障彈性高成功率,支持不同類型和規(guī)模的負(fù)載彈性效率提升大規(guī)模的彈性擴(kuò)縮容,應(yīng)對(duì)突發(fā)業(yè)務(wù)變化;基于歷史指標(biāo)畫像,自動(dòng)化管理在離線一體化部署在離線混部、多租戶資源隔離和保障APSARA云棲大會(huì)AutoMulti-Cluster基于負(fù)載的自動(dòng)彈性基于實(shí)例的CPU/內(nèi)存負(fù)載、查詢排隊(duì)、查詢并發(fā)數(shù)等指彈性時(shí)間查詢?cè)诙郼luster間自動(dòng)路由、負(fù)載均衡、資源隔離等支持更高并發(fā)度*Source:基于某云上客戶生產(chǎn)環(huán)境數(shù)據(jù)基于遠(yuǎn)端共享存儲(chǔ),實(shí)現(xiàn)存算分離,狀態(tài)解耦節(jié)點(diǎn)快速?gòu)椥元?dú)立Compaction服務(wù)高性能存儲(chǔ)格式提供block級(jí)別的并發(fā)掃描能力、更好的內(nèi)存復(fù)用能力單GB成本彈性時(shí)間CPU消耗APSARA云棲大會(huì)Compute-StorageSeparatedArchitectureStorageAPIWorkerWorkerStorageAPICompaction*Source:基于某云上客戶生產(chǎn)環(huán)境數(shù)據(jù)APSARA云棲大會(huì)CoreTechnologies云原生化一體化智能化自動(dòng)恢復(fù)熱點(diǎn)打散實(shí)時(shí)物化視圖HudiDeltaLakeIceberg資源管理ExactlyOnce元數(shù)據(jù)發(fā)現(xiàn)KafkaSLSAPSARA云棲大會(huì)高吞吐入湖突發(fā)流量彈性適應(yīng)用戶實(shí)際負(fù)載,確保數(shù)據(jù)的連續(xù)傳輸和可靠性低成本數(shù)據(jù)管道建設(shè)和維護(hù)成本大幅降低實(shí)時(shí)物化視圖單客戶 快速?gòu)椥猿杀鞠陆翟隽克⑿氯克⑿?Source:基于某云上客戶生產(chǎn)環(huán)境數(shù)據(jù)ApplicationREAD/WRITEREADAnalyticDB邏輯復(fù)制–增量同步Zero-ETL并行全量同步ApplicationREAD/WRITEREADAnalyticDB邏輯復(fù)制–增量同步Zero-ETL并行全量同步APSARA云棲大會(huì)TransactionalDatabaseZero-ETL簡(jiǎn)單、穩(wěn)定性、實(shí)時(shí)高速同步性能快速構(gòu)建分析數(shù)倉(cāng)初始化全量同步性能提升實(shí)時(shí)物化視圖增量刷新全量刷新*Source:基于某云上客戶生產(chǎn)環(huán)境數(shù)據(jù)APSARA云棲大會(huì)FederationAnalysis事務(wù)數(shù)據(jù)庫(kù)統(tǒng)一視圖內(nèi)外部數(shù)據(jù)和訪問統(tǒng)一視圖內(nèi)外部數(shù)據(jù)和訪問元數(shù)據(jù)覆蓋內(nèi)部存儲(chǔ)和外部數(shù)據(jù)源,支持倉(cāng)引擎和Spark同時(shí)訪問直觀友好的用戶界面和API豐富數(shù)據(jù)源支持海量分區(qū)元數(shù)據(jù)管理更精細(xì)的元數(shù)據(jù),加強(qiáng)優(yōu)化器預(yù)估準(zhǔn)確度,支持掃描裁剪APSARA云棲大會(huì)讀寫元數(shù)據(jù)讀寫元數(shù)據(jù)統(tǒng)一元數(shù)據(jù)管理外表(支持多種數(shù)據(jù)數(shù)據(jù)源/離線業(yè)務(wù))OSS(多種開源數(shù)據(jù)格式支持)…庫(kù)表管理(精確/全文索引/實(shí)時(shí)寫入/在線業(yè)務(wù))存儲(chǔ)計(jì)算APSARA云棲大會(huì)CoreTechnologies云原生化一體化智能化OperatorOperatorTree查詢性能WholeStageCodeGenYesAPSARA云棲大會(huì) 智能化RemoteCache 訪問性能APSARA云棲大會(huì)AICapabilities向量數(shù)據(jù)存儲(chǔ)向量數(shù)據(jù)存儲(chǔ)/檢索AnalyticDBRuntime)庫(kù)表優(yōu)化庫(kù)表優(yōu)化APSARA云棲大會(huì)數(shù)據(jù)收集采集與清洗智能診斷與監(jiān)控平臺(tái)反饋與調(diào)優(yōu)診斷、調(diào)優(yōu)與監(jiān)控算子畫像分析APSARA云棲大會(huì)模板指標(biāo)變化模板指標(biāo)變化 模板查詢樣例異常異常Pattern檢測(cè)APSARA云棲大會(huì)表傾斜檢測(cè)表傾斜檢測(cè)表分布不合理檢測(cè)表訪問檢測(cè)APSARA云棲大會(huì)CoreTechnologies云原生化一體化智能化數(shù)據(jù)源OLTP數(shù)據(jù)庫(kù)數(shù)據(jù)源OLTP數(shù)據(jù)庫(kù)企業(yè)應(yīng)用三方數(shù)據(jù)數(shù)據(jù)消費(fèi)看板報(bào)表即席分析實(shí)時(shí)分析APSARA云棲大會(huì)數(shù)據(jù)庫(kù)的易用、大數(shù)據(jù)的規(guī)模服務(wù)數(shù)千客戶,每天處理EB數(shù)據(jù)每天彈性伸縮數(shù)萬(wàn)Core數(shù)據(jù)集成數(shù)據(jù)處理數(shù)據(jù)歸一數(shù)據(jù)分析APSARA云棲大會(huì)AnalyticDBforTECHSession姚奕瑋AnalyticDBPostgreSQL版產(chǎn)品部負(fù)責(zé)人01AIGC+大數(shù)據(jù)時(shí)代下的企業(yè)需求02性價(jià)比、流批一體的融合引擎求APSARA云棲大會(huì) 企業(yè)級(jí)一站式 企業(yè)級(jí)一站式AnalyticDBAnalyticDBfor倉(cāng)內(nèi)智能倉(cāng)內(nèi)智能APSARA云棲大會(huì)性價(jià)比流批一體企業(yè)級(jí)一站式企業(yè)級(jí)一站式AnalyticDBfor企業(yè)級(jí)能力APSARA云棲大會(huì)ClientPlannerClientPlannerParser00完整繼承PG生態(tài)功能GreenplumGreenplumTuple-at-a-timeVectorizedAlgorithmHeapOrcAocsParquetBeamAvroCostCost(RMB/Hour)某國(guó)際知名數(shù)倉(cāng)4xlargex8ADB-PG7.02c16gx480APSARA云棲大會(huì)某國(guó)際知名數(shù)倉(cāng)ADB-PG0APSARA云棲大會(huì)0-TPC-TPC-HRuntime(s)CostPerGB(RMB/Hour)10一?支持?jǐn)?shù)據(jù)流式寫入一?支持?jǐn)?shù)據(jù)流式寫入?支持?jǐn)?shù)據(jù)批量導(dǎo)入流批一體存儲(chǔ)?支持流式更新計(jì)算結(jié)果流批一體計(jì)算APSARA云棲大會(huì)流批流批體AnalyticDBforAnalyticDBforPostgreSQLAPSARA云棲大會(huì)流式寫入+批量導(dǎo)入AutoOptimize分布式事務(wù)+MVCCAPSARA云棲大會(huì)原始數(shù)據(jù)原始數(shù)據(jù)原始數(shù)據(jù)實(shí)時(shí)MV實(shí)時(shí)MV實(shí)時(shí)MV微批調(diào)度ADS實(shí)時(shí)流式處理實(shí)時(shí)MV實(shí)時(shí)流式處理實(shí)時(shí)流式處理實(shí)時(shí)MV微批調(diào)度微批調(diào)度JDBC實(shí)時(shí)分析實(shí)時(shí)寫入實(shí)時(shí)寫入實(shí)時(shí)處理倉(cāng)內(nèi)實(shí)時(shí)流式處理join/agg/表達(dá)式實(shí)時(shí)分析APSARA云棲大會(huì)數(shù)據(jù)數(shù)據(jù)共享存儲(chǔ)支持實(shí)時(shí)寫入共享集群支持索引共享集群APSARA云棲大會(huì)一站式AIGC平臺(tái)致性問題大語(yǔ)言模型:內(nèi)部對(duì)接和集成各類LLM以及模型服務(wù)API,并且提供例如文檔解析、Chunking、Embeddings等各種GenerativeAI相關(guān)服務(wù)Fine-tune能力:數(shù)據(jù)經(jīng)過倉(cāng)內(nèi)ETL清洗后,可以dump到OSS,并且調(diào)用DashScope服務(wù)進(jìn)行模型的訓(xùn)練換、冷熱分層、備份恢復(fù)、數(shù)據(jù)加密、審計(jì)日志等APSARA云棲大會(huì)APSARA云棲大會(huì)群否可以路由到ADB;根據(jù)cost決定是否要路APSARA云棲大會(huì)強(qiáng)大的資源管理能力強(qiáng)大的資源管理能力完善的白屏化支持安
溫馨提示
- 1. 本站所有資源如無(wú)特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 汽修行業(yè)安全操作規(guī)范
- 推動(dòng)管理培訓(xùn)
- 機(jī)械制造行業(yè)工藝創(chuàng)新培訓(xùn)心得
- 《護(hù)士條例解析周紅》課件
- 2024年河南省濮陽(yáng)市公開招聘警務(wù)輔助人員輔警筆試自考題2卷含答案
- 2024年安徽省宿州市公開招聘警務(wù)輔助人員輔警筆試自考題2卷含答案
- 2022年河南省焦作市公開招聘警務(wù)輔助人員輔警筆試自考題1卷含答案
- 2024年湖北省宜昌市公開招聘警務(wù)輔助人員輔警筆試自考題2卷含答案
- 2022年內(nèi)蒙古自治區(qū)巴彥淖爾市公開招聘警務(wù)輔助人員輔警筆試自考題2卷含答案
- 2022年陜西省渭南市公開招聘警務(wù)輔助人員輔警筆試自考題1卷含答案
- 《臨床顱內(nèi)壓增高》課件
- 2024老師聘用合同范本
- 國(guó)開電大《建筑結(jié)構(gòu)試驗(yàn)》形考任務(wù)1-4參考答案
- 年度分析報(bào)告格式范文
- 2024年度吉林省國(guó)家電網(wǎng)招聘之法學(xué)類典型題匯編及答案
- 2024年世界職業(yè)院校技能大賽中職組“嬰幼兒保育組”賽項(xiàng)考試題庫(kù)-下(多選、判斷題)
- 2024電力建設(shè)工程質(zhì)量問題通病防止手冊(cè)
- 【初中地理】世界的聚落+課件-2024-2025學(xué)年七年級(jí)地理上學(xué)期(湘教版2024)
- 辯論英文課件教學(xué)課件
- 2023-2024學(xué)年四川省宜賓市八年級(jí)上學(xué)期期末數(shù)學(xué)試卷及參考答案
- (統(tǒng)編版2024)語(yǔ)文七年級(jí)上冊(cè) 第四單元寫作《思路要清晰》 課件(新教材)
評(píng)論
0/150
提交評(píng)論