Ceph企業(yè)落地最佳技術(shù)實(shí)踐

1、1Ceph企業(yè)落地最佳技術(shù)實(shí)踐議程1. 挑戰(zhàn)方案設(shè)計(jì)經(jīng)驗(yàn)法則挑戰(zhàn)3用戶經(jīng)常發(fā)現(xiàn)很難及時(shí)了解最新技術(shù)和相關(guān)最佳實(shí)踐什么是分布式存儲(chǔ)？什么是Ceph：RADOS, OSD, RBD, PG, RGW, MDS, CephFS.?選擇廠家重要性足夠多案例：價(jià)格、研發(fā)、服務(wù)能提供基礎(chǔ)架構(gòu)的廠家Ceph：積木式架構(gòu)客戶端(Windows, Linux, Unix)塊設(shè)備存儲(chǔ)（SAN）Server對(duì)象存儲(chǔ)（Objects）文件系統(tǒng)（NAS）存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器ServerServer存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器應(yīng)用程序共享文件OSOSOSCeph分布式存儲(chǔ)OSOSOS網(wǎng)絡(luò)協(xié)議集群MONRBDi

2、SCSIS3 SWIFT NFSCephFS* NFS CIFSMonitorsMONMON4方案設(shè)計(jì)5方案設(shè)計(jì)旨在為成功的體系結(jié)構(gòu)和實(shí)現(xiàn)提供路線圖什么是分布式存儲(chǔ)方案設(shè)計(jì)關(guān)鍵的體系架構(gòu)經(jīng)過驗(yàn)證的實(shí)施過程成功法則兼容性硬件+企業(yè)發(fā)行版+部署指南6方案設(shè)計(jì)7六步曲8確定需要解決的問題確認(rèn)需求方案設(shè)計(jì)討論完成設(shè)計(jì)方案實(shí)施實(shí)施文檔和結(jié)果方案設(shè)計(jì)9硬件和軟件要求專業(yè)知識(shí)要求時(shí)間要求測(cè)試要求經(jīng)驗(yàn)法則10知道什么是重要的11用例需要多高的性能？容器？是否地理冗余，例如雙活存儲(chǔ)？是否需要依賴特定的功能嗎？與其他解決方案相比，該解決方案有哪些主要區(qū)別？常用配置是否足夠，還是需要調(diào)整？部分功能是否需要二次開發(fā)？

3、了解產(chǎn)品客戶端(Windows, Linux, Unix)塊設(shè)備存儲(chǔ)（SAN）Server對(duì)象存儲(chǔ)（Objects）文件系統(tǒng)（NAS）存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器ServerServer存儲(chǔ)服務(wù)器存儲(chǔ)服務(wù)器應(yīng)用程序共享文件OSOSOSCeph分布式存儲(chǔ)OSOSOS網(wǎng)絡(luò)協(xié)議集群MONRBDiSCSIS3 SWIFT NFSCephFS* NFS CIFSMonitorsMONMONOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSDOSD OSD12選擇的痛苦13硬盤?Ceph集群支

4、持不同類型硬盤HDD or SSD？SATA、SAS、NVMe等？Ceph設(shè)計(jì)用于吞吐量，而不是低延遲的IOPS (至少到目前為止）請(qǐng)勿使用消費(fèi)類硬盤14硬盤使用經(jīng)驗(yàn)法則7.2k SATA 7.2k SAS 10k SAS SATA SSD SAS SSD NVME3副本集群（Ceph N版本）:7.2k SATA 30MB/s 每個(gè)磁盤10k SAS 45MB/s 每個(gè)磁盤SATA SSD 120 MB/s 每個(gè)磁盤15網(wǎng)絡(luò)？16帶寬：10GbE起步BondingVLANs巨型幀：MTU=9000網(wǎng)絡(luò)使用經(jīng)驗(yàn)法則#1機(jī)架上的上行鏈路太窄17網(wǎng)絡(luò)使用經(jīng)驗(yàn)法則#218集群網(wǎng)絡(luò) = 2 X 業(yè)務(wù)網(wǎng)

5、絡(luò)服務(wù)器?19認(rèn)證的硬件：確保兼容性CPU：類型、主頻、Socket、核數(shù)RAID控制卡：支持的帶寬跟硬盤數(shù)比例支持PCIe的規(guī)格和通道數(shù)內(nèi)存帶寬和數(shù)量CPU64-bit ARM & X86_64AMD, Ampere, Huawei, Intel, Marvell, etc普通SATA/SAS存儲(chǔ)每個(gè)磁盤：1x 2GHzSSD每個(gè)磁盤： 1-2x 2GHzNVME每個(gè)磁盤：2-4x 2+GHz20MDS 服務(wù)器21MDS：打開文件越多，需要更多的RAM cache neededCPU：推薦三個(gè)或更多coresMetadata: 推薦把metadata pool 放在SSD/NVMe 上網(wǎng)關(guān)22RGW對(duì)象網(wǎng)關(guān)：建議使用更多RAM和CPU內(nèi)核我們推薦:12 CPU cores80GB RAM其他網(wǎng)關(guān)：Samba, ISCSI & NFS16GB RAM4 6 個(gè) CPU cores實(shí)施指南23滿足需求24業(yè)務(wù)需求：RPO/RTO數(shù)據(jù)保護(hù)多站點(diǎn)性能需求：硬件選擇軟件需求：協(xié)議：塊（RBD/iSCSI）、對(duì)象(S3/swift)、文件(NFS/CephFS/CIFS)數(shù)據(jù)保護(hù)現(xiàn)在我們可以做方案設(shè)計(jì)設(shè)計(jì)文檔實(shí)施部署測(cè)試上線維保25實(shí)施指南硬軟件實(shí)施指南硬體配置包括截圖存儲(chǔ)控制器設(shè)置固件實(shí)施過程網(wǎng)絡(luò)設(shè)計(jì)OS安裝配置Ceph安裝配置