




已閱讀5頁,還剩18頁未讀, 繼續(xù)免費閱讀
版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
第1章 Essential NAS案例匯總1.1 一汽集團(tuán)存儲系統(tǒng)擴(kuò)容一汽集團(tuán)目前生產(chǎn)中心已經(jīng)構(gòu)建了一套完整的業(yè)務(wù)系統(tǒng),采用DMX1000作為業(yè)務(wù)系統(tǒng)的存儲平臺。隨著一汽集團(tuán)業(yè)務(wù)系統(tǒng)規(guī)模的不斷擴(kuò)大,業(yè)務(wù)種類的不斷增加,生產(chǎn)中心的存儲平臺容量增加,而且性能要求也隨著提高。為此,我們將為一汽集團(tuán)設(shè)計一套全新的數(shù)據(jù)集中存儲系統(tǒng),包括HDS Essential NAS文件共享系統(tǒng)和HDS USP V磁盤存儲系統(tǒng),供主業(yè)務(wù)系統(tǒng)使用。系統(tǒng)構(gòu)架圖如下:在一汽集團(tuán)的業(yè)務(wù)系統(tǒng)中包含有ERP、PDM等核心業(yè)務(wù)系統(tǒng),從業(yè)務(wù)系統(tǒng)角度分析,它們都是基于Oracle數(shù)據(jù)庫運行的,是典型的OLTP類型業(yè)務(wù),對系統(tǒng)性能要求較高,主要采用數(shù)據(jù)塊存儲方式,為滿足其生產(chǎn)的具體需求,建議采用高性能的HDS USP V并配置高性能磁盤用于核心生產(chǎn)。存儲系統(tǒng)升級改造的重點是生產(chǎn)數(shù)據(jù)從原有的DMX1000上遷移到新購存儲系統(tǒng)上,無論采購什么存儲系統(tǒng),數(shù)據(jù)遷移是不可避免的。我們推薦的USP V由于具備成熟的存儲虛擬化技術(shù),可以最大限度在整合和遷移過程中不影響業(yè)務(wù)系統(tǒng)運行,確保切換到新存儲系統(tǒng)在最短時間的周期內(nèi)完成。建議首先考慮將核心ERP、PDM數(shù)據(jù)遷移到升級存儲上來;其它數(shù)據(jù)可根據(jù)條件逐步遷移到升級存儲上。升級的數(shù)據(jù)中心存儲系統(tǒng)應(yīng)分為三個層次,主機(jī)層、網(wǎng)絡(luò)層和存儲層。而存儲層又因為擴(kuò)容了USP V,可分為生產(chǎn)層、恢復(fù)層、保護(hù)層、歸檔層。主機(jī)層:在一汽集團(tuán)數(shù)據(jù)中心的業(yè)務(wù)系統(tǒng)中,主機(jī)主要進(jìn)行信息處理和數(shù)據(jù)庫運行,在主機(jī)端安裝HBA卡用于建立數(shù)據(jù)訪問通道。由于主業(yè)務(wù)系統(tǒng)是典型的OLTP應(yīng)用,所以應(yīng)用對數(shù)據(jù)訪問性能的要求非常高,為了滿足這一要求,我們建議利用原有主機(jī)端安裝多塊HBA卡,提供多條數(shù)據(jù)通道,通過安裝HDS的數(shù)據(jù)通道管理軟件HDLM,可以提供多通道之間的流量負(fù)載均衡,確保高性能的數(shù)據(jù)訪問。另一方面,對于生產(chǎn)系統(tǒng)這樣關(guān)鍵的系統(tǒng),鏈路的安全性需要得到保證,HDLM同樣可以提供數(shù)據(jù)通道之間的失敗切換功能。網(wǎng)絡(luò)層:SAN網(wǎng)絡(luò)中網(wǎng)絡(luò)層是非常關(guān)鍵的一個部分,它負(fù)責(zé)將主機(jī)和存儲系統(tǒng)連接在一起,并且提供一個高靈活性、高擴(kuò)展性的環(huán)境,以適應(yīng)業(yè)務(wù)系統(tǒng)不斷發(fā)展帶來的主機(jī)和存儲系統(tǒng)的擴(kuò)展。在SAN網(wǎng)絡(luò)設(shè)計中,我們采用冗余的網(wǎng)絡(luò)設(shè)計,按照本項目的要求,我們建議改造原有的SAN存儲網(wǎng)絡(luò),配置2臺MDS9500的72口的導(dǎo)向器構(gòu)成冗余FABRIC,為主機(jī)和存儲系統(tǒng)提供冗余的、可持續(xù)發(fā)展的連接路徑。存儲層:存儲層或者說整個SAN網(wǎng)絡(luò)存儲系統(tǒng)的核心設(shè)備是磁盤陣列,在數(shù)據(jù)中心存儲系統(tǒng)中,我們建議采用HDS公司性能最高、功能最強(qiáng)、擴(kuò)展性最大的磁盤陣列系統(tǒng)USP V通用存儲平臺和,該系統(tǒng)的出現(xiàn),完全改變了存儲業(yè)界的工業(yè)標(biāo)準(zhǔn),致使各個競爭友商的產(chǎn)品又一次處于落后狀態(tài)。在整個信息中心的建設(shè)過程中,集中存儲的數(shù)據(jù)平臺因為數(shù)據(jù)量的增加,應(yīng)用對磁盤響應(yīng)速度、磁盤容量、存儲時間、存儲策略各不相同,為此建議一汽集團(tuán)在本次擴(kuò)容的同時,重新規(guī)劃存儲,使之更趨于合理分配和使用。存儲層中包括HDS USP V存儲設(shè)備,及異構(gòu)存儲的EMC DMX,HDSHDS USP V存儲設(shè)備作為主存儲,同時可以將EMC DMX設(shè)備納入到其虛擬化的管理中,提供三種連接方式,共同構(gòu)成一汽集團(tuán)的生產(chǎn)存儲系統(tǒng)。在數(shù)據(jù)中心由于文件共享的需求,本次系統(tǒng)升級推薦了大容量、高性能NAS網(wǎng)關(guān)設(shè)備Essential NAS。生產(chǎn)層-要求24x7 使用數(shù)據(jù),同時管理復(fù)雜存儲環(huán)境;采用HDS的高端磁盤系統(tǒng)USP V通用存儲平臺;恢復(fù)層-實現(xiàn)快速恢復(fù)生產(chǎn)數(shù)據(jù),通過對生產(chǎn)卷(數(shù)據(jù)庫)作快照實現(xiàn)快速恢復(fù),保證數(shù)據(jù)一致性;保護(hù)層-要求查找并恢復(fù)所需要的數(shù)據(jù);配合原有備份系統(tǒng)制定靈活的策略備份應(yīng)用數(shù)據(jù)。1.2 國土資源部土地勘探規(guī)劃院國土資源部土地勘探規(guī)劃院構(gòu)建滿足數(shù)百TB-PB級海量數(shù)據(jù)存儲能力、具有安全的數(shù)據(jù)備份功能和分級存儲管理機(jī)制的存儲系統(tǒng),并形成與之配套安全存儲與監(jiān)控環(huán)境,保障第二次全國土地調(diào)查國家級成果系統(tǒng)安全存儲和有效管理。一方面,大幅度擴(kuò)大在線存儲容量和備份系統(tǒng)容量,提高數(shù)據(jù)管理效率,滿足數(shù)據(jù)及時服務(wù)和處理需求。合理分析有關(guān)業(yè)務(wù)對數(shù)據(jù)在線量需求,并規(guī)劃保證數(shù)據(jù)安全、系統(tǒng)安全和有效管理所需要的備份空間,科學(xué)配置磁盤陣列和磁帶庫容量和性能要求。另一方面,構(gòu)建分級存儲機(jī)制,實現(xiàn)數(shù)據(jù)生命周期管理,建立經(jīng)濟(jì)高效可持續(xù)運行模式。增加二級存儲存儲系統(tǒng),構(gòu)建合適比例的在線、近線、離線存儲,提高存儲系統(tǒng)性價比,建設(shè)自動備份和海量數(shù)據(jù)分級存儲管理系統(tǒng),實現(xiàn)海量數(shù)據(jù)快速遷移,通過數(shù)據(jù)生命周期管理,滿足今后不斷增加的土地調(diào)查數(shù)據(jù)管理需求。存儲網(wǎng)邏輯結(jié)構(gòu)如圖所示:存儲網(wǎng)邏輯結(jié)構(gòu)圖存儲系統(tǒng)包括SAN存儲和NAS存儲兩部分,其中SAN部分包含50TB存儲空間、NAS部分包含150TB存儲空間:a. 存儲交換網(wǎng)配置Brocade 5120光纖交換機(jī),每臺24個4Gb光纖接口,與原有光纖交換機(jī)互為冗余,任意一臺發(fā)生故障都不影響數(shù)據(jù)存儲訪問的正常進(jìn)行。b. SAN存儲配置USP V磁盤陣列作為SAN存儲設(shè)備,50TB有效空間。c.NAS存儲配置Essential NAS1300C設(shè)備作為NAS存儲設(shè)備,它使用另一臺AMS1000磁盤陣列作為其存儲單元,配置150TB空間。Essential NAS1300C包含兩個互為冗余的雙激活NAS節(jié)點,每個NAS節(jié)點均通過光纖交換機(jī)連接AMS1000磁盤陣列的兩個控制器,并使用其上可訪問的磁盤邏輯單元(LUN)作為存儲單元。NAS系統(tǒng)共配置16GB高速緩存作為NAS文件存取緩存,再加上AMS1000中的8GB高速緩存,整個NAS存儲系統(tǒng)共包含24GB高速緩存,可確保NAS系統(tǒng)提供高效的文件讀寫性能。一臺獨立的AMS1000磁盤陣列作為Essential NAS1300C的存儲單元設(shè)備。AMS1000采用1TB 7200RPM的SATA磁盤作為存儲磁盤,每8塊磁盤構(gòu)成一個RAID5 (7D+1P)磁盤組,系統(tǒng)提供的所有數(shù)據(jù)磁盤合計提供150TB空間。另配置4塊1TB 7200RPM的SATA磁盤作為在線熱備份磁盤,供磁盤故障發(fā)生時,替換故障盤,自動恢復(fù)故障磁盤所存儲的數(shù)據(jù),不影響業(yè)務(wù)正常的數(shù)據(jù)存取訪問。方案還為核心業(yè)務(wù)建立了數(shù)據(jù)分級存儲和數(shù)據(jù)自動遷移系統(tǒng),業(yè)務(wù)流程如下:用戶存取文件數(shù)據(jù)IP網(wǎng)絡(luò)NAS網(wǎng)關(guān)服務(wù)器NAS盤陣用戶存取數(shù)據(jù)庫數(shù)據(jù)IP網(wǎng)絡(luò)小型機(jī)FC網(wǎng)絡(luò)FC盤用戶訪問共享空間IP網(wǎng)絡(luò) NAS網(wǎng)關(guān)服務(wù)器NAS盤陣 FC盤陣數(shù)據(jù)FC網(wǎng)絡(luò)應(yīng)用服務(wù)器(遷移歸檔)磁帶庫(永久歸檔和備份)NAS盤陣數(shù)據(jù)IP網(wǎng)絡(luò)應(yīng)用服務(wù)器(遷移歸檔) FC網(wǎng)絡(luò)磁帶庫(永久歸檔和備份)1.3 國家海洋局環(huán)境預(yù)報中心國家海洋局環(huán)境預(yù)報中心中采用了神威的并行文件系統(tǒng),達(dá)100TB以上的處理容量,物理上當(dāng)前的系統(tǒng)需要一個更大容量的存儲平臺提供大數(shù)據(jù)量的歸檔,容量需求為200TB的磁盤容量。按照系統(tǒng)設(shè)計的具體要求,項目建設(shè)的關(guān)鍵是核心存儲的建設(shè),如何保證其對大量歸檔數(shù)據(jù)提供充分的數(shù)據(jù)共享和安全運行的支持,是我們重點要考慮。同時兼顧系統(tǒng)的易管理性和可擴(kuò)展性,減少用戶的工作量,免除不必要的麻煩。從結(jié)構(gòu)上分析,當(dāng)前的存儲接口技術(shù)有FC, NAS, iSCSI等,根據(jù)業(yè)務(wù)特點,NAS接口更能滿足系統(tǒng)對歸檔的要求:l 一方面NAS可以提供NFS(UNIX)或CIFS(WIN)的通用文件系統(tǒng)接口,當(dāng)前系統(tǒng)I/O服務(wù)器只要可以mount所提供的文件系統(tǒng),就可以有共享的存儲空間;l 另一方面,NAS的共享性可以保證所有I/O服務(wù)器可以同時對同一存儲空間進(jìn)行數(shù)據(jù)存取方案建議采用HDS Essential NAS的NAS文件共享雙節(jié)點和1臺HDS AMS2500的全光纖存儲提供200TB磁盤容量,AMS2500中采用1TB的SATA磁盤。 NAS設(shè)備直接連接到TCP/IP網(wǎng)絡(luò)上,通過TCP/IP網(wǎng)絡(luò)存取管理數(shù)據(jù),類似于網(wǎng)絡(luò)文件服務(wù)器的概念。NAS作為一種服務(wù)管理系統(tǒng),易于安裝和部署,管理使用也很方便。同時由于可以允許客戶機(jī)不通過服務(wù)器直接在NAS中存取數(shù)據(jù),因此對服務(wù)器來說可以減少系統(tǒng)開銷。NAS為異構(gòu)平臺使用統(tǒng)一存儲系統(tǒng)提供了解決方案。由于NAS的結(jié)構(gòu)只需要在一個基本的磁盤陣列柜外增加一套服務(wù)控制端系統(tǒng),對硬件要求很低,軟件成本也不高,甚至可以使用免費的各類解決方案。方案推薦使用采用HDS Essential NAS雙節(jié)點(控制器冗余、自動切換)和1臺AMS2500的全光纖磁盤陣列作為歸檔數(shù)據(jù)存儲系統(tǒng)。存儲方案設(shè)計示意圖如下圖所示:方案建議使用HDS Essential NAS存儲系統(tǒng)作為數(shù)據(jù)歸檔存儲系統(tǒng)的核心設(shè)備。HDS Essential NAS存儲系統(tǒng)由兩個主要的硬件部分組成:1. HDS Essential NAS雙冗余NAS主控節(jié)點單元(NAS主控設(shè)備);2. HDS AMS2500磁盤陣列NAS存儲單元(1臺),該部分作為NAS的實際數(shù)據(jù)存放設(shè)備,配置200塊1TB容量的7200轉(zhuǎn)/分 SATA磁盤,建議每8-10塊磁盤組成一個RAID6陣列組,另預(yù)留幾塊熱備份磁盤。作為系統(tǒng)管理空間使用;3. 為保證數(shù)據(jù)吞吐,總體緩存達(dá)到了16GB;NAS存儲系統(tǒng)作為文件共享存儲設(shè)備使用,使用NFS或CIFS協(xié)議為安裝UNIX或Windows操作系統(tǒng)的存儲服務(wù)器提供NAS影像和文件共享存儲。此外,NAS的存儲單元HDS AMS2500配置多達(dá)8個FC接口,可為其他關(guān)鍵業(yè)務(wù)系統(tǒng)提供基于FC協(xié)議的塊級數(shù)據(jù)共享訪問。1.4 Essential NAS國內(nèi)外案例列表國家用戶名稱基本配置城市ChinaCAB of South-to-North Water Diversion Mid. Route 南水北調(diào)建設(shè)委員會Essential NASBeijingChinaChina Construction Bank 中國建設(shè)銀行Essential NASNanningChinaChina Land Surveying and Planning Institute 國土資源部土地勘探規(guī)劃院Essential NASBeijingChinaFAW-VW Automobile Co., Ltd. 一汽集團(tuán)Essential NASChangchunChinaJiangsu Province Local Tax Bureau 江蘇省地稅Essential NASNanjingChinaPeoples Hospital of Quzhou 衢州人民醫(yī)院Essential NASQuzhouChinaThe State Administration of Radio Film and TV 國家廣播電影電視總局Essential NASBeijingChina Hong KongHospital AuthorityEssential NASHong KongChina TaiwanAerial Survey officeEssential NASTaipeiChina TaiwanRealtek Semiconductor Corp.Essential NASTaipeiIndiaPolaris Software Lab LimitedEssential NASChennaiKoreaHyosung Information Systems Co., LtdEssential NASSeoulMalaysiaIngram Micro Malaysia Sdn BhdEssential NASSelangorSingaporeSingapore Health Services Pte LtdEssential NASSingaporeArgentinaTAO IT S.A.Essential NASCiudad de Buenos AiresAustraliaAustralian Broadcasting CorporationEssential NASUltimoAustraliaMEDIAWARE INTERNATIONAL PTY LTDEssential NASCanberra International AirportAustraliaPrime Television LimitedEssential NASBerkeleyBrazilBANCO FIBRA S.A.Essential NASSao PauloUSAAlliance Data SystemsEssential NASIRVINGUSABooz Allen HamiltonEssential NASPensacolaUSABrookhaven National LaboratoryEssential NASUPTONUSAGlobal Cash Access, IncEssential NASLAS VEGASUSAHOV ServicesEssential NASTroyUSAHuntsville Hospital SystemsEssential NASHUNTSVILLEUSAJackson Hospital & Clinic, IncEssential NASMontgomeryUSAJurinnov LtdEssential NASCLEVELANDUSAMovie Gallery Inc.Essential NASWILSONVILLEUSANew Frontier MediaEssential NASGREENWOOD VILLAGEUSANPD GroupEssential NASPORT WASHINGTONUSAO, Inc.Essential NASSALT LAKE CITYUSARadio Frame NetworksEssential NASREDMONDUSARush University Medical CenterEssential NASCHICAGOUSASkidmore CollegeEssential NASSARATOGA SPRINGSUSATractor Supply CompanyEssential NASBRENTWOODUSAUnited Launch AllianceEssential NASLittletonUSAUS Property & Fiscal Office for CO WarehouseEssential NASCentennialVenezuelaPetroleos de Venezuela, S.AEssential NASMiranda第2章 AMS2500案例匯總2.1 國家海洋局環(huán)境預(yù)報中心國家海洋局環(huán)境預(yù)報中心中采用了神威的并行文件系統(tǒng),達(dá)100TB以上的處理容量,物理上當(dāng)前的系統(tǒng)需要一個更大容量的存儲平臺提供大數(shù)據(jù)量的歸檔,容量需求為200TB的磁盤容量。按照系統(tǒng)設(shè)計的具體要求,項目建設(shè)的關(guān)鍵是核心存儲的建設(shè),如何保證其對大量歸檔數(shù)據(jù)提供充分的數(shù)據(jù)共享和安全運行的支持,是我們重點要考慮。同時兼顧系統(tǒng)的易管理性和可擴(kuò)展性,減少用戶的工作量,免除不必要的麻煩。從結(jié)構(gòu)上分析,當(dāng)前的存儲接口技術(shù)有FC, NAS, iSCSI等,根據(jù)業(yè)務(wù)特點,NAS接口更能滿足系統(tǒng)對歸檔的要求:l 一方面NAS可以提供NFS(UNIX)或CIFS(WIN)的通用文件系統(tǒng)接口,當(dāng)前系統(tǒng)I/O服務(wù)器只要可以mount所提供的文件系統(tǒng),就可以有共享的存儲空間;l 另一方面,NAS的共享性可以保證所有I/O服務(wù)器可以同時對同一存儲空間進(jìn)行數(shù)據(jù)存取方案建議采用HDS Essential NAS的NAS文件共享雙節(jié)點和1臺HDS AMS2500的全光纖存儲提供200TB磁盤容量,AMS2500中采用1TB的SATA磁盤。 NAS設(shè)備直接連接到TCP/IP網(wǎng)絡(luò)上,通過TCP/IP網(wǎng)絡(luò)存取管理數(shù)據(jù),類似于網(wǎng)絡(luò)文件服務(wù)器的概念。NAS作為一種服務(wù)管理系統(tǒng),易于安裝和部署,管理使用也很方便。同時由于可以允許客戶機(jī)不通過服務(wù)器直接在NAS中存取數(shù)據(jù),因此對服務(wù)器來說可以減少系統(tǒng)開銷。NAS為異構(gòu)平臺使用統(tǒng)一存儲系統(tǒng)提供了解決方案。由于NAS的結(jié)構(gòu)只需要在一個基本的磁盤陣列柜外增加一套服務(wù)控制端系統(tǒng),對硬件要求很低,軟件成本也不高,甚至可以使用免費的各類解決方案。方案推薦使用采用HDS Essential NAS雙節(jié)點(控制器冗余、自動切換)和1臺AMS2500的全光纖磁盤陣列作為歸檔數(shù)據(jù)存儲系統(tǒng)。存儲方案設(shè)計示意圖如下圖所示:方案建議使用HDS Essential NAS存儲系統(tǒng)作為數(shù)據(jù)歸檔存儲系統(tǒng)的核心設(shè)備。HDS Essential NAS存儲系統(tǒng)由兩個主要的硬件部分組成:1. HDS Essential NAS雙冗余NAS主控節(jié)點單元(NAS主控設(shè)備);2. HDS AMS2500磁盤陣列NAS存儲單元(1臺),該部分作為NAS的實際數(shù)據(jù)存放設(shè)備,配置200塊1TB容量的7200轉(zhuǎn)/分 SATA磁盤,建議每8-10塊磁盤組成一個RAID6陣列組,另預(yù)留幾塊熱備份磁盤。作為系統(tǒng)管理空間使用;3. 為保證數(shù)據(jù)吞吐,總體緩存達(dá)到了16GB;NAS存儲系統(tǒng)作為文件共享存儲設(shè)備使用,使用NFS或CIFS協(xié)議為安裝UNIX或Windows操作系統(tǒng)的存儲服務(wù)器提供NAS影像和文件共享存儲。此外,NAS的存儲單元HDS AMS2500配置多達(dá)8個FC接口,可為其他關(guān)鍵業(yè)務(wù)系統(tǒng)提供基于FC協(xié)議的塊級數(shù)據(jù)共享訪問。2.2 杭州長興電視臺核心制作存儲系統(tǒng)是杭州長興電視臺的核心數(shù)據(jù)交換平臺,在滿足大規(guī)模集群渲染計算性能要求的前提下,同時承擔(dān)所有業(yè)務(wù)子模塊之間的業(yè)務(wù)數(shù)據(jù)交換,存儲網(wǎng)絡(luò)架構(gòu)選擇具備高性能的SAN存儲系統(tǒng)。核心存儲系統(tǒng)需滿足系統(tǒng)存儲容量、并發(fā)網(wǎng)絡(luò)帶寬峰值的需求,并確保系統(tǒng)安全運行,硬盤陣列控制器、各關(guān)鍵服務(wù)器、網(wǎng)絡(luò)核心交換設(shè)備均不存在單點故障隱患。每套制作系統(tǒng)采用一臺 AMS2500和一臺AMS2100作為核心存儲系統(tǒng)。拓?fù)涫疽鈭D如下:2.3 北京電視臺為了適應(yīng)電視發(fā)展的需求,快速全面的滿足觀眾收視要求,北京電視臺進(jìn)行了全面的電視節(jié)目制作系統(tǒng)建設(shè),宣傳片制作系統(tǒng)采用一臺AMS2500作為核心存儲系統(tǒng)。宣傳片系統(tǒng)包括數(shù)十個制作系統(tǒng)工作站點,節(jié)目素材要進(jìn)行集中存儲,空間要進(jìn)行統(tǒng)一管理,要求能夠?qū)崿F(xiàn)高性能、高效的節(jié)目制作過程,為整個電視臺的工作提供有力的后臺技術(shù)保障。解決方案特點如下:(1) 高性能、高穩(wěn)定性存儲系統(tǒng)性能在制作系統(tǒng)中至關(guān)重要,AMS2500很高的性能和并行吞吐帶寬,特別適合大容量文件并行讀寫的需求。在制作系統(tǒng)中滿足了連續(xù)的視頻流的編輯需求,存儲系統(tǒng)帶寬的連續(xù)性、穩(wěn)定性要求很高。(2) 數(shù)據(jù)可靠性在可靠性方面,AMS2500采用存硬件雙激活控制器,軟件方面也具備靈活高效的特點,可有效減少故障點并保證在單點故障的情況下,系統(tǒng)能夠持續(xù)運行,并能及時在線的恢復(fù)故障。(3) 可擴(kuò)展性隨著制作工作站增加,素材數(shù)據(jù)量的增加,AMS2500存儲系統(tǒng)具備400TB以上的可擴(kuò)展性,可以保證業(yè)務(wù)的連續(xù)性。2.4 AMS2500國內(nèi)外部分案例列表國家用戶名稱基本配置城市ChinaBank of Communications 交通英航AMS2500, DUAL CONTROLLER, 16GB CACHEShanghaiChinaChangxing County broadcasting & TV Station 長興電視臺AMS2500, DUAL CONTROLLER, 16GB CACHEHuzhouChinaChina Beijing TV Station 北京電視臺AMS2500, DUAL CONTROLLER, 16GB CACHEBeijingChinaChina Galaxy Securities Company Limited AMS2500, DUAL CONTROLLER, 16GB CACHEBeijingChinaChina Netcom (Group) Company LtdAMS2500, DUAL CONTROLLER, 16GB CACHEJinanChinaMinistry of Raliway (GuangZhou Railway) 廣州鐵路局AMS2500, DUAL CONTROLLER, 16GB CACHEGuangzhouChinaShenZhen Easttop Trade & Logistics Co Ltd 深圳東方商貿(mào)公司AMS2500, DUAL CONTROLLER, 16GB CACHEBeijingChinaSichuan Jiuzhou Electronic Technology Co., LTD 四川九州電子公司AMS2500, DUAL CONTROLLER, 16GB CACHEMianyangChinaState Oceanic Administration PRC 國家海洋局AMS2500, DUAL CONTROLLER, 16GB CACHEBeijingChinaThe Peoples Bank of China 人民銀行AMS2500, DUAL CONTROLLER, 16GB CACHEHangzhouChinaTiBet Public Security Bureau 西藏公共安全局AMS2500, DUAL CONTROLLER, 16GB CACHELasha CityChina Hong KongLi & Fung (Trading) Limited AMS2500, DUAL CONTROLLER, 16GB CACHEHong KongChina Hong KongMorgan Stanley Asia LtdAMS2500, DUAL CONTROLLER, 16GB CACHEHong KongAustraliaAcer Computer Australia Pty LimitedAMS2500, DUAL CONTROLLER, 16GB CACHEHomebush BayAustraliaAustralian Broadcasting CorporationAMS2500, DUAL CONTROLLER, 16GB CACHEUltimoAustraliaChevron Australia Pty LtdAMS2500, DUAL CONTROLLER, 16GB CACHEBelmontAustraliaCITECAMS2500, DUAL CONTROLLER, 16GB CACHESpringfield CentralAustraliaCitecAMS2500, DUAL CONTROLLER, 16GB CACHEBrisbaneAustraliaColes Group LimitedAMS2500, DUAL CONTROLLER, 16GB CACHEBurwood EastAustraliaDepartment of DefenceAMS2500, DUAL CONTROLLER, 16GB CACHEDeakinAustraliaDepartment of Health & Human ServicesAMS2500, DUAL CONTROLLER, 16GB CACHEHobartAustraliaGovernment Employees Superannuation BoardAMS2500, DUAL CONTROLLER, 16GB CACHEPerthAustraliaInsurance Australia Group LimitedAMS2500, DUAL CONTROLLER, 16GB CACHEBurwoodAustraliaNational Australia Bank LtdAMS2500, DUAL CONTROLLER, 16GB CACHEEast MelbourneAustraliaUniversity of QueenslandAMS2500, DUAL CONTROLLER, 16GB CACHESt LuciaAustraliaUniversity of QueenslandAMS2500, DUAL CONTROLLER, 16GB CACHESt LuciaIndonesiaChevron Indonesia CompanyAMS2500, DUAL CONTROLLER, 16GB CACHEJakartaIndonesiaPT Telekomunikasi IndonesiaAMS2500, DUAL CONTROLLER, 16GB CACHEJakartaKoreaHyosung Information Systems Co., LtdAMS2500, DUAL CONTROLLER, 16GB CACHESeoulKorea (Republic of)LG Hitachi Ltd.AMS2500, DUAL CONTROLLER, 16GB CACHESeoulMalaysiaTelekom Malaysia BerhadAMS2500, DUAL CONTROLLER, 16GB CACHEKuala LumpurSingaporeSingapore Health Services Pte LtdAMS2500, DUAL CONTROLLER, 16GB CACHESingaporeSingaporeStarHub LtdAMS2500, DUAL CONTROLLER, 16GB CACHESingaporeArgentinaTelecom PersonalAMS2500, DUAL CONTROLLER, 16GB CACHEBuenos AiresBrazilREDETVAMS2500, DUAL CONTROLLER, 16GB CACHERio de JaneiroMexicoDiblo Corporativo S.A. de C.V.AMS2500, DUAL CONTROLLER, 16GB CACHEMEXICOUSAAbbott LaboratoriesAMS2500, DUAL CONTROLLER, 16GB CACHEIRVINGUSAAffiliated Computer ServicesAMS2500, DUAL CONTROLLER, 16GB CACHEDALLASUSAAIG Technologies, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHEFORT WORTHUSAAIM Management GroupAMS2500, DUAL CONTROLLER, 16GB CACHEHOUSTONUSABoardwalk Pipeline PartnersAMS2500, DUAL CONTROLLER, 16GB CACHEHOUSTONUSABoardwalk Pipeline PartnersAMS2500, DUAL CONTROLLER, 16GB CACHEHOUSTONUSAChicago Board Options ExchangeAMS2500, DUAL CONTROLLER, 16GB CACHECHICAGOUSAElectro-Motive DieselAMS2500, DUAL CONTROLLER, 16GB CACHELA GRANGEUSAFidelity Information Services, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHELITTLE ROCKUSAGeoeyeAMS2500, DUAL CONTROLLER, 16GB CACHEMARYLAND HEIGHTSUSAGoldman SachsAMS2500, DUAL CONTROLLER, 16GB CACHEHOUSTONUSAHastings EntertainmentAMS2500, DUAL CONTROLLER, 16GB CACHEAMARILLOUSAHuron Consulting GroupAMS2500, DUAL CONTROLLER, 16GB CACHEMOUNT PROSPECTUSAIdearc Information Services LLCAMS2500, DUAL CONTROLLER, 16GB CACHEGRAPEVINEUSAJPMorgan Chase Bank, N.A.AMS2500, DUAL CONTROLLER, 16GB CACHECarrolltonUSAJPS Health NetworkAMS2500, DUAL CONTROLLER, 16GB CACHEFORT WORTHUSAMary Kay, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHEADDISONUSARush University Medical CenterAMS2500, DUAL CONTROLLER, 16GB CACHECHICAGOUSAState Farm InsuranceAMS2500, DUAL CONTROLLER, 16GB CACHEBLOOMINGTONUSASurescriptsAMS2500, DUAL CONTROLLER, 16GB CACHEELK GROVE VILLAGEUSAThe Capital Group CompanyAMS2500, DUAL CONTROLLER, 16GB CACHESan AntonioUSAVerizon WirelessAMS2500, DUAL CONTROLLER, 16GB CACHESOUTHLAKEUSAWAMS2500, DUAL CONTROLLER, 16GB CACHEPINEVILLEUSAWells Fargo Services CompanyAMS2500, DUAL CONTROLLER, 16GB CACHECLAYTONCanadaAtco I-TekAMS2500, DUAL CONTROLLER, 16GB CACHEEdmontonCanadaBank of Nova ScotiaAMS2500, DUAL CONTROLLER, 16GB CACHETorontoCanadaCanadian Institute for Health InformationAMS2500, DUAL CONTROLLER, 16GB CACHETorontoCanadaCanadian Institute of HealthAMS2500, DUAL CONTROLLER, 16GB CACHEOttawaCanadaeHealth OntarioAMS2500, DUAL CONTROLLER, 16GB CACHEMississaugaCanadaMinistere du RevenueAMS2500, DUAL CONTROLLER, 16GB CACHEMontrealCanadaTORONTO STOCK EXCHANGEAMS2500, DUAL CONTROLLER, 16GB CACHETorontoUSAAcxiom/R. R. Donnelley & Sons CompanyAMS2500, DUAL CONTROLLER, 16GB CACHELANCASTERUSAAFLACAMS2500, DUAL CONTROLLER, 16GB CACHEColumbusUSABaldwin & Lyons, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHEINDIANAPOLISUSABrown Brothers Harriman and CompanyAMS2500, DUAL CONTROLLER, 16GB CACHEBOSTONUSABurlington Coat FactoryAMS2500, DUAL CONTROLLER, 16GB CACHEEDGEWATER PARKUSACingular WirelessAMS2500, DUAL CONTROLLER, 16GB CACHEALPHARETTAUSADeutsche BankAMS2500, DUAL CONTROLLER, 16GB CACHEPARSIPPANYUSADewitt Army Community HospitalAMS2500, DUAL CONTROLLER, 16GB CACHEFort BelvoirUSADominion Resources Services, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHERichmondUSAEDSAMS2500, DUAL CONTROLLER, 16GB CACHECharlotteUSAEpana NetworksAMS2500, DUAL CONTROLLER, 16GB CACHENEW YORKUSAGeneral Electric CompanyAMS2500, DUAL CONTROLLER, 16GB CACHEHamiltonUSAGreenville Hospital SystemAMS2500, DUAL CONTROLLER, 16GB CACHEGREENVILLEUSAHome BOX Office Inc.AMS2500, DUAL CONTROLLER, 16GB CACHEHAUPPAUGEUSAInterbank FXAMS2500, DUAL CONTROLLER, 16GB CACHESECAUCUSUSALexis-NexisAMS2500, DUAL CONTROLLER, 16GB CACHEAlpharettaUSALIBERTY MUTUAL INSURANCE COMPANYAMS2500, DUAL CONTROLLER, 16GB CACHEPortsmouthUSALNR Property CorporationAMS2500, DUAL CONTROLLER, 16GB CACHEMIAMIUSAMorgan Stanley New York Plaza Open (ISG)AMS2500, DUAL CONTROLLER, 16GB CACHENEW YORKUSANPD GroupAMS2500, DUAL CONTROLLER, 16GB CACHEPORT WASHINGTONUSANYC Dept of Environmental ProtectionAMS2500, DUAL CONTROLLER, 16GB CACHEFlushingUSAOpen Solutions, IncAMS2500, DUAL CONTROLLER, 16GB CACHEGLASTONBURYUSARite Aid CorporationAMS2500, DUAL CONTROLLER, 16GB CACHESHIREMANSTOWNUSASAP America, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHENEWTOWN SQUAREUSASAMS2500, DUAL CONTROLLER, 16GB CACHEMiamiUSASealed Air CorporationAMS2500, DUAL CONTROLLER, 16GB CACHEDUNCANUSASnap-on Business SolutionsAMS2500, DUAL CONTROLLER, 16GB CACHERichfieldUSAState of North CarolinaAMS2500, DUAL CONTROLLER, 16GB CACHERALEIGHUSAState Street Bank & Trust CompanyAMS2500, DUAL CONTROLLER, 16GB CACHENorth QuincyUSAStevens Capital ManagementAMS2500, DUAL CONTROLLER, 16GB CACHERADNORUSASungardAMS2500, DUAL CONTROLLER, 16GB CACHEPhiladelphiaUSASynovus Financial Corp.AMS2500, DUAL CONTROLLER, 16GB CACHEColumbusUSAThomson Legal and Regulatory Applications, IncAMS2500, DUAL CONTROLLER, 16GB CACHEROCHESTERUSATime, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHEPARSIPPANYUSATime, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHENEW YORKUSATotal System Services, IncorporatedAMS2500, DUAL CONTROLLER, 16GB CACHEColumbusUSATotal Systems Services, IncorporatedAMS2500, DUAL CONTROLLER, 16GB CACHECOLUMBUSUSAUniversity of PennsylvaniaAMS2500, DUAL CONTROLLER, 16GB CACHEPhiladelphiaUSAUniversity of PennsylvaniaAMS2500, DUAL CONTROLLER, 16GB CACHEPhiladelphiaUSAVerizon Data Services IncorporatedAMS2500, DUAL CONTROLLER, 16GB CACHETEMPLE TERRACEUSAWall IndustriesAMS2500, DUAL CONTROLLER, 16GB CACHEEXETERUSAWR BerkleyAMS2500, DUAL CONTROLLER, 16GB CACHEWILMINGTONUSAAbacus Direct LLCAMS2500, DUAL CONTROLLER, 16GB CACHETHORNTONUSAAdobe Systems, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHESAN JOSEUSAApollo GroupAMS2500, DUAL CONTROLLER, 16GB CACHEPHOENIXUSAAT&TAMS2500, DUAL CONTROLLER, 16GB CACHEKANSAS CITYUSAAT&T Services, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHESAN DIEGOUSAAtos Origin, Inc.AMS2500, DUAL CONTROLLER, 16GB CACHELENEXAUSABank of AmericaAMS2500, DUAL CONTROLLER, 16GB CACHECONCORDUSABank of America - KCAMS
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 科技園區(qū)場地租賃分成及人才引進(jìn)合同
- 草場租賃與草原生態(tài)補(bǔ)償及資源保護(hù)合同
- 清算還款協(xié)議書范本
- 建筑工程測量員專業(yè)服務(wù)協(xié)議
- 出租車乘客安全保障合同協(xié)議書
- 花藝沙龍培訓(xùn)
- 2024年“工會杯”職工技能競賽化學(xué)檢驗員賽項理論考試題庫(濃縮500題)
- 高三化學(xué)一輪復(fù)習(xí) 訓(xùn)練題-物質(zhì)結(jié)構(gòu)與性質(zhì)
- 工廠成本方面培訓(xùn)
- 植物護(hù)理幼兒園
- 2025年中學(xué)教師資格考試《綜合素質(zhì)》教育法律法規(guī)經(jīng)典案例分析及強(qiáng)化試題集(含答案)
- 2025年小學(xué)語文期末考試試題及答案
- 發(fā)改委立項用-超薄玻璃項目可行性研究報告
- 《等腰三角形的性質(zhì)》課件
- 工業(yè)互聯(lián)網(wǎng)與船舶行業(yè)融合應(yīng)用參考指南 2025
- 2024年浙江省《輔警招聘考試必刷500題》考試題庫附答案【綜合題】
- 2025年北京市第一次普通高中學(xué)業(yè)水平合格性考試歷史試題(含答案)
- 蘇教版-數(shù)學(xué)二年級下冊-期末試卷10套
- 《陸上風(fēng)電場工程設(shè)計概算編制規(guī)定及費用標(biāo)準(zhǔn)》(NB-T 31011-2019)
- ××團(tuán)支部換屆選舉選票
- 復(fù)雜超限結(jié)構(gòu)設(shè)計要點
評論
0/150
提交評論