產(chǎn)品展示
Product display
潤(rùn)宇RDFS分布式文件系統(tǒng)(Runyu Distributed File System)
一、產(chǎn)品概述
潤(rùn)宇 RDFS分布式文件系統(tǒng)，為計(jì)算程序提供數(shù)據(jù)共享空間、高性能IO接口和海量文件存儲(chǔ)。RDFS分布式文件系統(tǒng)為高性能計(jì)算領(lǐng)域及其他領(lǐng)域的多種應(yīng)用提供高性能的存儲(chǔ)服務(wù)。
二、業(yè)務(wù)挑戰(zhàn)
如何提高海量數(shù)據(jù)的讀寫(xiě)效率和線性擴(kuò)展IO性能？
系統(tǒng)底層的Lustre文件系統(tǒng)支持讀寫(xiě)性能的在線橫向擴(kuò)展，通過(guò)橫向累加服務(wù)器和存儲(chǔ)的形式，可以獲得數(shù)10GB/s的IO讀寫(xiě)性能。同時(shí)，通過(guò)系統(tǒng)配置頁(yè)面的IO監(jiān)控分析和參數(shù)調(diào)節(jié)，可以針對(duì)具體的應(yīng)用，進(jìn)一步提高讀寫(xiě)效率。
如何解決數(shù)據(jù)延時(shí)？
系統(tǒng)支持多種底層物理網(wǎng)絡(luò)架構(gòu)，在低延時(shí)網(wǎng)絡(luò)如Infiniband上，結(jié)合Lustre文件系統(tǒng)的文件Cache機(jī)制，用戶能夠獲得更低的數(shù)據(jù)訪問(wèn)延時(shí)。
如何對(duì)文件進(jìn)行統(tǒng)一管理？
系統(tǒng)提供全局唯一的名字空間，用戶可以像使用本地文件系統(tǒng)一樣，使用和管理一個(gè)PB級(jí)的存儲(chǔ)空間。
如何高效、合理的分配存儲(chǔ)空間？
系統(tǒng)支持用戶和用戶組配額設(shè)置和管理，支持針對(duì)不同硬件的磁盤(pán)池配置和分配，同時(shí)，系統(tǒng)還可以對(duì)不同設(shè)備上數(shù)據(jù)分配的權(quán)重做手工設(shè)置，并提供存儲(chǔ)空間使用的水位報(bào)警。
如何實(shí)現(xiàn)集群系統(tǒng)中的數(shù)據(jù)共享？
系統(tǒng)提供全局唯一的名字空間，用戶可以在集群的任意一臺(tái)節(jié)點(diǎn)看到相同的文件系統(tǒng)映像。同時(shí)系統(tǒng)完全兼容POSIX語(yǔ)義，用戶可以對(duì)文件部分加鎖，保證多臺(tái)節(jié)點(diǎn)間數(shù)據(jù)訪問(wèn)的一致性。
如何實(shí)現(xiàn)批量、自動(dòng)化的存儲(chǔ)系統(tǒng)管理和監(jiān)控？
通過(guò)系統(tǒng)的圖形化和命令行客戶端，用戶可以方便的完成批量系統(tǒng)安裝、啟動(dòng)、關(guān)閉、參數(shù)配置、日志分析、用戶配額設(shè)置、系統(tǒng)性能監(jiān)控、進(jìn)程IO監(jiān)控等任務(wù)。
三、產(chǎn)品功能
1. 高性能的數(shù)據(jù)存儲(chǔ)服務(wù)
2. 線性可擴(kuò)展的IO性能
3. 字節(jié)粒度的數(shù)據(jù)鎖和細(xì)粒度的元數(shù)據(jù)鎖
4. MPI環(huán)境下的IO性能優(yōu)化
5. 支持NFS和CIFS的重新輸出
6. 細(xì)粒度、集中式的性能監(jiān)控
7. 進(jìn)程IO行為跟蹤和圖形化展示
8. 日志分析
四、核心特點(diǎn)
高性能
GB/s-TB/s 的IO
1000+用戶，大規(guī)模并發(fā)訪問(wèn)
橫向擴(kuò)展
IO性能隨硬件數(shù)量增加達(dá)到線性提升
智能監(jiān)控
I/O性能監(jiān)控
信息收集模塊
支持多種基本操作計(jì)數(shù)，支持以文件系統(tǒng)名稱(chēng)、服務(wù)器、OST為單位的讀寫(xiě)速度，讀寫(xiě)次數(shù)，讀寫(xiě)大小統(tǒng)計(jì)和文件操作統(tǒng)計(jì)。
圖形展示模塊
支持以主機(jī)名、統(tǒng)計(jì)時(shí)間區(qū)域、自動(dòng)刷新頻率等為參數(shù)的定制監(jiān)控服務(wù)，包括全局監(jiān)控、MDS監(jiān)控、OSS監(jiān)控、客戶端監(jiān)控、OST監(jiān)控五種模式。
進(jìn)程IO特征收集
進(jìn)程I/O特征收集是本系統(tǒng)的特色之一，針對(duì)一個(gè)運(yùn)行的作業(yè)，本系統(tǒng)通過(guò)內(nèi)核特征收集器，能夠動(dòng)態(tài)地收集約30多個(gè)I/O特征，并進(jìn)行數(shù)據(jù)庫(kù)歸檔。
I/O趨勢(shì)分析
基于長(zhǎng)期收集歸檔的I/O 特征，系統(tǒng)能夠按照用戶、軟件版本、作業(yè)類(lèi)型做出作業(yè)效率的長(zhǎng)期趨勢(shì)分析。
六、軟件試用
點(diǎn)擊 發(fā)送郵件申請(qǐng)?jiān)囉脻?rùn)宇RDFS分布式文件系統(tǒng)！
