在科技界的一則最新動態(tài)中，知名科技博客Phoronix于3月23日披露，隨著Linux 6.15內(nèi)核版本的臨近，開源社區(qū)中的EROFS（增強(qiáng)型只讀文件系統(tǒng)）即將迎來一次重大革新。此次升級的核心亮點(diǎn)在于，EROFS將引入48位尋址支持，以滿足人工智能模型訓(xùn)練過程中對數(shù)據(jù)存儲容量的迫切需求。

一直以來，EROFS受限于32位塊尋址機(jī)制，其最大容量被限定在16TiB（在4KiB塊大小下）。而48位尋址技術(shù)的加入，將徹底打破這一瓶頸，使得EROFS能夠輕松應(yīng)對AI訓(xùn)練中所需的大規(guī)模數(shù)據(jù)集存儲挑戰(zhàn)，同時也為對象存儲客戶端提供了更為廣闊的存儲空間。

除了容量上的大幅提升，此次EROFS的更新還涉及到了核心磁盤結(jié)構(gòu)的全面擴(kuò)展，包括inode、設(shè)備槽以及inode塊的優(yōu)化。為了支持基本的時間戳功能，新版EROFS引入了32字節(jié)緊湊inode的mtime字段，這一改進(jìn)無疑將進(jìn)一步提升文件系統(tǒng)的實用性和靈活性。

在性能優(yōu)化方面，新版EROFS同樣不遺余力。針對Zstd壓縮算法，新版EROFS引入了字節(jié)導(dǎo)向的編碼擴(kuò)展，這一改進(jìn)使得壓縮器能夠保持其原有的高效壓縮方法，從而在提升壓縮效率的同時，也確保了數(shù)據(jù)壓縮質(zhì)量。據(jù)測試數(shù)據(jù)顯示，在啟用48位尋址后，Zstd鏡像的構(gòu)建時間得到了顯著縮短，特別是在Intel Xeon Platinum 8163 CPU上，構(gòu)建時間從原先的3分52秒驟降至12秒，這一提升無疑將為AI訓(xùn)練等高性能應(yīng)用場景帶來極大的便利。

EROFS，這一由華為最初開發(fā)并隨后由全球開源社區(qū)共同維護(hù)的輕量級只讀文件系統(tǒng)，自問世以來便以其出色的存儲效率和性能表現(xiàn)贏得了業(yè)界的廣泛關(guān)注。此次重大升級，不僅進(jìn)一步鞏固了EROFS在只讀文件系統(tǒng)領(lǐng)域的領(lǐng)先地位，更為AI、大數(shù)據(jù)等前沿科技領(lǐng)域的發(fā)展提供了強(qiáng)有力的支持。

隨著人工智能技術(shù)的不斷發(fā)展和普及，對于數(shù)據(jù)存儲和處理能力的需求也將持續(xù)增長。EROFS此次的升級，無疑為這一趨勢提供了強(qiáng)有力的技術(shù)支撐，我們有理由相信，在未來的科技發(fā)展中，EROFS將繼續(xù)發(fā)揮其獨(dú)特優(yōu)勢，為更多領(lǐng)域的應(yīng)用場景提供高效、可靠的存儲解決方案。