那曲檬骨新材料有限公司

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

你見過1EB的存儲系統(tǒng)嗎?堪稱世界上最大的單一文件系統(tǒng)

存儲加速器 ? 來源:yxw ? 2019-06-19 09:31 ? 次閱讀

近日,全球超級計算機領導者 Cray Inc. 宣布,F(xiàn)rontiersman Cray為“最大的單一文件系統(tǒng)”提供了5000萬美元的存儲合同,為美國Oak Ridge國家實驗室(ORNL)Frontier exascale超級計算機提供1 exabyte的ClusterStor存儲。

Frontier是價值6億美元的Cray-AMD exascale系統(tǒng),最高可達1.5 exaFLOPS,將于2021年交付,并于2022年驗收。它將成為ORNL 200 petaFLOPS Summit超級計算機的后續(xù)產品

Cray憑借其在5月份由AMD EPYC處理器和Radeon Instinct GPU驅動的Shasta超級計算機贏得了Frontier競標,因此相關的存儲合同并不出乎意料。

該存儲解決方案是針對億億次級數(shù)據密集型工作負載的新設計,將基于下一代Cray?ClusterStor?存儲和Cray Slingshot?高速互連。下一代Cray?ClusterStor?存儲文件系統(tǒng)是基于Cray的Shasta?的架構,并且將作為ORNL國家實驗室的的一部分集成到Frontier exascale超級計算機。

新的存儲解決方案將由超過一兆字節(jié)(EB)的混合閃存和運行Lustre?并行文件系統(tǒng)的高容量存儲組成。一個exabyte的存儲空間是1000PB,這足以存儲超過2億個高清電影。存儲解決方案將通過Slingshot系統(tǒng)互連到ORNL exascale超級計算機,實現(xiàn)系統(tǒng)上同時運行的各種建模,仿真,分析和AI工作負載的無縫擴展。該Frontier exascale超級計算機預計將于2021年首次亮相,成為世界上功能最強大的計算機,性能超過1.5 exaflops。

與ORNL目前的Summit超級計算機的存儲相比,這種下一代解決方案,容量是其四倍以上(超過1 EB(或1,000 PB)而不是250 PB),另外和基于Spectrum Scale的存儲系統(tǒng)的2.5 TB / s相比,吞吐量將超過4倍(高達10 TB / s)。面向ORNL的新型Cray ClusterStor存儲解決方案將包含40多個存儲柜,并在兩層存儲中提供超過1 EB的總容量,以支持數(shù)據的隨機和流式訪問。主層是用于高性能臨時存儲的閃存層,而輔助層是用于高容量存儲的硬盤層。新的存儲系統(tǒng)將成為ORNL的中心系統(tǒng),該Frontier exascale系統(tǒng)將由具有ZFS本地卷的Lustre全局并行文件系統(tǒng)訪問,所有這些都在一個全局POSIX命名空間中,這將使其成為世界上最大的單個高性能文件系統(tǒng)。

ORNL的Frontier項目主管Justin Whitt透露,新的解決方案將為科學家提供傳統(tǒng)建模和模擬以及深度學習和數(shù)據科學所需的性能和容量。

HPC存儲系統(tǒng)傳統(tǒng)上使用大型硬盤陣列來滿足大量可預測的數(shù)據讀取和寫入訪問。這與人工智能機器學習工作負載形成鮮明對比,后者通常混合使用小型和大型數(shù)據的隨機和順序訪問。因此,傳統(tǒng)存儲系統(tǒng)不適合這些工作負載的綜合使用,因為混合數(shù)據的訪問和智能高速系統(tǒng)互連的需求,可以快速地在超級計算機上移動大量數(shù)據,從而使這些不同的工作負載在Frontier exascale系統(tǒng)上同時運行。

下一代基于ClusterStor的存儲解決方案通過提供閃存和容量存儲的混合來支持復雜的訪問模式,強大的新軟件堆棧以提高數(shù)據的可管理性和分層,以及通過計算和存儲實現(xiàn)無縫擴展,從而解決了這些挑戰(zhàn)。除了擴展之外,存儲與Slingshot網絡的直接連接消除了對大多數(shù)傳統(tǒng)HPC網絡所需的存儲路由器的需求。此外,由于Slingshot是以太網兼容的,這樣可以降低整個系統(tǒng)的成本,降低復雜性并降低延遲,從而提供更高的前所未有的應用性能和ROI。

通過將超級計算的性能和規(guī)模與云計算的生產力和完整的數(shù)據中心互操作性相結合,Cray的Shasta超級計算機,ClusterStor存儲和Slingshot互連正迅速成為億億時代的領先技術選擇。惠普正以13億美元的價格收購Cray,該交易預計將在技術巨頭2020財年的第一季度完成。這意味著HPE現(xiàn)在正處于億元計算競爭中,并將提供自己的存儲。Cray宣布其計算,軟件,存儲和互連功能正在為HPC和企業(yè)客戶提供產品,預計可用性將從2019年底開始 。

值得關注的是,Cray / Intel Aurora exaflopper將于2021年推出,與Frontier一樣。日本的Arm-powered Post-K exascale系統(tǒng)也即將到期,中國的天河-3可能會在2020年出現(xiàn)。ATOS為歐洲處理器計劃提供的歐盟exascale計算機預計將在2021年推出其首批系統(tǒng),其中1個exaFLOPS Gen 2 GPP Cronos系統(tǒng)將于2022年至2023年推出。IBM也將參加exascale競賽,El Capitan也將于2021年參加Argonne領導計算機設施。屆時存儲社區(qū)將透露更多關于各大超級計算機上的存儲系統(tǒng)。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    19407

    瀏覽量

    231177
  • 超級計算機
    +關注

    關注

    2

    文章

    464

    瀏覽量

    42027
  • 存儲系統(tǒng)

    關注

    2

    文章

    414

    瀏覽量

    40935
  • Cray
    +關注

    關注

    0

    文章

    7

    瀏覽量

    8719

原文標題:你見過1EB的存儲系統(tǒng)嗎?堪稱世界上最大的單一文件系統(tǒng)

文章出處:【微信號:TopStorage,微信公眾號:存儲加速器】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    防止根文件系統(tǒng)破壞,OverlayRootfs 讓的設備更安全

    多個文件系統(tǒng)層合并成單一的視圖,在Linux系統(tǒng)中廣泛應用。使用OverlayRootfs的設備可以很輕松的實現(xiàn):根文件系統(tǒng)寫保護、恢復
    的頭像 發(fā)表于 01-08 16:33 ?251次閱讀
    防止根<b class='flag-5'>文件系統(tǒng)</b>破壞,OverlayRootfs 讓<b class='flag-5'>你</b>的設備更安全

    EE-329:在SHARC處理器運行FAT16文件系統(tǒng)和DOS命令

    電子發(fā)燒友網站提供《EE-329:在SHARC處理器運行FAT16文件系統(tǒng)和DOS命令.pdf》資料免費下載
    發(fā)表于 01-06 14:22 ?0次下載
    EE-329:在SHARC處理器<b class='flag-5'>上</b>運行FAT16<b class='flag-5'>文件系統(tǒng)</b>和DOS命令

    EE-289:在ADSP-BF533 Blackfin處理器實現(xiàn)FAT32文件系統(tǒng)

    電子發(fā)燒友網站提供《EE-289:在ADSP-BF533 Blackfin處理器實現(xiàn)FAT32文件系統(tǒng).pdf》資料免費下載
    發(fā)表于 01-05 09:13 ?0次下載
    EE-289:在ADSP-BF533 Blackfin處理器<b class='flag-5'>上</b>實現(xiàn)FAT32<b class='flag-5'>文件系統(tǒng)</b>

    服務器數(shù)據恢復——Ext4文件系統(tǒng)umount失敗的數(shù)據恢復案例

    塊組:Ext4文件系統(tǒng)的全部空間被劃分為若干個塊組,每個塊組結構基本上相同。 塊組描述符表:每個塊組都對應個塊組描述符,這些塊組描述符統(tǒng)放在文件系統(tǒng)的前部,稱為塊組描述符表。每個
    的頭像 發(fā)表于 11-13 13:25 ?445次閱讀
    服務器數(shù)據恢復——Ext4<b class='flag-5'>文件系統(tǒng)</b>umount失敗的數(shù)據恢復案例

    虛擬化數(shù)據恢復—UFS2文件系統(tǒng)數(shù)據恢復案例

    虛擬化數(shù)據恢復環(huán)境: SAN環(huán)境下通過iSCSI實現(xiàn)FreeNAS,F(xiàn)reeNAS采用的UFS2文件系統(tǒng)。物理存儲架構在臺服務器,另外兩臺服務器
    的頭像 發(fā)表于 11-11 11:02 ?221次閱讀

    服務器數(shù)據恢復—EXT3文件系統(tǒng)下誤刪除數(shù)據的恢復案例

    服務器數(shù)據恢復環(huán)境: 郵件服務器中有組由8塊盤組成的RAID5陣列, 上層是Linux操作系統(tǒng)+EXT3文件系統(tǒng)。 服務器故障: 由于誤刪除導致文件系統(tǒng)中的郵件數(shù)據丟失。
    的頭像 發(fā)表于 10-23 15:11 ?213次閱讀
    服務器數(shù)據恢復—EXT3<b class='flag-5'>文件系統(tǒng)</b>下誤刪除數(shù)據的恢復案例

    服務器數(shù)據恢復—V7000存儲NTFS文件系統(tǒng)數(shù)據恢復案例

    服務器存儲數(shù)據恢復環(huán)境: 臺掛載在Windows server服務器的v7000存儲存儲空間劃分了
    的頭像 發(fā)表于 10-14 14:03 ?281次閱讀
    服務器數(shù)據恢復—V7000<b class='flag-5'>存儲</b>NTFS<b class='flag-5'>文件系統(tǒng)</b>數(shù)據恢復案例

    NetApp數(shù)據恢復—NetApp存儲WAFL文件系統(tǒng)下誤刪除的數(shù)據恢復案例

    NetApp某型號存儲,WAFL文件系統(tǒng)。 工作人員誤操作將該NetApp存儲中的重要數(shù)據刪除。
    的頭像 發(fā)表于 10-11 14:17 ?232次閱讀

    Linux根文件系統(tǒng)的掛載過程

    Linux根文件系統(tǒng)(rootfs)是Linux系統(tǒng)中所有其他文件系統(tǒng)和目錄的起點,它是內核啟動時掛載的第文件系統(tǒng)
    的頭像 發(fā)表于 10-05 16:50 ?515次閱讀

    小型文件系統(tǒng)如何選擇?FatFs和LittleFs優(yōu)缺點比較

    01? 概述 文件系統(tǒng)在嵌入式系統(tǒng)中的作用不可或缺,它提供了對非易失性存儲設備(如閃存、SD卡等)的數(shù)據進行有效組織和管理的能力。通過文件系統(tǒng)
    的頭像 發(fā)表于 09-29 16:14 ?2181次閱讀
    小型<b class='flag-5'>文件系統(tǒng)</b>如何選擇?FatFs和LittleFs優(yōu)缺點比較

    想提高開發(fā)效率,不要忘記文件系統(tǒng)

    ?同學們都知道,開發(fā)過程中文件系統(tǒng)的重要性,同樣的,4G-Cat.1模組的文件系統(tǒng)也非常重要,它通常與數(shù)據傳輸速度、存儲效率,以及數(shù)據安全性等有非常重要的關系,在應用開發(fā)中也非常重要。
    的頭像 發(fā)表于 09-21 08:18 ?300次閱讀
    想提高開發(fā)效率,不要忘記<b class='flag-5'>文件系統(tǒng)</b>

    如何修改buildroot和debian文件系統(tǒng)

    本文檔主要介紹在沒有編譯環(huán)境的情況下,如何修改buildroot和debian文件系統(tǒng)方法,如在buildroot文件系統(tǒng)中添加文件、修改目錄等文件操作,在debian
    的頭像 發(fā)表于 07-22 17:46 ?545次閱讀
    如何修改buildroot和debian<b class='flag-5'>文件系統(tǒng)</b>

    linux--sysfs文件系統(tǒng)

    sysfs文件系統(tǒng) sysfs,全稱為System Filesystem,是個由Linux內核實現(xiàn)的虛擬文件系統(tǒng)。它扮演著個橋梁的角色,將內核中的設備和驅動程序信息以
    的頭像 發(fā)表于 07-08 11:37 ?1004次閱讀
    linux--sysfs<b class='flag-5'>文件系統(tǒng)</b>

    【服務器數(shù)據恢復】異常斷電導致UFS2文件系統(tǒng)故障的數(shù)據恢復案例

    臺服務器通過FreeNAS(本案例使用的是UFS2文件系統(tǒng))實現(xiàn)iSCSI存儲,整個UFS2文件系統(tǒng)作為
    的頭像 發(fā)表于 02-22 14:48 ?636次閱讀
    【服務器數(shù)據恢復】異常斷電導致UFS2<b class='flag-5'>文件系統(tǒng)</b>故障的數(shù)據恢復案例

    Linux系統(tǒng)如何擴展文件系統(tǒng)

    當數(shù)據盤沒有創(chuàng)建分區(qū),只在設備創(chuàng)建了文件系統(tǒng)。或者格式化了硬盤,就直接mount系統(tǒng)使用。
    的頭像 發(fā)表于 02-21 09:53 ?882次閱讀
    百家乐官网数学规律| 百家乐官网平台哪个比较安全| 娱乐博彩| 崇礼县| 富田太阳城二期| 网上百家乐解密| 大发888有赢钱的吗| 大发888手机| 大发888黄金版| 连环百家乐| 利来国际网址| 百家乐官网怎样玩的| 百家乐路单显示程序| 大发888娱乐城英皇国际| 六合彩网址大全| 百家乐官网群1188999| 真人百家乐是啥游戏| 百家乐红桌布| 网上百家乐官网洗码技巧| VIP百家乐-挤牌卡安桌板| 大发888黄金版网址| 百家乐官网认牌| 百家乐太阳城小郭| 威尼斯人娱乐城开户| 在线百家乐官网有些一| 千亿百家乐官网的玩法技巧和规则| 百家乐技巧平注常赢法| 博E百百家乐官网娱乐城| 百家乐开发软件| 云博娱乐城| 百家乐官网博彩通博彩网皇冠网澳门赌场真人赌博 | bet365提款时间| 百家乐官网出千手法| 百家乐猜大小规则| 哈密市| 百家乐玩法与规则| 环球棋牌评测网| 红树林百家乐官网的玩法技巧和规则 | 百家乐投注方式| 任你博| 金百家乐官网的玩法技巧和规则 |