在日前于IPF2021浪潮數據中心合作伙伴大會期間舉辦的數據存儲論壇上,西部數據公司副總裁兼中國區業務總經理劉鋼做了題為“創新存儲架構,賦能智算浪潮”的主題演講,闡釋了西部數據公司在大數據時代的存儲應對之道。
西部數據公司副總裁兼中國區業務總經理劉鋼
大數據時代存儲面臨挑戰
在如今的數字經濟時代,數據作為企業的寶貴資產,已經成為驅動企業發展的核心生產力要素。伴隨以人工智能、物聯網、5G等為代表的數字技術的不斷發展和落地,其帶來的是數據量級的激烈增長。事實上,對于企業用戶而言,要存儲這些寶貴資產也面臨著極大挑戰。
劉鋼在演講中談到,如今數據的來源并不僅僅是人,也包含了成千上萬的機器設備,以及數據中心所產生的數據。而次生數據的放大效應也會產生更巨量的數據。在未來幾年中,這些新增數據量加在一起會達到驚人的3ZB。
而即便數據增長如此快速,但最終也只有1.5%的數據被存儲下來。因為對于數據存儲而言,企業用戶既存在海量的存儲需求,也存在快速訪問尋求,同時也對于存儲的成本和功耗提出更高的要求。
西部數據的應對之道:創新存儲架構
當前數據存放的關鍵技術基本可分為兩種,其一是HDD,用于存放大數據;其二是SSD,對應著快數據的存放。劉鋼表示,為了應對大數據時代的上述問題及挑戰,僅憑一種存儲技術顯然難以做到。西部數據所做的是對存儲架構進行創新。
由于數據對于存儲的需求并不相同,有著不同的分層。而無論是SSD還是HDD,當對數據進行分區,其在存儲盤中引發的效應就會增強。在西部數據看來,創新的存儲架構包括三種:
第一種存儲架構是分布式存儲。相對于傳統中心化的存儲方法WEB2.0,WEB3.0是去中心化的分布式存儲方法。去中心化帶來新的存儲架構,同時也帶來了存儲在成本和容量方面的優勢。
第二種存儲架構是分層存儲。數據分為不同層,根據數據對于存儲的容量、時延等指標的需求,西部數據將其分為極熱存儲、熱存儲、溫存儲、冷存儲和極冷存儲五層。不同的數據需求需要對應不同的存儲設備。
例如冷存儲大容量盤可達到18TB,極冷存儲則可引入多次讀取等技術;而在快存儲中,用戶希望快速訪問高價值數據,進行業務的預測或決策等,因此可以應用SSD解決。
值得一提的是,尤其是對于互聯網領域云存儲而言,HDD容量密度的提升可以降低整體數據中心的部署及運營成本。比如在配置不變的前提下,將HDD密度從14TB提升至18TB,則可以降低22%的服務器使用,單位功耗則會降低21%。因此,許多特別是互聯網服務商多會快速跟進最新的存儲容量。
第三種存儲架構是分區存儲。SSD中往往會設有一個預留空間(7.68TB為7%,6.4TB為28%),其很多時候會進行數據垃圾的收集。而在ZNS SSD中,預留空間容量為零,但采用了新的技術進行分區處理。ZNS SSD帶來的一大好處是,垃圾數據收集時并沒有拉低整體存儲的性能,同時也降低了成本。
在美國健康數據管理服務商Qumulo應用案例中,其采用西部數據Ultrastar SN640 7.68TB NVMe SSD之后,每日可讀取和分析高達2PB的數據,數據分析量提升20倍,極大推進了疫苗開發工作以及對疫情的控制。
另外,IPFS通過采用(4U60+18T) 相比傳統存儲方案(4U36+16T)讓機柜空間減少46%,電源功耗降低36%,實現TCO成本的降低。
西部數據的三大優勢
應該說,在企業用戶的數據存儲中,SSD對于用戶整體存儲的成本和性能的影響至關重要。而對于SSD供應商而言,要極大降低SSD成本,擁有自己的大規模產能非常重要。
會上,劉鋼強調了西部數據在SSD領域擁有的三大核心優勢:
第一, 西部數據擁有全球領先的SSD產能優勢。在這方面,西部數據與鎧俠可以占到全球產能三分之一的份額。
第二, 西部數據擁有領先的SSD技術優勢。今年2月,西部數據發布了最新第六代162層3D閃存技術。其橫向單元陣列密度較上一代技術提高了約10%;與112層堆疊技術相比,第六代技術將晶圓尺寸有效減小40%,大大優化成本;與上一代產品相比,第六代程序性能提升2.4倍,讀取延遲降低約10%,I/O性能提高約66%。
第三, 西部數據擁有垂直企業級固態硬盤縱向集成優勢。例如在全球最大電商之一應用案例中,其對于穩定性的要求是上下10%波動,而西部數據相應方案的實測波動僅為0.11%。
除了全球市場,西部數據也與中國企業巨頭保持了緊密的合作。比如西部數據與浪潮一直存在非常多的合作。
劉鋼表示,在面臨大數據時代挑戰時,應對之道是創新的存儲架構,包括分布式存儲、分層存儲和分區存儲。西部數據不僅提供新的技術來不斷創新和優化存儲產品及解決方案,也會攜手合作伙伴共同創新企業級存儲市場的未來。
西部數據公司副總裁兼中國區業務總經理劉鋼
“高速發展的人工智能在對數字經濟產生巨大賦能和推動的同時,也推動整個計算產業向'智慧計算'方向演進,巨量模型和海量數據,對算力和存儲的需求呈指數級增長。我們很高興能持續深化與浪潮的合作,結合雙方前沿科技與產品的獨特優勢,協力打造出高性能、低成本、且兼具穩定性與擴展性等特點的卓越解決方案,優化資源配置,賦能智慧計算。未來,西部數據將與浪潮加強縱深合作,不斷以創新的數據存儲架構和解決方案,應對市場多樣化的需求,并攜手生態系統中的各方伙伴共同推動智能產業的轉型與發展,為行業用戶創造更多價值。”劉鋼如是說。
申請創業報道,分享創業好點子。點擊此處,共同探討創業新機遇!
隨著數字中國戰略的步步落實,大數據已經成為錨定戰略定位、搶得市場先機的重要基礎元素。為彰顯行業發展現狀,遴選、推薦優秀企業,長城戰略咨詢近日在2023中國國際大數據產業博覽會期間,重磅發布《中國大數據獨角獸企業榜單》,根據獨角獸企業國家推薦性標準,篩選出259家2022年中國大數據(潛在)獨角獸企業
2023年6月15日至18日,2023北京健康醫療大數據論壇、醫促會華夏健康數據與數字醫學高峰論壇、第三屆中華預防醫學會腎臟病預防與控制專業委員會學術會議將同期于北京舉行。論壇以“學術引領數智健康”為主題,著眼國家戰略需求,聚焦前沿科技在健康醫療領域的發展與實踐,薈萃全球頂尖學術觀點,促進多方跨界融
近日,北京市科學技術委員會、中關村科技園區管理委員會公示了北京市2023年第2批科技型中小企業名單,谷器數據借助優秀的科技自主創新能力成功入選。此次評價指標圍繞科研人員、研發投入、科技成果等三個維度,成功入選科技型中小企業是對谷器數據專業化發展、自主創新能力、產品技術實力的激勵與肯定??萍夹椭行∑髽I
評審寄語面向車間現場生產制造過程的數字化管理,谷器數據SupplyX·MES通過推動更有效的工廠運行和現場效率,提供從接收生產計劃到制成最終產品全過程的生產活動實現優化的信息,成為新型工業化的標桿力量!近日,由中國科學院《互聯網周刊》、中國社會科學院信息化研究中心等機構聯合主辦的“2023(第八屆)
在如今這個數字化轉型時代,大數據在企業發展的過程中發揮了至關重要的作用,大數據技術以更高效和有效的方式提供最好的服務,同時還可以提高生產力、提高客戶滿意度和更高效的智慧化運營。其中,成都四方偉業軟件股份有限公司(以下簡稱“四方偉業”)以優秀的大數據產品和服務獲得了多項行業榮譽。去年,2022數博會數
把脈中國數據智能化
2023年,幾乎可以被定義為中國互聯網公司的“大模型元年”。ChatGPT的全球爆紅,徹底點燃國內的大模型賽道,曾經的“創業英雄”、如今的商業領袖們親自下場,接連發布生成式人工智能產品與大模型布局。大模型火了,沉寂許久的互聯網行業又有了新的“戰事”。同時,大模型的快速發展也改變了云市場的現狀,企業對
近日,數字化市場研究咨詢機構愛分析發布了《2022愛分析·數據智能廠商全景報告》,愛分析從技術研發能力、服務客戶數量、收入規模等維度對廠商進行了全面專業的評估
2022年11月18日,首個國家級大數據產業創新賽事——2022第一屆中國大數據大賽圓滿落幕。工業和信息化部信息技術發展司數字經濟推進處處長張建倫,中國電子技術標準化研究院副院長孫文龍出席頒獎典禮并致辭
2022年11月17日,在廈門市工業和信息化局的指導下,以“數據確權”為主題的2022數據資產(廈門)論壇在廈門成功舉辦。本次論壇以“數據確權”為主題,由廈門市互聯網域名應用服務產業協會和構信網(公信.中國)聯合主辦
近日,國內知名數字化市場研究咨詢機構愛分析正式發布《2022愛分析·信創廠商全景報告》(以下簡稱“報告”)。報告綜合考慮企業關注度、行業落地進展等因素,遴選出在信創市場中具備成熟解決方案和落地能力的廠商。
10月31日下午,由數博會執委會主辦、數據觀(北京)傳媒科技有限公司承辦、貴陽大數據交易所協辦的第四期數博思享會“實踐先行觀公共數據價值與應用”活動成功舉辦。
近日,由中國國際數字經濟博覽會組委會主辦,中國電子技術標準化研究院、河北省工業和信息化廳承辦的“第一屆中國大數據大賽”(簡稱大數據大賽)正式啟動。
廣州光點信息科技有限公司自主研發的數據中臺產品GI大數據中臺V2.0產品是國內率先推出符合新創標準的中臺產品,基于“大數據+AI”等技術全新打造,集數據采集、融合、治理、服務、管理為一體的旗艦平臺。
廣州光點信息科技有限公司自主研發的數據中臺產品GI大數據中臺V2.0產品是國內率先推出符合新創標準的中臺產品,基于“大數據+AI”等技術全新打造,集數據采集、融合、治理、服務、管理為一體的旗艦平臺